reppy 0.1.0

reppy започна от липса на memoization подкрепа в други robots.txt парсери срещани, както и липсата на подкрепа за Crawl-забавяне и на сайта на вградената robotparser. Matching Този пакет подкрепя 1996 RFC, както и допълнителни често-изпълнявани функции,...