Запретить последовательность URL-адресов в Scrapy CrawalSpider

#python #scrapy Вопрос: У меня есть маленький паук, который ползает по сайтам для социальных контактов. Я хочу, чтобы он отрицал URL-адреса, содержащие "/продукты", "/коллекции" и т. Д. Это мое правило…

Продолжить чтениеЗапретить последовательность URL-адресов в Scrapy CrawalSpider