#python #web-scraping #dynamic #scrapy #splash-screen
Вопрос:
Я пытаюсь извлечь отдельные детали автомобиля, которые динамически генерируются на этом веб-сайте «https://droom.in/product/volkswagen-polo-highline12l-diesel-2012-60b675e157e5f8a2038b46e5″, но содержимое не отображается даже после использования splash.
»’
def start_requests(self):
yield SplashRequest(
url="https://droom.in/product/volkswagen-polo-highline12l-diesel-2012-60b675e157e5f8a2038b46e5",
callback = self.parse_details
`enter code here`)
def parse_details(self, response):
data = response.xpath("//div[contains(@id, 'description')]/text()").extract()
print(data)
»’
Страница извлекается, но динамическое содержимое не помещается.
2021-06-08 06:31:51 [scrapy.core.engine] ОТЛАДКА: Обход (200) <ПОЛУЧИТЬ https://droom.in/product/volkswagen-polo-highline12l-diesel-2012-60b675e157e5f8a2038b46e5 через » rel=»nofollow noreferrer»>http://127.0.0.1:8050/render.html>> (референт: Нет)
[«]