#python
Вопрос:
Я пытаюсь соскрести с веб-страницы и хотел бы продолжать соскрести, пока не будет собрано определенное количество ссылок
html = driver.find_element(By.TAG_NAME,'html') html.send_keys(Keys.END) time.sleep(10) infos = [] links = driver.find_elements_by_tag_name('a') for link in links: post = link.get_attribute('href') if '/p/' in info: posts.append( info )
этот код очищается, и для информации я хотел бы, чтобы он продолжал прокручиваться вниз и очищал больше информации, пока не достигнет определенного количества, например 60
While infos lt;60: # scroll to bottom of page html = driver.find_element(By.TAG_NAME,'html') html.send_keys(Keys.END) # scrape infos and add them to list links = driver.find_elements_by_tag_name('a') for link in links: post = link.get_attribute('href') if '/p/' in info: posts.append( info )
Как я могу это сделать? Спасибо