Не удается очистить «https» в python 3.7 с помощью beautifulsoup 4.6.3 (Anaconda)

#python #html #web-scraping #https #beautifulsoup

#python #HTML #очистка веб-страниц #https #beautifulsoup

Вопрос:

Не удается очистить коэффициенты от sportsbet.com.au поскольку он выдает исключение.

Я не могу прочитать исключение, потому что терминал закрывается слишком быстро. Однако я полагаю, что ошибка связана с очисткой с сайта https вместо сайта http.

Например, этот https-сайт не работает:

https://www.sportsbet.com.au/

https://en.wikipedia.org/wiki/Wiki

https://www.google.com/

Как и веб-сайты, перенаправляющие на https:

http://www.sportsbet.com.au/

http://en.wikipedia.org/wiki/Wiki

http://www.google.com/

Тем не менее, этот веб-сайт работает:

http://www.espncricinfo.com/

Код выглядит следующим образом:

 import requests 
from bs4 import BeautifulSoup
import re

url = 'website' #insert website link.
page = requests.get(url)

soup = BeautifulSoup(page.content, 'html.parser')

input("Press enter to exit ;)")
  

Я пробовал page = requests.get(url,verify =False), но безуспешно.

Комментарии:

1. «Я не могу прочитать исключение, потому что терминал закрывается слишком быстро». Сначала откройте окно терминала и вызовите свой скрипт из командной строки. Никто не сможет вам помочь без информации о вашем сообщении об ошибке.

2. Решено: необходимо загрузить двоичные файлы OpenSSL.