BeautifulSoup と Python を使用して「etherscan.io」からデータをクロールしようとしています。ここにウェブサイトがあります: https://etherscan.io/txs
page_soups = []
for page in range(1, 51):
url = 'https://etherscan.io/txs?p=' + str(page)
print(url)
req = Request(url, headers={'User-Agent': 'Mozilla/5.0'})
webpage = urlopen(req).read()
page_soup = soup(webpage, "html.parser").find('tbody').find_all('a')
page_soups += page_soup
ループを使用して複数の Web ページをスクレイピングしますが、最初の 30 ページのデータしか取得できません。31番目のものには次のようなエラーがあります
その Web ページを確認すると、他のページと同じタグと要素がまだ含まれていることがわかります。私を助けてください。