時限遅延またはリダイレクト後に最終URLを取得ウェブサイトをスクレイプしようとしていますが、ウェブページを開くと5秒のリダイレクト遅延があります。5秒待ってから実際のページが読み込まれます。私は次のコードを試しました。print(r.history)data=r.textsoup=BeautifulSoup(data)print(soup.prettify())しかし、コードを実行すると、最終ページではなくリダイレ​​クトページが表示されます。1etherscan.ioはCloudflareによって保護されており、Cloudflareが遅延リダイレクトを引き起こしているようです。Cloudflareの目的の1つは、ボットがサイトに自動リクエストを送信するのを防ぐことです(これは、あなたがやっていることによく似ています)。Cloudflareを簡単に回避することはできません。リクエストを実際のブラウザから送信されたように「見える」ようにする必要があります-つまり、これらのリクエストを行うために使用しているツールは、実際のブラウザと同じリクエストヘッダーを提示し、ブラウザは、ブラウザと同じようにjavascriptを実行します。上記のすべてを実行できたとしても、Cloudflareは、一定期間に一定数のリクエストが行われた後、リクエストをブロック(またはチャレンジ)する可能性があります。2本当に本当にセレンまたはAPI(これが最も理にかなっている)以外のものを使用するように設定されているので、これを見ることができます。これは、cloudflareサイトを処理するためのスクレーパーですが、実行するには他のいくつか(特にNode.js)が必要です。これは非常にきちんとしていますが、より簡単な解決策がある場合は苦痛のようです。