2019-04-13SHAREツイートシェアはてブLINEPocketこんにちは、ともろう(@tomorrowSLog)です。requestsモジュールを使った静的サイトのスクレイピングを備忘録的に書いていきます。目次はじめにタイトルの取得まとめpythonを使ってAIの勉強ができるのでオススメです。pythonを使って何か実践的なものを作りたい時によく使ってます。【requestsモジュール】pythonの文字化けを対策するはじめにrequestsモジュールとBeautifulSoupモジュールを使用するので、入ってない場合はサクッとインストールしてしまいましょう。beautifulsoup4それぞれよくわからんという場合は以下サイトを見れば問題解決!のはず。ベースのHTTPライブラリです。HTMLやXMLファイルからデータを取得するPythonのライブラリです。あなたの好きなパーサー(構文解析器)を使って、パースツリー(構文木)の探索、検索、修正を行います。http://kondou.com/BS4/タイトルの取得サクッと行きます。わからないことはみんなgoogle先生に聞けばいいうまくタイトルを取得することができました。“html.parser”はhtmlをどういうふうに扱うかという解析機のようです。わからないことはみんなgoogle先生に聞けばいいを抜き出しているのがわかりました。はじめに特段困ることもなくブログタイトルを抜き出すことができました。次は記事タイトルの抜き出しをして行きたいと思います。コメントをキャンセルメールアドレスが公開されることはありません。