タカハタ格闘技用語で、英語でなんて言うのかわからない時があるので調べてみた。タカハタpipを使ってScrapyをインストールしようとした時、下記のようなエラーが出た場合の解決方法めも。Settingsを開く。タカハタWinは基本触れたくもないのだけれど、客先で止むを得ず使わなければならない機会があった。タカハタいつかもうちょいちゃんと書く。タカハタwebページのsitemap.xmlからそのドメイン以下にあるURLの一覧を取得し、各ページをたどって情報を取得するクローラーを作ってみました。タカハタブログ書いてたりすると、「このサイトのタイトルとURLまとめてコピーしたいな〜」ってことがわりとある。新しくScrapyのプロジェクトを作るため、以下を実行。タカハタhtmlから本文に当たる箇所を判別し、抽出してくれるライブラリで有名なのがこのReadabilityだが、これまでPythonで書かれたものしかないと思っていた。