Webスクレイピングが簡単にできるChromeの拡張機能を紹介2019年3月13日Webスクレイピング簡単にWebスクレイピングすることができるChromeの拡張機能「Scraper」を紹介します。Scraperのまとめスクレイピングとはなにか?スクレイピングとはインターネットにある情報を収集することをいいます。次に疑問がわいてくることとしてWEBスクレイピングしたデータをなににつかうの?という疑問です。一般的な用途だと次のようなことが考えられるそうです。一般的にはHTMLフォーマットからデータベースやスプレッドシートに格納・分析可能な構造化データへの変換に、より焦点が当てられている。コンピュータソフトウェアを利用して人間のブラウジングをシミュレートするウェブオートメーションとも関係が深い。ウェブスクレイピングの用途は、オンラインでの価格比較、気象データ監視、ウェブサイトの変更検出、研究、ウェブマッシュアップやウェブデータの統合等である。Wikipediaわたしは昔pythonを少しかじったことがありますが、beautifulsoupというライブラリをつかうことによって、pythonでWebスクレイピングを少しやったことがあります。そのほかにはseleniumというWebテストツールをつかうことでもスクレイピングができました。最近だとスクレイピングツールがたくさん登場しているようで、ちょっとみただけでも30種類くらいありすごいことになっていました。今回はその中でも使用が簡単そうなChromeの拡張機能として提供されているScraperを使ってみましたので簡単な使い方を紹介していきます。Scraper拡張機能をインストールするScraperの拡張機能インストールで困ることはとくにありません。以下のリンクにいって拡張機能をインストールするだけです。ウェブストアScraperの使用方法ScraperでWebページのコンテンツを取得するScraperはJQueryかXPathを選択できる状態になっていて、自分でセレクターや要素を指定することによって目的のデータを取り出せるようになっているようです。デフォルトではJQeuryのa要素になっているようです。ためしに自分のサイトのデータを取得してみました。a要素を取得すると、文字列とリンクのURLが自動的に取得されるようですね。セレクターを指定してみる自分のブログの記事タイトルのセレクターは.entry-titleなので、このセレクターを指定して、もう一度データを取得してみました。うまくとれていますね。データをグーグルスプレッドシートに出力するスクレイピングしたデータはグーグルスプレッドシードに出力できるようです。Docsとかかれているところをクリックすると、スプレッドシートに出力することができます。スプレッドシートに出力するときはグーグルアカウントを選択する画面がでてきますので、それを選択します。うまく出力することができました。ScraperのまとめScraperを使うと簡単にスクレイピングすることができることがわかりました。こちらの難点としてはhtmlの知識がないと使用が難しいことかもしれません。htmlを学習するなら以下のようなサイトがおすすめです。リファレンスサイト老舗Scraperの他にもWebスクレイピングツールは数十種類ありますし、これからももっと増えていくんじゃないでしょうか?Scraperのスクレイピング機能はおそらく、スクレイピングのなかでも機能が限定的なので、物足りないと思った方は他のツールをしらべてみるとよいのではないでしょうか。この記事の情報は以上になります。icon関連記事OctoparseでWebサイトのテーブルをごっそり取得する方法WordPressからスクレイピングして、それを記事として投稿する策例。スクレイピングツール。Cosmicの仮想環境を作るUbuntuにプログラミングに必用なパッケージをインストールするコマンド一覧シューティングゲームビルダー入門【STGを作ってみよう】Blender入門。実践して使いこなせるようになろう。【入門】PremiereProCS6を使ってみよう。【入門】PhotoshopCS6を使ってみよう。初心者のプログラミング当サイトをご利用いただきありがとうございますこのチートシートの作成にはかなりの時間がついやされています。【35EMrYJTRnat2f3bqr5JBvREr7xM5uhjVw。