権利問題についてWebスクレイピングの注意事項一覧スクレイピング/クローリング的な話は、結構タブー視されてしまっています。著作権法第47条の7「情報解析のための複製等」にて認められておりますから、もっと積極的にスクレイピングしましょう、的なことをお伝えしたい、ということです。クロールとキュレーション先週は、IVSの併設イベントのCTO職や技術責任者の人たちが集まる集いに参加するために宮崎に行っていたが、そこで会った人たちの印象として、クローラを使う会社の元気な姿があった。手動でWEBから情報を取得してまとめるWEB上の情報を、クローラーと手動キュレーションで集めて、表示するというのが基本。レコメンドエンジン追加で上記の開発をしている。DoboWiki【natto・mecabで】5分で形態素分析に入門して、修造の「人生を強く生きる83の言葉」の頻出語を調べてみる。JapanBlockspringで取得したデータをAPIにできるサービスがあります。プロトタイプレベルならめちゃくちゃ便利。DeeplinkWEBサービス・スマホアプリのプロトタイプ構築支援サービスです。