河原林巨大グラフプロジェクト)はじめに不特定多数の人に仕事を発注する仕組み「クラウドソーシング」の登場は、大量の人的資源の獲得を容易にした。コンピュータ科学の諸分野では、クラウドソーシングをより成熟した基盤にするために、品質管理やメカニズムデザイン、プラットフォーム設計など多様な観点で研究が進められている。クラウドソーシングの登場を受けて人工知能分野では、人間と計算機の協調問題解決を目指す「ヒューマンコンピュテーション」に関する研究が促進された。Crowdsourcing「クラウドソーシング」という言葉が最初に登場した米国Wired誌の記事。Howeによる、クラウドソーシングの概念と事例紹介の書籍。(2012)クラウドソーシングの定義を調査した論文。(2013)クラウドソーシング研究のサーベイ論文。(2011)ヒューマンコンピュテーションの研究動向をまとめた書籍。(2011)上記書籍と同様の内容のチュートリアル資料。(2013)ヒューマンコンピュテーションに関する研究トピック紹介の書籍。(2014年1月)では「ヒューマンコンピュテーションとクラウドソーシング」特集が組まれ、8篇の解説記事が掲載されている。(2012年7月)には以下の解説記事が掲載されている。Crowdクラウドソーシングの最新研究紹介ブログ。複数の研究者により運営されている。Ipeirotisによるブログ。国際会議クラウドソーシングとヒューマンコンピュテーションに関する論文が発表される主要国際会議は以下である。HCOMPヒューマンコンピュテーションとクラウドソーシングに関する国際会議。ワークショップとして4回開催された後、2013年よりAAAI主催の国際会議となった。IJCAI人工知能に関する国際会議。ヒューマンコンピュテーションや、クラウドソーシングの品質管理についての論文が例年採択されている。CHIヒューマンコンピュータインタラクションに関する国際会議。クラウドソーシングを利用したアプリケーションが多数発表されている。UISTユーザインターフェースに関する国際会議。CHIと同様に、VizWizやSoylentなど、クラウドソーシングを利用したアプリケーションが多数発表されている。Computingに関する国際会議。Turker“など、クラウドソーシングの調査論文が多数発表されている。SIGMODデータベースに関する国際会議。crowdsourcing“など、ヒューマンコンピュテーションによるデータベース操作を扱った論文が多数発表されている。WWWウェブに関する国際会議。例年、クラウドソーシングのセッションが設けられ、品質管理や報酬設定に関する論文が発表されている。ワークショップ様々な国際会議で、クラウドソーシング・ヒューマンコンピュテーションを題材にしたワークショップが開催されている。そのうち、2回以上開催されているものを紹介する。(CrowdMM)マルティメディア研究におけるクラウドソーシング・ヒューマンコンピュテーション活用についてのワークショップ。Multimediaの併設で、2012年より毎年開催されている。(CrowdSens)クラウドソーシングを利用して実世界の情報を獲得する「クラウドセンシング」についてのワークショップ。2012年にCIKM、2014年にKDDの併設で開催されている。他に、機械学習分野の国際会議ICMLとNIPSでは、近年はクラウドソーシング・ヒューマンコンピュテーションに関連したワークショップが毎年併設されている。最近3年間に開催されたものを紹介する。おいて、オーガナイズドセッションが2013年と2014年に開催されている。Leaseが管理する、クラウドソーシング研究関連情報のまとめ。国内クラウドソーシング研究者のコミュニティ。クラウドソーシング・ヒューマンコンピュテーションの活用事例クラウドソーシング・ヒューマンコンピュテーションを活用したプロジェクト等を紹介する。reCAPTCHA「人間かボットか」を判定する仕組みCAPTCHAを、人手による書籍電子化に活用するプロジェクト。Folditタンパク質の構造予測問題をゲームにすることで人間に解決させる取り組み。Grayの捜索プロジェクト。Turkで発注された。Challenge米国内の10地点に設置された赤い風船を見つけ出すコンペティション。ソーシャルネットワーク活用やチームビルディングの手法を試すことを目的に開催された。ChallengeDARPA主催の、クラウドソーシングを利用した軍用車両設計のコンペティション。PrizeオンラインDVDレンタルサービスを提供するNetflixが、推薦アルゴリズム改善のために開催したコンペティション。Duolingo言語教育プラットフォーム。一定のスキルに到達した学習者に対して、翻訳作業を発注する。Turk2005年にサービス開始された、米国Amazon社運営のクラウドソーシングの老舗プラットフォーム。画像分類や音声の書き起こし等の小規模な仕事に特化している。発注者になるには、請求先として米国内住所が設定されているクレジットカード等が必要である(2014年11月現在)。Turkと同種のプラットフォーム。発注時には、PayPal経由で支払いが可能である(2014年11月現在)。oDeskデザイン、ソフトウェア開発、文書執筆等の比較的規模が大きい仕事を対象にしたプラットフォーム。汎用的なプラットフォーム(日本国内)ランサーズ2008年にサービス開始された、日本における老舗クラウドソーシングプラットフォーム。「タスク方式」と呼ばれる小規模な仕事と、「プロジェクト方式」「コンペ方式」と呼ばれる比較的規模が大きい仕事、どちらも発注可能である。クラウドワークスランサーズと同様に、様々な種類の仕事に対応したプラットフォーム。Yahoo!クラウドソーシング小規模な仕事に特化したプラットフォーム。Crowd4U公共・学術利用を目的としたクラウドソーシングプラットフォーム。ボランティアに対して仕事を発注することができる。特定の目的を持ったプラットフォームデザイン、ソフトウェア開発、翻訳など、特定の種類の仕事に特化したクラウドソーシングプラットフォームも存在する。99designsロゴやウェブページ、名刺等のデザインに特化したプラットフォーム。TopCoderプログラミングコンテストの開催で有名なTopCoderは、ソフトウェア開発のクラウドソーシングプラットフォームも提供している。uTestソフトウェアのテストに特化したプラットフォーム。Conyac文章翻訳に特化したプラットフォーム。データ解析に特化したクラウドソーシングプラットフォームも登場している。Kaggle予測モデル構築のプラットフォーム。参加者を競わせ、優れたモデルの獲得を目指す。AnalyticsKaggleと同様のプラットフォームの国内版。ビッグデータ大学データ解析者の教育を目的とするプラットフォーム。Requesters複数の研究者によって策定された、学術目的でのクラウドソーシング利用のガイドライン。Turkの発注者を対象にした文書だが、その他のプラットフォームにも適用可能なコツが紹介されている。JavaScriptで呼び出すためのライブラリ。複数ワーカの回答を統合することで品質を保証する「回答統合手法」の研究のために、データセットや共通タスクが整備されている。ツールSQUARE複数の回答統合手法が実装されており、ベースラインとして用いることができる。データセット回答統合手法用のデータセット前述のSQUAREで用いられているデータセットの一覧。Turkにおいて収集されたデータセット。共通タスクCrowdScaleHCOMP’13で実施された、回答統合に関する共通タスク。Taskクラウドソーシングで獲得した、マルチメディア関連コンテンツに対するアノテーションの統合を目指す共通タスク。2013年は、Flickrに投稿された写真へのアノテーション、2014年はコメントへのアノテーションが対象とされた。Track情報検索分野で実施された共通タスク。文書とトピックの適合度のアノテーションをクラウドソーシングで精度良く収集する方法を競う。おわりに本稿では、クラウドソーシング・ヒューマンコンピュテーションに関する情報源を5つの観点に沿って紹介した。本研究分野拡大の一助となれば幸いである。本稿の執筆にあたり、クラウドソーシング研究会の皆様からご助言を頂きました。心より感謝申し上げます。