近年ビッグデータ分析へ取り組む企業が増えてきており、Hadoopと共に話題になっているSpark。今回は注目度を増しているビッグデータ分析の高速化を実現するSparkの勉強会を開催致します。“Kafka・HBaseによるビッグデータ収集”/田中氏DMMではより高精度なサービス提供の為にHadoopの基盤上に大量データ(ビッグデータ)の収集を行っています。DMMではSparkを使った並列分散処理基盤の構築を行ってきましたが、大規模なデータ分析を実現するためにストリームデータの収集にも課題を持って取り組んでいます。本講演ではデータ収集部分に着目し、Kafka/HBaseを使ったデータ収集部のシステムの構築手順や取り組みについて判りやすく説明します。※こちらの内容はデブサミ福岡での登壇内容をベースにお話致します。MapReduceとは違ったアイデアで分散データを処理するテクノロジーです。機械学習、グラフ処理、ストリーム処理など、ビッグデータの先進的な活用にとって重要な様々な処理を実現することができ、多くの業務に適用されることが期待されています。Sparkで実現できるインメモリのマイクロバッチ処理とストリーム処理の世界をはじめ、IBMのSparkへの取り組みについてお話します。金融系・組み込み系・コミュニティサービス・ゲーム・広告等の各システムを経てDMMへ。DMM.comラボにおいて、検索システムの刷新、レコメンドエンジンの新規開発など、基盤技術の開発を担当しております。サーバーサイド、フロントエンド、ミドルウェア、インフラと領域問わず、提案から構築・実装まで幅広くやらせてもらっています。その他OSSのcontributor等もやっております。テクニカル・リードストリーム・コンピューティング(スマートフォンやセンサーなど多種多様なIT機器から収集できるデータをサーバーでリアルタイムに処理する先端技術)を軸に、多くのお客様のビッグデータ分析に関わる案件を支援。恵比寿ガーデンプレイスタワー21F)■問い合わせイベントに関する問い合わせはtech-event@dmm.comまでご連絡ください。■その他wifiをご利用いただけます。参加者の人数状況より、回線が混雑する場合がございますので、ご自身でwi-fiをお持ちの方はご持参頂きますと幸いです。※参加が難しくなった場合は、お早めにキャンセルいただけますようよろしくお願い致します。※イベントは、止むを得ず中止させて頂く場合がございます。その際はTwitterとFacebookページでご連絡させていただきますので、ご確認をお願い致します。■SNSアカウントFacebookページやTwitterでイベント情報や登壇セミナーのスライドシェアなどを発信しております。いいね!/フォローください。SparkとIBMの取り組み、そしてストリーム・コンピューティングのポイントの資料です:http://www.slideshare.net/eatsushi/sparkibm20151014コメントを投稿するには、ログインしてください。人-ヤマダダイキ掲載されるイベント情報は、利用者の皆様によりご提供いただくものであり、株式会社リクルートは本情報の正確性や内容について、一切保証するものではございません。詳しくは利用規約をご参照ください。