吉田一星氏によるセッションをレポートしました。後編では,続いて行われたパネルディスカッションの模様をお届けします。)による計6名でのパネルディスカッションです。勢揃いしたパネラー一同Hadoopのメリット,用途は?各自かんたんな自己紹介の後,新たに登場した3氏からHadoopのメリットが語られました。田中氏は「巨大なデータをスケールするリソースを使って短時間で処理できる⁠」⁠,藤川氏は「いろいろフレームワークを使わなければいけないところを,あまり意識せず完全にスケールするシステムを作れること⁠」⁠,三上氏は「プログラマの負担を減らせること」が挙げられました。続いて3氏がOwen氏に質問。田中氏が「Hadoopは今,バッチ系の処理が多い。HBaseなどによってリアルタイムでの処理が多くなってくると期待していいか?」と質問。それに対しては「それはないと思う。今後,時間を短縮することによって,リアルタイム的な処理ができるようになることはあるだろう」との回答が寄せられました。次は藤川氏の「一般的にはログ分析がいちばん多いし,インデックスの作成,機械学習がよくでてくる。私はRubyで使えるというプロジェクトをやっていることもあり,他の用途で使えないかと思っている」という質問。Owen氏は「パズルのような組みあわせの分析などに使える」と回答,それを受けて三上氏が「生物などの遺伝子解析などで使われることもあると聞いている。結果の話は聞いていないが,将来有望とのこと」と発言。Owen氏も「バンガロールの大学の研究者などあが,遺伝子の組み合わせのマッチング処理に利用している話を聞いたことがある」と答えました。PapyrusはMapReduceしかラップしていないが,HDFS処理をラップするような形にするのもおもしろい」と興味を示しました。それを受けて三上氏からは「その場合に標準に準拠していないなどの問題があるが」との提議がありましたが,それに対してOwen氏は「インターフェースについては年を追うごとに増えてきている。新たに,APIのFileContextを作成している。続いて吉田氏がHDFSに言及。「⁠HDFSはくせがあると思う。フロントサーバから大量のアクセスがきたり,小さなファイルがたくさんあるようなものにも向いてない。自分が使った中では不安定な感があるし,重要なデータを置くのはどうかと思う」との見解とともに,「⁠ストレージとしての可能性を目指していくのか,MapReduceのストレージとして割り切るのか」という将来の方針について意見が出ました。それに対してOwen氏は「Yahoo!バージョンの0.20で出ているが,セキュリティについてもQAに入っている。今年の夏にはリリースされる」とのことでした。三上氏からは「顧客の情報などをHDFSに載せて運営した例はあるか」との質問。それに対しては「HDFS以外のバックアップは以前は存在していたが,いまはそこにしか残っていない。今後は複数のクラスタで,複数のデータセンターにまたがったバックアップなどを提供していきたい」との回答でした。三上俊輔氏Owen氏は「実際に運用していく中でデータを失ったこともある」という事実も披露。同時に「Hadoopのレプリカを1に設定していたことも原因。HDFS自体は信頼性の高いものになってきている。ユーザのミスによって失うもののほうがはるかに多い」との見解を示しました。関連して,吉田氏からはネームノードのフェールオーバーについてコメントが。「⁠0.21でバックアップノードができると見た記憶があるが,そのあたりの自動フェイルオーバーのプランについてはどうか」との質問に対し,「⁠0.21で実装されることはまちがいありません。現状ではありませんが,それでも1個のノードのほうが多くのノードよりはいい。近い将来,そちらにも手を加えるつもりではあるが,すぐにではない」とのことでした。Python著者プロフィール傳智之(でんともゆき)技術評論社の中の人。書籍編集部なのになぜかgihyo.jpに絡ませていただいてます。パソコン入門から本格的な技術書まで,熱い企画のご提案をお待ちしています。2019」を開催しました。DAY1・DAY2の様子を注目セッションとともにお伝えします。LINEのエンジニア3名がイベントに先駆けて見どころを紹介します。コードの安全性・安定性を高める開発サイクル~テスト管理の効率を上げ,脆弱性診断を自動で行う~本連載では,連載「業務を改善する情報共有の仕掛け」を受けつつ,安全性・安定性を加えた開発サイクルについて考えていきます。若者世代から圧倒的な人気を誇るライブ配信&動画投稿コミュニティアプリ「MixChannel」(ミクチャ)の裏側(レコメンドシステムやサーバサイド開発など)について解説していきます。その他の連載CSS3アニメーションでつくるインターフェイス表現CSS3によるアニメーション表現を紹介していきます。その中でも,幅広い読者に応用してもらえるだろうインターフェイスを主なお題とします。MySQL道普請便り本連載では,MySQLを使ったアプリ開発・運用に関するノウハウをご紹介していきます。RecipeUbuntuの強力なデスクトップ機能を活用するための,いろいろなレシピをお届けします。JavaScriptセキュリティの基礎知識JavaScriptに関するセキュリティ上の問題はどこで発生し,どうすれば防ぐことができるのか?について解説していきます。〜システムをきちんと運用するための基礎知識システムは「作って終わり」ではなく,運用の中でさまざまな問題が発生します。問題の発生に備えて事前にどのような対応をしておくべきなのか,問題発生時に何をしなければならないのか,ポイントを解説していきます。きたみりゅうじの聞かせて珍プレーソフトウェア開発の現場で体験したトホホな失敗,思わずうなる珍プレーをきたみりゅうじ氏が四コママンガで紹介。Linuxのメンテナンスの傍ら,Linuxやオープンソースソフトと日々を過ごす著者が,その魅力とつきあい方を,エッセイ風味でお届けします。PRESS特別編集部員,さわやか笑顔のスーパーハカーはまちちゃんとネット大好き14歳わかばちゃんが,毎号,読者の皆さんから寄せられたおたよりを紹介します。皆さんの日頃の悩みにも答えちゃいますよ。]メールでのお知らせメールで次の案内をお送りしております。メールの配信を希望する方は,利用したい項目をチェックしてメールアドレスを入力し,[登録]ボタンをクリックしてください。UPDATES[ほぼ週間に1回]新刊メールマガジン[ほぼ週間に1回]電脳会議の各号案内[ほぼ1ヵ月半に1回]※変更する場合や停止する場合は,登録情報変更ページをご覧ください。※登録いただいたメールアドレスには,そのお知らせ以外,配信いたしません。Ltd.ページ内容の全部あるいは一部を無断で利用することを禁止します。個別にライセンスが設定されている記事等はそのライセンスに従います。