Kinesis」を発表。1時間あたり5ドルでリアルタイムなツイートデータを分析可能。Kinesis」を発表。1時間あたり5ドルでリアルタイムなツイートデータを分析可能。Kinesis」でした。Kinesisは、大量に発生するリアルタムデータを漏らさず永続化し、そこから必要なデータをアプリケーションに流すフィルタとして動作するようです。実際のデータ処理は、Kinesisからデータを受け取ったアプリケーションが行います。2日目の基調講演で披露されたKinesisの説明をまとめました。データを正確にリアルタイムに処理していくというのは、私たちにとって大きな挑戦だ。ビッグデータを分析し、昨日何が起きたのかではなく、いま何が起きているのかを知ることの方が明らかに重要だからだ。いま何が話題になっていて、お客様にいまどのように対応できるのか。いま何をレコメンドできるのか。そのためにデータをリアルタイムで処理しなければならない。大量のデータを確実に集め、分析する。Hadoopはそうした分析に非常に優れているが、リアルタイム処理には向いていない。一方で、リアルタイム処理のための分散メッセージングフレームワークもあるが、大量のデータを高い信頼性で受け付けるには不足だ。私たちは、大規模なストリーミングデータ処理を誰でもできるようにしようと思う。そこで、まったく新しいAWSのサービスを発表する。どんなスケールのデータでもリアルタイムに処理する。Stream」を作成する。これは複数のアベイラビリティゾーンで構成される信頼性の高いストレージだ。これがストリームデータをリアルタイムで確実に受け止める。Streamをスケールアウトすることでより大容量でハイスピードのデータにも対応できる。Streamから必要なデータタイプだけを送ることができる。他のストレージやStormのようなリアルタイム処理に人気の処理系などと統合し、アプリケーションを作ることができる。Kinesisはどんなスケールで、どんなスピードでデータが送り込まれてきても、正確にすべてをリアルタイムに補足し、Stormのような処理系に送り込むことができる。Kinesisデモを見ていただこう。KinesisとDynamoDB、Redshift、RDSを連係デモとして、TwitterからのストリームデータをKinesisを使って処理してみよう。KinesisはTwitterからのツイートデータを1つ残らず受け取り、複数のデータセンターで即座にパーシスタンス(永続的)なデータとする。それをリアルタイム処理アプリケーションへと提供するのだ。このデータをKinesisからDynamoDBのアプリケーションに送り込んでリアルタイム分析しよう。DynamoDBのカウント機能を使って、人気のキーワードをリアルタイムで簡単にリストアップできる。宇宙関係の人気キーワードの中から、私の好きな“mars”というキーワードを選んでみよう。marsがなぜ人気のキーワードになっているのか、関連をさぐる。今度はKinesisアプリとしてRedshiftを使ってみよう。Kinesisの強力なストレージ機能とチェックポイントによって、過去2日間のデータをKinesisからRedshiftに送り込む。RDSのPostgreSQLを接続し、位置分析をしてみよう。Marsのファンは全米に散らばっているが、特に西海岸に多いようだ。このようにKinesisにさまざまなアプリケ―ションを接続して、リアルタイムデータの分析を行うことができる。Shams氏)ともう1人で、わずか1週間で作り上げた。本番環境での費用は1時間あたりわずか5ドルだ。このソフトウェアで何ができるのか、考えてみていただきたい。AppStream」を相次いで発表。2013[速報]Amazonクラウド、PostgreSQLをDBaaSで提供。PostgreSQLをリリース。ディザスタリカバリを容易に[速報]Amazonクラウド、“野獣のような”ランダムI/O性能を備えた「I2インスタンス」と、最高性能となる「C3インスタンス」発表。Kinesis」を発表。1時間あたり5ドルでリアルタイムなツイートデータを分析可能。2013直近の6カ月で2倍以上に成長したモバイルBaaSのParse。レイテンシの問題をAWSのストレージ機能で解決。直近の6カ月で2倍以上に成長したモバイルBaaSのParse。レイテンシの問題をAWSのストレージ機能で解決。2013≪前の記事[速報]Amazonクラウド、“野獣のような”ランダムI/O性能を備えた「I2インスタンス」と、最高性能となる「C3インスタンス」発表。Niino(jniino)IT系の雑誌編集者、オンラインメディア発行人を経て独立。2009年にPublickeyを開始しました。WebAssembly」正式版を5月にリリース。Backupに新機能。EC2インスタンスをEBSごとバックアップ/リストア可能に。クロスリージョンにも対応クラウド上のアプリケーションでもExcelファイルの入出力を可能にするライブラリ。Cloud、大容量長期アーカイブ向け「Archive」ストレージを提供開始。CodeのJava環境が強化。usPublickeyについて/運営者についてお問い合わせ広告についてプライバシーポリシ。