Amazon公式ドキュメントの導入部分の個人的な備忘録メモ。MapReduceで何ができるか、内部がどうなっているかだいたい分かるかも。MapReduceは2つの権限を持ったインスタンスを起動する1つはMasterノード,1つはTaskノードとCoreノード単一のクラスタで効率的に実行するには大きすぎるデータが与えられた場合、Hadoopはデータを複数に分割するHadoopはデータとMapReduceの実行ファイル(S3においてある)をCoreとTaskノードに配布するHadoopはハードウェアのエラーや、MasterノードとCoreノードとTaskノードの間のやりとりをうまいことするなのでユーザは細かいことを意識しなくていいよMapperを使ってMap操作をするReducerを使ってReduce操作をする結果をS3におくインスタンスのグループHadoopクラスタは1つのMasterノードからなる1つのMasterグループと、1つ以上のCoreノードからなる1つのCoreグループと、複数のTaskノードからなる1つのTaskグループから構成される(Taskグループはオプション)。はてなブログPro髙橋侑久。アイコンは自作のハニワ。Qiitaを作っています。形式にしてコピーするArchiveスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。