...2018.12.26pighiveCSVデータをParquet形式に変換する昨日の続きです。読むのが面倒な方は「まとめ」をどうぞ。昨日はHueでCSV形式のデータをインポートしましたが、このデータをHive以外から利用するには不便です。以前「cdh-release-history」というCDHと主要コンポーネントの対応付けをまとめました。このリリースはかなり大きなアップデートが含まれており、6.0リリース時に見送られた重要な内...2018.12.19CDH6その他サイトを移転しました契約していたプロバイダーのサービス停止に伴い、サイトを移転しました。移行前に使っていたWordPressやPHPのバージョンが古く、移行はかなり難航しましたが、ようやく見られる程度になったので公開します。移転に伴ってテ...2018.12.14その他YARNYARNのリソース管理の秀逸なスライドHadoopのコンポーネントの一つであるYARNは、HadoopやSpark等の分散処理のリソース管理とスケジューリングを行います。そのスケジューラはプラガブルになっており、次の3種類のポリシーが選択でき、それぞれ詳細に設定できます。等の書籍情報更新!久しく更新していなかった書籍情報をアップデートしました。Kuduを含め、Spark、Kafkaの書籍情報を追加しました。エンタープライズ版のような趣があります。HadoopオペレーションほどHadoop寄りではないですが、最近の本なので構成を考える方にはお勧め。diveな本が欲しい同僚には物足りないようです。34Profilekernel023HadoopやSparkなどのビッグデータ系技術情報を公開しています。(outdated)ホーム検索トップサイドバーProfilekernel023HadoopやSparkなどのビッグデータ系技術情報を公開しています。