Parquetでデータ分析」そこそこの量のデータを分析する上で、PythonとPandasはとても強力なツールです。Sparkも2.0になり、これまでよりもさらに強力なツールになってきました。列指向データフォーマットのParquetと合わせて使えば、数十億から数百億レコードのデータを比較的手軽に扱えます。最近のこのあたりの様子を、実際に分析をしながら紹介していきますPythonが騒がれているのを横目で見ながらなんとなく気になっているデータベース技術者の皆さんの、素朴な疑問にできる限りお答えできればと思います。BigQuery」など。サイトリライアビリティエンジニアリング」発売予定。reserved.トップページ企業概要プライバシーポリシ。