-lsを実行すると、hdfs上のファイルのタイムスタンプがUTCになっている。-Duser.timezone=JSTを設定してあげることで問題なくJSTのタイムゾーンで処理をしてくれる。いうわけでEMR起動時に上記が設定されるようにした。EMRクラスタ全体のhadoopコマンドに影響があるのでそこらへんの確認はしたほうが良い。世の中知らないことがたくさんある。コメントをキャンセルメールアドレスが公開されることはありません。コメントデータの処理方法の詳細はこちらをご覧ください。細かい話は置いといてこれは、Mac端末上でtarで固めて、linuxサーバ上で展開しようとするとでてくる。出てきてしまい困っている人のためTipsです。毎回ググってるのでアウトプットしておきます。サービスごとにそのplaybookを複製して使いたいときとか。そんなことあると思います。最近銀行の残高をネットとかで確認するにもワンタイムパスワードが必要になったりしてますよね。(新しいウィンドウで開きます)PREV【AWS】Pythonのboto3を使ってEMRのクラスタ名からIDを取得するNEXT【Python】tryしてexceptしたい例外の名前を調べる方法サイト内検索プロフィールIT業界で仕事する傍ら、ゲームをしたりアニメ観たりしてる皆と全く同じ人間です。ソシャゲ関連の日記や日常の思いの丈を綴っていきます。見えて2歳の娘がいます。