FluentdFluentdに送信されたログを異なる2つの出力をしたい場合はcopyプラグインを使って実現するのが一般的かと思います。GCPFluentdからBigQueryへストリーミングインサートしていた時に以下のようなエラーが発生していました。GCPBigQueryを利用するにあたりRedshiftのデータをBigQueryに移行する必要がありました。その際の手法や手順などについて紹介します。GCPBigQueryを使っていると思った以上に高い料金が発生していることがあります。Loggingで調べることができます。前回、fluentdに送信したログをBigQueryに出力という記事を書きましたが、ログの種類によって別のテーブルへ出力したいといったことがあり実際に試してみました。GCP2020年1月22日BigQueryのTIMESTAMPはUTC時間にしか対応してません。単純にログを出力すると日本時間がUTC時間としてBigQueryのデータができてしまいます。GCP2020年1月22日fluentdに送信したログをBigQueryに出力してみました。「fluent-plugin-bigquery」というFluentdのプラグインを利用します。コマンド一発で簡単にできるみたいな方法はみつかりませんでした。