SMS認証は新しい投稿を行った際やプロフィール画面から実行できます。「気象データ2016年前半(met_data_2016_01.zip)」に含まれる下記3つのファイルに不備があったため、「気象データ2016年追加(add_met_data_2016.zip)」として正常なファイルを公開します。データダウンロードページより入手をお願い致します。使ったデータ一括ダウンロードに失敗する場合があります。本コンペではファイルを指定した個別ダウンロードを推奨します。ウェザーニューズのオンライン番組「ウェザーニュースLiVE」にて、バーチャルお天気キャスター「ウェザーロイドAiri」が毎週木曜22〜23時に5分程度コンペティションの進捗を紹介します。初回放送は8月22日でした。番組内容は変更になる場合があります。評価期間の詳細日時情報(inference_terms.csv)に誤りがあり修正致しました。お手数ですが再度ダウンロードをお願い致します。近年、ディープラーニングをはじめとするAIを用いたデータ解析技術の発達に伴い、AIを用いて、正確な気象状況の把握や高精度の予測を実現しようという取り組みが本格化してきています。各地点、各高度において、刻一刻と蓄積される膨大な気象データはAIと相性が良く、AIの活用によって、予測精度の向上や今まで難しかった予測の実現が期待されています。気象データをビックデータの一部とし、他のデータと組み合わせて分析することで、流通や農業、金融など、様々な分野における課題解決へ応用する取り組みも始まっています。数ある気象データの中でも、衛星データは、地上観測器の設置が難しい海上や山岳地帯、観測器のない国や地域のデータも一様に取得できる上、ひまわり8号に代表されるように、近年、観測性能が飛躍的に向上していることから、その有効活用が特に期待されているデータの一つです。現在の気象予測は、物理方程式に基づく気象予測モデルを用いることが一般的なため、衛星雲画像データを用い、画像解析技術によって未来の雲画像を予測する今回のコンペティションは、気象業界にとって非常に革新的なチャレンジです。以上を踏まえ、本コンペティションでは、これまでとは異なる新たなアプローチ方法で天気予報の可能性にチャレンジしていただき、未来の雲画像を予測するアルゴリズムを募集いたします。気象衛星ひまわり8号により撮影された過去96時間の日本全域の雲画像と、対応する気象解析データを使って未来の雲の変化を予測し、向こう24時間の雲画像を生成するアルゴリズムを作成していただきます。雲画像は配布した雲画像と同じ緯度経度の範囲で1時間毎に作成できることが必須要件となりますが、評価のためご提出いただく雲画像は本州付近に範囲を絞った6・12・18・24時間後の雲画像となります。データは3年分をご提供します。2016年・2017年の2年間を学習期間とし、学習にはこの期間のデータを使用して下さい。2018年の1年間は評価期間に設定します。評価期間ではおよそ1週間毎にウインドウを50個に分割しており、各ウインドウの頭4日分(96時間分)を入力として、翌1日分(24時間分)を1時間毎に予測します。提出ファイルは6・12・18・24時間後の予測雲画像とします。(inference_term.csv)』をご参照下さい。提出ファイルの領域(=評価領域)は本州付近に絞っていただきます。40)から縦420ピクセル・横340ピクセルの範囲になります。切り取り方法は、チュートリアルでもご紹介しています。実際の提出ファイルは、画像ファイルそのものではなく、256階調の画素値を以下のフォーマットでCSV形式で作成し投稿して下さい。評価対象時刻の予測画像を用意します。Evaluation_24hr」カラムを参照して下さい。評価領域に合わせて切り取った縦420ピクセル・横340ピクセルのデータを、そのままの形で縦方向に日時の古い方から順番に結合して下さい。0列目に0〜83999番までの通し番号をつけて下さい。ヘッダなしの、84000行・341列のCSVファイルとして出力して下さい。分析用データとして、以下が与えられます。各データはコンペティション開催中1日に3回だけダウンロードできます。データのダウンロードの際、実際にダウンロードが始まるまで数分の待ち時間がある場合があります。データの詳細については、サイドメニューの「データ詳細」をご参照下さい。ファイルの詳細についてはデータのダウンロードページをご参照下さい。アフターイベント本コンペティション終了後、表彰式やデモ実演などの企画を検討しています。詳細は別途告知いたします。・本コンペティションで配布する衛星画像データ、および気象データは、本コンペティション終了後もオープンデータとして公開する予定です。従いまして、コンペティション終了後もこれらのデータを削除いただく必要はありません。・参加者が、自身で開発したアルゴリズム及びその他本コンペティションへの参加に関連して作成した資料等(最終提出物及び最終審査用提出物を含みます)を一般公開することについては、公開時に本コンペティションの参加に関連して作成したものであることを明記する場合においては、何ら制限しません。公開した際には、全ての参加者が閲覧できるよう、本コンペティションのフォーラムにその旨(リンク等含む)明記してください。・本特別規約と、本コンペティション参加規約とに競合があった場合は、本特別規約が優先されます。全200枚の予測画像について、1ピクセルごとに正解画像との誤差を計算します。Error(MAE:平均絶対誤差)」を使用します。・評価値は0以上の値をとり、精度が高いほど小さな値となります。28,560,000番までの通し番号をつけた時、評価関数の数式は以下のようになります。最終順位は、開催期間中とは異なる正解データセットによる評価値で決定します。スコアボードの順位とスコアは、コンテスト終了と同時に、自動的に最終評価に切り替わります。スコアがタイ(同値)の場合は、早い日時でご応募いただいた参加者を上位とします。最終順位が上位の方を入賞候補者とし、事務局から連絡いたします。事務局での経済的負担や、権利侵害がないことを保証いただくことを条件に、入賞候補者には以下を提出していただきます。その提出モデルが下記いずれかに該当する場合は入賞の資格を失います。再現性を確認できた方から入賞者を選定します。総合ランキング・本コンペは、総合ランキング(スコア・メダル)の対象です。心構え・企業課題の達成、社会問題の解決、研究成果の共有等、大前提となる目的に合わせ、実用性(推論速度など)を意識したアプローチで臨んでください。・利用アカウントは1人につき1つまで。アカウントが1つという条件の下であれば、チームでの参加も可能とします。・チームでの参加を希望する場合、代表者を含めて最大5人のチームが作成可能です。チームを作成する場合は、コンペページ右上の「チーム作成」ボタンより、代表者の方がお申込み下さい。本コンペでチームを作成をされる場合は、9/30(月)までにお申込み下さい。チーム作成者(代表者)がSIGNATEから退会すると、チームは解散として扱われます。チームを解散すると、それまでメンバーとして参加していたユーザーは、チームとしても個人としても当該コンペに投稿できなくなりますのでご注意下さい。その他、チーム機能の詳細はこちらをご参考下さい。情報の取り扱い・同じチーム以外の参加者と本コンテストの予測に関連するデータ・ソースコードを共有する行為は禁止します。・ただし、本コンテストのフォーラムで、全ての参加者に対して公開する場合に限り、共有可能です。・配布するデータ以外のデータを用いたモデルの学習、および推論・予測をすることは禁止します。・配布したデータであっても、予測対象の日時より未来のデータを使用したモデルの学習、および推論・予測は禁止します。APIなどのAPIの使用は禁止します。etc)は使用可能です。学習済モデルを使用する際は、ソース(論文のリンク等)を明記してください。した衛星画像と同じ緯度経度の範囲で、24時間先まで1時間毎に予測できることが必須要件です。3つに分け、それぞれを実行すれば処理が進むように実装すること。1preprocess提供データを読み込み、データに前処理を施し、モデルに入力が可能な状態でファイル出力するモジュール。get_train_dataやget_test_dataのように、学習用と評価用を分けて前処理を行う関数を定義。2train1で作成したファイルを読み込み、モデルを学習するモジュール。学習済モデルや特徴量、クロスバリデーションの評価結果を出力する関数等を定義。3predict1で作成したテストデータ及び2で作成したモデルを読み込み、予測結果をファイルとして出力するモジュール。衛星画像について静止気象衛星ひまわり8号が観測した赤外画像を使用します。赤外画像は地表面・雲・大気から放射される赤外線を観測して温度を推定(輝度温度)し、低い温度を白く、高い温度を黒く表現して作られます。一般に高い高度にある雲ほど白く明るく表現され、低い高度の雲は暗く表現されるため、地表との区別が難しくなります。今回配布するデータは輝度温度から256階調のPNG画像に変換したものになります。衛星画像は1時間ごとにありますが、ファイルが欠損している時間があります。ファイルがあっても中身のデータが一部欠損している場合があります。詳しくはチュートリアルもご参照下さい。気象データについて本コンペティションで配布する気象データは、地球大気を3次元で格子状に区切り、その各点における気象要素をコンピュータで数値解析したデータで、GPV(格子点値)と呼ばれます。1つのファイルは、1つの気象要素・1つの高度・1つの対象時刻における2次元水平面のGPVとなります。データフォーマットはgzip圧縮されたバイナリデータで、1グリッドあたり4バイトの単精度浮動小数点データとなっています。バイトオーダーはリトルエンディアンになります。格子点は縦168行・横128列となっており、値は北西端から南東端への順番で並んでいます。0行目の値128個が西から東の順で並び、その次に2行目・3行目...167行目と続きます。Pythonによるバイナリデータの読み込みについては、チュートリアルもご参照下さい。気象データは3時間ごとにあります。ファイルに欠損はありませんが、元データの制約で中身に欠損箇所があります。有効な値のある範囲は『行は2〜153行目・列は8列目以降』となっています(0を最初の行・列として表記しています)。欠損箇所は0(ゼロ)で埋めています。等圧面について気象分野では高さ方向の軸を気圧で取ることがあり、ある気圧の高さの平面を等圧面と呼びます。テレビの天気コーナーなどで見かける地上天気図は、海抜0mを基準として気圧が等しい線=等圧線が描かれています。気圧が低いところが低気圧、高いところが高気圧となります。これに対して気象予報士が使う上空の天気図は特定の気圧(例えば850hPaなど)を基準としており、気圧が等しい高度の線=等高線が描かれます。この場合も、その気圧の平面=等圧面において高度が低いところが低気圧、高度が高いところが高気圧となります。300hPaの天気図を使います。これに飛行機が飛ぶ高さの200hPaを加え、5層の等圧面データを提供します。各気圧面とおおよその高度の対応表を掲載します。単位について、Pa(パスカル)は圧力を表す単位で、100倍を表すh(ヘクト)を付けたhPa(ヘクトパスカル)が気圧の単位として用いられます。海抜0mにおける標準的な気圧はおよそ1013hPaとなります。地上の気象データについて地表面近くの気象データです。海抜0mにおける気圧です。テレビなどで見る天気図の気圧は海面気圧になります。地上1.5mにおける気温です。単位はK(ケルビン)です。地上1.5mにおける相対湿度です。地上10mにおける、風の東西方向成分です。西風(西から東に向かって吹く風)がプラスの値となります。地上10mにおける、風の南北方向成分です。南風(南から北に向かって吹く風)がプラスの値となります。気象分野では風の表現として風向・風速で表す場合もありますが、今回は東西風・南北風での配布となります。詳しくはチュートリアルもご参照下さい。200hPaの5層の等圧面データです。200hPaの湿度のみありませんが、それ以外は等圧面による要素の違いはありません。等圧面における高度です。地形図の等高線を思い浮かべてもらえれば良いです。単位はm(メートル)です。ジオポテンシャル高度とも呼びます。等圧面における気温です。単位はK(ケルビン)です。等圧面における相対湿度です。元データの関係で、200hPaの湿度はありません。等圧面における風の東西方向成分です。西風(西から東に向かって吹く風)がプラスの値となります。等圧面における風の風の南北方向成分です。南風(南から北に向かって吹く風)がプラスの値となります。等圧面における鉛直方向の流れです。先述したように高さ方向の軸を気圧で取っているので、上昇流は気圧の低い方向に向かう流れとなりマイナスの値を持ちます。逆に下降流はプラスの値となります。各データについて、チュートリアルで一部を可視化しています。よろしければご参照下さい。・本コンペティションで配布する衛星画像データ、および気象データは、本コンペティション終了後もオープンデータとして公開する予定です。従いまして、コンペティション終了後もこれらのデータを削除いただく必要はありません。・参加者が、自身で開発したアルゴリズム及びその他本コンペティションへの参加に関連して作成した資料等(最終提出物及び最終審査用提出物を含みます)を一般公開することについては、公開時に本コンペティションの参加に関連して作成したものであることを明記する場合においては、何ら制限しません。公開した際には、全ての参加者が閲覧できるよう、本コンペティションのフォーラムにその旨(リンク等含む)明記してください。・本特別規約と、本コンペティション参加規約とに競合があった場合は、本特別規約が優先されます。competition.。