ただの備忘録日記ですので、銘柄を書いても、買い推奨ではありませんし、むしろ危険なので買わないで下さい。サイトを作ろうかなって書きましたが、色々事前調査をした結果、断念しました。決算投資情報サイトでも作ろうかな以下はSEでないと理解出来ないので、結果だけ言うとXBRL使いづらいから無理!って事です。決算情報取得に利用しようとしたのがXBRLというXMLちっくな仕様で、EDINETやTDNETで有報や決算短信の決算データを電子利用しやすいような形式で提供する仕組みです。・・・これ・・・使えません。TDNETは過去一か月の情報しか保有しません・・・意味が分かりません。この仕様を考えた担当者はデータの電子利用という意義を理解していません。次にEDINETは過去全部のデータを取得出来るのはいいのですが、WEBスクレイピング(プログラムによる自動取得)は出来ないようになっています。この仕様を考えた担当者はデータの電子利用という本質を理解していません。アメリカのSECが提供しているXBRLはFTPで一気に全データを取得可能で、本来こうあるべきです。そこで諦めかけた所に気づいたのが有報キャッチャーという民間企業がやっているサービス。過去のXBRLを保存・提供してくれているサービスです。利用規約を読むと、XBRLはATOMというXMLベースで保存場所が提供されている模様。試しに上記の通りでWEBアクセスしてみると以下のように、確かにXMLっぽい感じで、XBRLデータへのアドレスが表示されました。http://resource.ufocatch.com/atom/tdnet/query/6871このファイルを全部見て精査すると、どうもhtmファイルに決算データがあり、ixタグのname属性で識別すればいい事が分かりました。↓とりあえずVisualStudioでASPのプロジェクトを作って、コードの方はこんな感じで、とりあえずアドレス直書きで、アドレス先のXML(Atom)から決算情報の入ったhtmファイルのアドレスだけを取得するようにしました。これはデバック画面で、下の「ウォッチ1」を見たら分かる通り、listHttpに上記画像のhtmファイルへのアドレスだけが格納されています。aって変数はデバッグを一時停止するために入れてるだけです。普通なら.netフレームワークではXDocumentクラスを使って簡単に出来るのですが、以下を見て貰ったら分かる通り、量が膨大で「長すぎて無理です」っていう見た事がない例外エラーが返されました。いうか、改行しろよっ!上記画像で「ソース表示」で改行されてるのは有報の方です。決算短信の方はなんと、改行されていないので可読性ゼロですっ!んで、とにかくixタグに必要なデータがあるのは分かっているので、ixタグ以外全削除して、ixタグのname属性を識別子にしてデータを取り出せるようにしました。売上データを識別するための識別子がtse-ed-t:NetSalesなのですが、それだけだと前期売上とか予想売上とかも抽出しちゃうので、contextRefって属性も見て、判断しないといけないのです。)取得するのに、何かしらそれぞれ異なる処理が必要(共通でないので共通関数化出来ない)です。なくて、キーを一つ投げたら、データが取得出来るのがデータベース(XML含む)の基本でしょ・・・これ、XBRLの技術的な仕様書レベルから研究(勉強でなくて研究)しないと、どうやったら一意に効率的にデータを取得出来るのか分からないです。ここでギブアップしました。XBRLは日本だけでなく国際的な統一規格だし、元がXMLなので、htmファイルだけでなく、xmlファイル・xsdファイルを使ってなんか上手くデータ取得出来るんだろうなって事は・・・でも塩漬けマンにはもう無理でした。株探の決算でいいかな。やっちゃいけないんですけど、株探の決算のHPをWEBスクレイピングして、決算データを取得する方が多分楽です。※多分個人でやる分には怒られませんが、そのデータで投資情報サイトを作って金儲けをしたら怒られます。それだと貸借対照表とかのデータがなくて、株探と同等になっちゃうので、やる意味もないですしね。※忙しいと申し訳ありませんが、コメント返信出来ない事があります。↓応援クリックをして頂けたら感謝です。まとめブログ(すごくためになる。