0TLDを取得するクローラーを書いてみた標準Tweetトップレベルドメインの判別をするコードがあるのですが、ドメインが増えたときにいちいちチェックするのも面倒なので、チェック用の正規表現を書き出すクローラースクリプトを書きました。スクレイピングして取得します。スクレイピングライブラリは、Goutteを使用しました。Databaseの内容を、CSV、Yaml、JSONと、正規表現として書き出すようにしています。クローラーのソースコードはこちらから。nojimage/tld-crawlerつくったはなから、barやbestなんかが追加されたでござる。