S2RobotDBFluteとは直接無関係ながらも、親和性の高いフレームワークを紹介します。ファイルシステムをクロール可能なクローラフレームワークです。S2Robotの概念図クロール結果の保存方法クロール結果をメモリに保存するか、データベースに保存するかを選択することができます。Database)ここでの紹介の前提ここではクロール結果はデータベースに保存することを前提とし、メモリに保存する方式は割愛します。使った環境であることを前提とします。詳しくは本家サイトにて。フォロー的な内容だけここでは書いておきます。