managerでSparkもインストール出来るという事で。worker×3のクラスタを作って試してみました。監視ツールとしては結構高機能なイメージです。gcpでもちゃんと動いているのはエライ!worker3台構成です。マシンスペックはgcpの無料アカウントなのでショボショボです。CDH5を適用済みで、sparkは・・・というとバージョンが0.9.0?!ん?と思ってClouderaのHPで確認してみると、latestにあるっていうから確認してみたら...。本当に0.9.0がlatestだった(絶望Expressだからなのか!?hadoopディストリビューターってのは理解できるがちょっと古すぎやしませんか。Searchに比べてクロールの敷居が低いと思っています。クロール先がDatabase(OracleやMySQL)ならDI使ってクロールする、でいいと思います。手軽にSolrを使う場合、CSVやTSVを登録して集計に使ったりとできます。#データが多いならHadoopの方がいいかもだけど。'http://localhost:8983/solr/tsv_load/update?commit=true&separator=%09&encapsulator=%09&stream.contentType=text/csv;charset=utf-8&stream.file=/var/solr/inp/a.tsv'http://localhost:8983/solr/tsv_load/updateのtsv_loadはコア名commit=trueを付けないとあとでコミットしないとダメなので。stream.contentType=text/csvこれでcsv,tsvを読み込みますseparator=%09でタブ区切りに。15.04をインストールして使ってましたが、compizがイマイチ良くなく・・・。termを起動した時に勝手にサイズが最小に小さくなってしまうという気持ち悪い状態になり、cubeとか使ってるとダメというのは分かったんだけど解決方法がわからないので14.04にバージョンを落とした。14.04でマウスを左端にくっつけてもスクロールしない。右はちゃんとするのに。そもそも14.04はチェックボックスとかが選択できない状態になっており、なんかおかしい。14.10の環境を構築することに。思い立ってすぐに環境を構築できるのはvirtualBoxの良い所。14.10ではcompizで問題なくcubeが動作出来ました。[edit]Solr5をインストーラーでインストルした場合の環境メモ■ログフォルダ/var/solr/logs■log4j/var/solr/log4j.properties■coreの配置位置/var/solr/data新しいcoreを配置する場合、/var/solr/dataの下にcoreのフォルダを作成contフォルダを作成し、ファイルを配置。new_coreフォルダをdataフォルダの下に作成して、その下にcontフォルダを作成。solr:solrして起動確認。#langはフォルダですcurrency.xmlelevate.xmllang/mapping-FoldToASCII.txtmapping-ISOLatin1Accent.txtprotwords.txtschema.xmlsolr-data-config.xmlsolrconfig.xmlstopwords.txtsynonyms.txtあとはこのcoreをベースに作っていけばOKかなっと。[edit]Solrが使いたくなったので、新しく構築したUbuntu14.04にインストールします。MB"}あとは、ブラウザでアクセスしてみたらOKだったので、ぶっちゃけインストールは3分くらいで終わる。http://localhost:8983/solr/うちのブログにubuntuとかsolrとかelasticとかのキーワードで来る人は皆無だ・・・。»プロフィールAuthor:junk気が向いた時に書きます。いうのを探していました。夜間走行の後続車のライトの眩しさ低減と視野角を広くしてくれるやつ。DRC/チェーンローラーDRCのチェーンローラーです。822円でベアリング入りなのでとてもスムーズ&リーズナブル。長さは32mmがいいみたい。http://flaw.blog80.fc2.com。