ansibleを使って、ログデータの収集と全文検索可能なマシンを構築します。
以下のソフトウェアをインストールします。
elasticsearch…ログデータのリアルタイム全文検索・分析エンジン cool. bonsai cool
kibana3…ログの可視化ソフトウェア
fluentd…ログデータの収集ソフトウェア

ansible...サーバ構成管理ソフトウェア

CentOS 6.5 64bit (virtualbox + vagrantで構築)

$ ansible --version  
ansible 1.4.1 (1.4.1 7bf799af65) last updated 2013/11/30 14:23:28 (GMT +900)

$ gem list |grep serverspec  
serverspec (0.13.7)

• elasticsearch (1.1.0)

• plugin bigdesk
• plugin head

• kibana3
• fluentd
• nginx

1. hostsファイルの設定変更
   clone後、hostsファイル内の対象サーバのIPアドレスを変更してください。

2. SSH公開鍵認証の準備
   対象サーバにSSH公開鍵認証方式でログイン出来るように準備してください。

3. ホスト名の変更
   サーバのホスト名を初期値es-server以外にする場合は、注意点1を参照し、
   あらかじめ変更してください。

4. ansible playbook 実行
   次のコマンドで実行します。

$ ansible-playbook setup.yml -i hosts  

たまにyumで失敗することがありますが再度実行するとうまくいくことがあります。

5. テストの実行
   次のコマンドで実行します。

$ rake serverspec:Install-Elasticsearch-Kibana

6. 再起動
   ここで一度再起動してください。

7. kibana3へのアクセス
   次のURLでアクセスできます。

http://IPアドレス/  

画面上部に次のエラーがでますが、elasticsearch上にデータがないとでるようです。

Error Could not find http://192.168.0.109:9200/_all/_mapping. If you are using a proxy, ensure it is configured correctly

8. elasticsearchのプラグインbigdeskへのアクセス
   次のURLでアクセスできます。

http://IPアドレス:9200/_plugin/bigdesk  

9. elasticsearchのプラグインheadへのアクセス
   次のURLでアクセスできます。

http://IPアドレス:9200/_plugin/head  

1. サーバホスト名のハードコード
   いくつかの設定ファイルにサーバのホスト名をハードコードしています。
   (ホスト名未設定の場合にkibanaにうまくアクセスが出来ずハマりました。)
   実際に動かす際には、環境に合わせて変えてください。
   初期値ではes-serverです。

$ find ./  |xargs grep -n es-server  
./roles/es/templates/elasticsearch.yml:202:    network.bind_host: es-server  
./roles/nginx/templates/nginx.conf:4:          server_name           es-server;  
./roles/td-agent/templates/td-agent.conf:14:   host es-server  
./roles/kibana/vars/main.yml:3:                 servername: es-server  

2. fluntdの収集先
   初期設定では、fluentdのログ収集先は/var/log/nginx/access.logにしています。
   つまり、構築後にkibanaに何度かアクセスすると、elascticsearchにログが保存されます。
   動作確認用なので、早めに設定を変えてください。

• elasticsearch

• plugin bigdesk
• plugin head

• kibana3
• fluentd
• nginx