データ分析基盤構築入門［Fluentd，Elasticsearch，Kibanaによるログ収集と可視化］

鈴木健太 / 吉田健太郎 / 大谷純 / 道井俊介

「サービスのデザインはログのデザインから。」良いサービスを作り上げるには，ログデータを収集し，改善を続けるシステムの構築が必要です。本書は，ログデータを効率的に収集するFluentdをはじめ，データストアとして注目を集めているElasticsearch，可視化ツールのKibanaを解説します。本書を通して，ログ収集，データストア，可視化の役割を理解しながらデータ分析基盤を構築できます。2014年に刊行した「サーバ／インフラエンジニア養成読本ログ収集 可視化編」の記事をもとに最新の内容に加筆しています。

• カテゴリ: ビジネス・実用
• ジャンル: IT・コンピュータ / 言語・プログラミング
• 出版社: 技術評論社
• タイトル: データ分析基盤構築入門［Fluentd，Elasticsearch，Kibanaによるログ収集と可視化］
• タイトルID: 468051
• ページ数: 400ページ
• 電子版発売日: 2017年09月29日
• コンテンツ形式: EPUB
• サイズ(目安): 33MB

[ブクログ · ★★★★★]

1章 データ分析の概要
2章 ログデータの基礎
3章 データ分析基盤の構築
4章 データ分析基盤の運用
5章 ログ収集ミドルウエアの紹介
　概要の紹介
6章 はじめてみようFluentd
　データ転送ツールであるFluentdの説明。Input->Filter->OutPutとプラグインを活用してストリームデータを流していくデータのルーティングの基本となっているのはタグとラベル。
treasuredata社がメンテナンスしている。
7章 Fluentd設計のこつ
　tailプラグインの使い方、Fluentdノードのデザインパターン。これはFluentdを複数配置させ末端のFluentdノードには無理をさせずアグリゲ－タノードでデータ集約させて通信量を抑えるなど工夫を紹介。Fluentdを多重化配置させ障害につよい構成。
8章 Fluentd運用Tips
　Fluentdの監視、性能評価について紹介。ログ欠損対策であるバッファリングの設定など。
第3部 Elasticsearch,kibanaは省略
Appendix Embulk、Digdag入門
　EmbulkこのツールもおもしろいFluentdと同じ作者さんがつくっているとか
　

[ブクログ · ★★★★★]

fluentdは本当にすごい発明だと思う。
データストアと可視化ツールは本書でも触れられているように、Elasticsearch以外に選択肢が沢山ある。

データのストリーミングはfluentd以外もう考えられない。
プラグインを書いてくれている方たちには感謝してる。

[ブクログ · ★★★★☆]

会社にあったので読んでみました。
Splunk や Elasticsearch などの基盤を一通り解説。
あくまで基盤の本なので、「どういう分析ができるか？」といった点はありません。

[ブクログ · ★★★☆☆]

分析の設計ポイントとか体系的に学べてよかった。どういう分析ができるか？とかまで踏み込んだ上での設計みたいな話が入ってくる本だとより読みたいかなと思った。

[泣き虫さくら · ★☆☆☆☆]

内容が難しい

エンジニア歴1年～2年では内容を理解できません。最初の10ページで心が折れて処分しました。