大谷純の作品一覧
「大谷純」の「データ分析基盤構築入門[Fluentd,Elasticsearch,Kibanaによるログ収集と可視化]」ほか、ユーザーレビューをお届けします!
- 作者をフォローする
- フォローすると、この作者の新刊が配信された際に、お知らせします。
無料マンガ・ラノベなど、豊富なラインナップで201万冊以上配信中!
「大谷純」の「データ分析基盤構築入門[Fluentd,Elasticsearch,Kibanaによるログ収集と可視化]」ほか、ユーザーレビューをお届けします!
ビジネス・実用
Posted by ブクログ
1章 データ分析の概要
2章 ログデータの基礎
3章 データ分析基盤の構築
4章 データ分析基盤の運用
5章 ログ収集ミドルウエアの紹介
概要の紹介
6章 はじめてみようFluentd
データ転送ツールであるFluentdの説明。Input->Filter->OutPutとプラグインを活用してストリームデータを流していくデータのルーティングの基本となっているのはタグとラベル。
treasuredata社がメンテナンスしている。
7章 Fluentd設計のこつ
tailプラグインの使い方、Fluentdノードのデザインパターン。これはFluentdを複数配置させ末端のFluentdノードには無理をさせずアグリゲ-タノードでデータ集約させて通信量を抑えるなど工夫を紹介。Fluentdを多重化配置させ障害につよい構成。
8章 Fluentd運用Tips
Fluentdの監視、性能評価について紹介。ログ欠損対策であるバッファリングの設定など。
第3部 Elasticsearch,kibanaは省略
Appendix Embulk、Digdag入門
EmbulkこのツールもおもしろいFluentdと同じ作者さんがつくっているとか