2018-11-11 「データ分析基盤構築入門」を読む Appendix B Embulk & Digdag入門 B-2 EmbulkとDigdagのセットアップ java install Embulkのinstall Digdagのinstall example.dig 実行結果
2018-11-10 「データ分析基盤構築入門」を読む 6-3 Fluentdの設定カスタマイズ <label>ディレクティブ 6.29図 複数のデータパイプラインを作る設定例 プラグインのflowcounterをinstall 流れてくる(flow)データの個数を数える(counter)、byteを数える count_keysは count,bytes,count_ratio,bytes_ratio,すべてを指定できる*(アスタリスク)がある unitはcounter周期を設定 td-agent.conf td-fluent-catからデータを入れる logを確認する