[Apache Kafka Meetup Japan #1 at Yahoo! JAPAN](http://connpass.com/event/32293/) のLTで発表した資料です。

1. Kafka含むデータ処理フローを
NiFiで構築するさまを実演する5分間
河村 康爾
Hortonworks Japan Co., Ltd. ソフトウェアエンジニア
2016.05.31
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

2. Apache NiFiとは
” NiFi is like digging irrigation ditches as the water flows, rather than
building out a sprinkler system in advance."
“NiFiは事前にスプリンクラーを配備するというより、
⽔が流れるのに合わせて⽤⽔路を整備するようなもんさ”
https://mail-archives.apache.org/mod_mbox/nifi-users/201604.mbox/%3C2FCCBD60-0A79-42F1-9F9B-A121591C826E@apache.org%3E
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

3. 各種プロセッサ取り揃えてあります
ambari, amqp, avro, aws, azure, cassandra, couchbase, elasticsearch,
flume, geo, hadoop, hbase, hive, hl7, jms, kafka, kerberos, kite, ldap,
mongodb, riemann, twitter, solr, splunk, sql, spark, storm … etc
その数100以上!
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

4. サンプルデータフロー: Hello World
おぎゃー
命名
男の⼦ topic
⼥の⼦ topic
ようこそ topic
祝福
> . <
0
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

5. 第⼀部: 誕⽣〜命名 編
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

6. お名前はこちらから引⽤させていただきました
$ cat top-names-2014.txt
# http://www.tonsuke.com/nebe28.html
m,蓮
f,陽菜
f,凛
m,大翔
m,陽向
f,結菜
m,陽太
f,葵
…
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

7. ⾜りぬなら、書いてしまおう、スクリプト
注: ⾏ごとに分割し
たり、マッピング
したりする
Processorはありま
すが、今回は⼀度
にやるのを書い
ちゃいました
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

8. はじめてのKafka
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

9. 第⼆部: 祝福 編
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

10. 男の⼦かな、⼥の⼦かな?
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

11. お祝いの⾔葉
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

12. これが、君たちの歩んできた道だ
第⼀部 第⼆部
NiFiではこのデータ遍歴を
Provenance
プルーブナンス
とよんでいます。
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

13. そして世界へ、Hello world
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

14. ⼦供の好きな動物といえば・・・
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

15. 実演タイム
Live Demo
©Hortonworks Inc, 2011 – 2016. All Rights Reserved

16. Fin.
ご清聴ありがとうございました。
©Hortonworks Inc, 2011 – 2016. All Rights Reserved