Kafka 数据同步

[yingqiuQAQ]

想把 kafka topic 的 json 数据同步到 ES ，目前业界有没有通用的办法? 不需要原生数据所有字段都导入, 需要导入前做一次数据处理。

kafka 小白，有没有大佬指点一下

[novolunt]

中间加一层 logstash 做数据处理

[SirCarol]

https://www.digitalocean.com/community/tutorials/how-to-install-elasticsearch-logstash-and-kibana-elk-stack-on-ubuntu-14-04#configure-logstash

[yingqiuQAQ]

看来大家的建议都是沿用 elk 这套组件，现有的框架也是这样做的