flume +　spark streaming(pull模式) + Elasticsearch_bill

文章分类

文章存档

2015年（27）

我的朋友

最近访客

推荐博文

发布时间：2016-06-04 11:23:52

spark streaming以flume为数据源(pull模式)是可以保证不丢数据的，但是经测试发现如果spark streaming挂掉的话，channel中存如太多的数据会导致flume启动慢的问题。......【阅读全文】

阅读(1373) | 评论(1) | 转发(0)

learning apache kafka读书笔记

发布时间：2016-06-04 11:11:21

在运用kafka时要不要动态增加consumer以及consumer的线程数，读learning apache kafka终于有了一点思路......【阅读全文】

阅读(1110) | 评论(0) | 转发(0)

给主人留下些什么吧！~~

留言热议

请登录后留言。

感谢所有关心和支持过ChinaUnix的朋友们