2019年4月23日总结
1、阅读flume官方文档,整体文档基本理解了,阅读到了Flume Sources,但是文档的整体结构和内容是清楚了,各个部分是什么含义都清楚了,Sources、Channels、Sinks、Serializers、Interceptors(拦截器)等都明白其含义。
2、重点对Exec Source和spoolDir source做了实验,验证,spoolDir目前还有些许问题没有搞清楚。需要搞清楚每种方式的实时性、可靠性、吞吐量等。
3、通过阅读文档,明白了netty的作用。
总结:今天的任务完成程度和计划差距较大,说明计划的工作内容太多了,实际上做不了那么多,学习软件,一周要是能学明白一个就不错了,因为要理解文档,要做实验验证,实验过程遇到很多问题,这些都要一一解决,很费时间。以前想的很多事情太过理想了,事实要慢很多。
遗留问题:
1、flume的文档还需要继续花时间去读完
2、再多做一些实验。
把遇到的问题都记录一下,把不懂的技术名词都查一下,把遇到的不懂的英文单词也查一下,力求搞的明白一点,精通一点,不要狗熊扳棒子,边扳边扔。
3、等积累一段时间后再形成文章。
2019年4月23日计划:
1、通过做实验和阅读文档搞明白Kakfa