golang实现简单的流式处理

Python09

golang实现简单的流式处理,第1张

实现一个最简单的类似spark的流式处理流程

包含map和filter

数据

map函数

fliter函数

所有数据+1 >过滤出偶数 >过滤出大于5的数

Java是一门编程语言，实现同一个需求有上百种编程语言可以完成，Java之于大数据，就是一种工具罢了。

大数据就是一个行业，实现同一个需求同样有多种工具可以选择，狭义一点以技术的角度讲，各类框架有Hadoop，spark，storm，flink等，就这类技术生态圈来讲，还有各种中间件如flume，kafka，sqoop等等 ，这些框架以及工具大多数是用Java编写而成，但提供诸如Java，scala，Python，R等各种语言API供编程。

所以，大数据的实习需要用到Java，但是Java并不是大数据。