java8stream源码-flink:ApacheFlink的镜像

时间:2024-06-24 11:06:15
【文件属性】:

文件名称:java8stream源码-flink:ApacheFlink的镜像

文件大小:7.68MB

文件格式:ZIP

更新时间:2024-06-24 11:06:15

系统开源

java8流源码Apache Flink Apache Flink 是一个开源系统,用于在集群中进行快速、多功能的数据分析。 Flink 在一个系统中支持批处理和流分析。 可以使用 Java 和 Scala 以简洁优雅的 API 编写分析程序。 case class WordWithCount ( word : String , count : Int ) val text = env.readTextFile(path) val counts = text.flatMap { _.split( " \\ W+ " ) } .map { WordWithCount (_, 1 ) } .groupBy( " word " ) .sum( " count " ) counts.writeAsCsv(outputPath) Flink 突出了一些独特的功能: 支持批处理和数据流程序的混合批处理/流运行时。 自定义内存管理可确保在内存和数据处理核外算法之间进行高效、自适应和高度稳健的切换。 数据流程序的灵活且富有表现力的窗口语义 内置程序优化器,可为每个程序选择合适的运行时操作 自定义类型分


网友评论