CSharpFlink:实时计算框架

时间:2024-04-09 01:48:47
【文件属性】:

文件名称:CSharpFlink:实时计算框架

文件大小:21.14MB

文件格式:ZIP

更新时间:2024-04-09 01:48:47

C#

CSharpFlink 实时计算框架 官方网址 技术博客 github地址: : gitee地址: ://gitee.com/wxzz/CSharpFlink 作者QQ:504547114 技术QQ群:54256083 1项目背景 我们有一个国家性质的面向工业的公有云平台,通过专线或4G的网关方式实时向平台传输数据,每天处理1亿条左右的数据量,为现场用户提供实时的在线服务和离线数据分析服务。现在已经上线稳定运行有将近3年的时间。同时也为工业企业提供私有云建设服务。我们计划使用Flink作为云平台后台的实时计算部分,基本实现数据点的聚合计算,表达式规则计算等业务,进一步实现机器学习或自定义复杂算法的需求。我们经过将近一年左右的时间的研究及开发,已经基本实现了聚合和逻辑等业务,但是感觉Flink比较重,并且应用和运维的水平要求比较高。基于上述情况,我们自主使用开发实时计算组件,支持


网友评论