【慕课网实战】Spark Streaming实时流处理项目实战笔记十三之铭文升级版
铭文一级：第10章 Spark Streaming整合Kafkaspark-submit \--class com.imooc.spark.KafkaReceiverWordCount \--master local[2] \--name KafkaReceiverWordCount \--pack...
使用 ffmpeg nginx rtmp 搭建实时流处理平台
环境:ubuntu16.04问题引入:使用opencv获取摄像头数据帧,进行处理之后(如进行keypoint识别),将opencv中图像的Mat类型转化为ffmpeg的AvPicture格式,然后推送到流媒体服务器上,本地通过VLC播放器查看实时检测效果ffmpegsudoapt-getinstal...
十分钟入门流处理框架Flink --实时报表场景的应用
随着业务的发展，数据量剧增，我们一些简单报表大盘类的任务，就不能简单的依赖于RDBMS了，而是依赖于数仓之类的大数据平台。数仓有着巨量数据的存储能力，但是一般都存在一定数据延迟，所以要想完全依赖数数仓来解决实时报表问题，是困难的。其实，所谓的实时报表，往简单了说就是:对现在的一些数据进行加减乘除聚合...
【慕课网实战】Spark Streaming实时流处理项目实战笔记十八之铭文升级版
铭文一级：功能二：功能一+从搜索引擎引流过来的HBase表设计create'imooc_course_search_clickcount','info'rowkey设计：也是根据我们的业务需求来的20171111+search+1项目打包：mvncleanpackage-DskipTests报错：[...