第三课、Spark大型项目广告点击项目数据建模

时间:2021-10-10 00:49:07
1、项目分析
用户广告点击行为(通过JS或者本地代码发送点击行为到服务器)---》Server接受到数据并把数据放在Flume(也可以是其他)的监控目录之下---》Flume感知到数据后会把数据放到Kafka中---》Spark Streaming感知到数据的到来并进行处理---》然后把流处理的结果交给例如HBase、Redis、MaySQL等---》通过J2EE等技术把分析结果展示出来并改善业务
(1)、有效的广告点击,点击行为过滤 (2)、广告的排名,分为全局性的排名和区域性的广告排名 (3)、广告流量的统计分析,展示每条广告点击的流量的趋势 (4)、广告收益的统计分析 (5)、广告推荐
2、数据建模 第三课、Spark大型项目广告点击项目数据建模 用例(Use Case)
1、user_information用户信息表
2、favorite_items
3、user_click 用户点击
4、item_informaiton 商品列表
5、blacklist
6、ad_information
7、top5
8、ad_trend点击趋势

9、same_day_history 历史同一天


加微信18611576994 或者官方报名咨询QQ群 163728659可以获得更多DT大数据梦工厂大数据Spark蘑菇云行动准备课程的视频、源代码和文档资料等,老师的微博:http://weibo.com/ilovepains/,获得大量的大数据最新和最干货的信息并与老师互动。