使用Pig对手机上网日志进行分析

时间:2023-03-09 15:44:38
使用Pig对手机上网日志进行分析

在安装成功Pig的基础上。本文将使用Pig对手机上网日志进行分析,详细过程例如以下:

写在前面

手机上网日志文件phone_log.txt。文件内容 及 字段说明部分截图例如以下

需求分析

显示每一个手机号的上网流量情况。

使用Pig对手机上网日志进行分析

依次完毕下面步骤:

1、将Linux本地文件phone_log.txt上传到HDFS

使用Pig对手机上网日志进行分析

使用Pig对手机上网日志进行分析

运行命令dump C; 查看经过以上步骤处理后的结果

使用Pig对手机上网日志进行分析

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvYWFyb25oYWRvb3A=/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" alt="">

使用Pig对手机上网日志进行分析

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvYWFyb25oYWRvb3A=/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" alt="">

查看经过以上步骤处理后的结果

使用Pig对手机上网日志进行分析

OK,齐活!