使用Pig对手机上网日志进行分析
2016-06-15 00:00
260 查看
在成功安装Pig的基础上,本文将使用Pig对手机上网日志进行分析,具体步骤如下:
写在前面[b]:[/b]
手机上网日志文件phone_log.txt,文件内容 及 字段说明部分截图如下
需求分析
显示每个手机号的上网流量情况。
依次完成以下步骤:
1、将Linux本地文件phone_log.txt上传到HDFS
执行命令dump C; 查看经过以上步骤处理后的结果
查看经过以上步骤处理后的结果
OK,齐活!
写在前面[b]:[/b]
手机上网日志文件phone_log.txt,文件内容 及 字段说明部分截图如下
需求分析
显示每个手机号的上网流量情况。
依次完成以下步骤:
1、将Linux本地文件phone_log.txt上传到HDFS
执行命令dump C; 查看经过以上步骤处理后的结果
查看经过以上步骤处理后的结果
OK,齐活!
相关文章推荐
- HBase Shell常用命令
- 雅虎开源CaffeOnSpark:基于Hadoop/Spark的分布式深度学习
- Mapreduce读写DB数据
- Hadoop目前只是“穷人的ETL”
- 淘宝吴雪军:自然语言处理技术在搜索和广告中的应用
- python机器学习之神经网络(二)
- Java神经网络的框架Neuroph 2.5 with Neuroph Studio 测试
- 常用IT网址整理
- 神经网络Tips 和Tricks
- 抓包工具Fidder详解(主要来抓取Android中app的请求)
- VMware Workstation网络连接的三种模式
- 特征选择(三)-K-L变换
- 使用Fabric自动化你的任务
- 文本相似度算法
- 自己总结红黑树删除-2
- CentOS下expect安装
- 欧氏距离和cos相似度
- Google开源基于Deep Learning的word2vec工具
- MyEclipse 2015优化技巧
- mahout个性化推荐的一些帖子