hadoop 笔记,
iPhone1,4个国家
2,iPhone免费应用排名(24),iPhone付费应用排名(24),iPhone畅销应用排名(24)=72榜单
3,每个类型4000个game
总url=4*72*400=115200
iPaid
1,4个国家
2,iPhone免费应用排名(24),iPhone付费应用排名(24),iPhone畅销应用排名(24)=72榜单
3,每个类型4000个game
合计
总url=4*72*400=115200
iPhone+ipad=230400
执行时间:5个小时
1个map
8个reduce
1个reduce 1.6秒抓取一条数据
-------------------------------------------------------------
hadoop-1.1.1 hbase-0.92.2 hive-0.9.0 snappy-1.1.1
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。