Windows下idea中实现Hadoop本地测试功能,ideahadoop
0. 目标
1. 解压hadoop到windows硬盘中
https://blog.csdn.net/wxfghy/article/details/80450469
windows7下java代码从远程hadoop服务上下载文件
2. idea中写入MR代码
将之前写过的wordcount写入Idea
https://blog.csdn.net/wxfghy/article/details/80490867
3. 导入本地hadoop文件夹中各组件jar
~\hadoop-2.9.0\share\hadoop\common
~\hadoop-2.9.0\share\hadoop\hdfs
~\hadoop-2.9.0\share\hadoop\yarn
~\hadoop-2.9.0\share\hadoop\mapreduce
~\hadoop-2.9.0\share\hadoop\common\lib
4. 将当前项目打包生成jar
5. 添加Application配置项目运行参数
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。