Hadoop二:Hadoop shell命令,
1. Hadoop HDFS文件目录
总目录:就是core-site.xml中配置的hadoop.tmp.dir目录,我配的是:/kluter/hdpTmpDir
文件data目录:/kluter/hdpTmpDir/dfs/data/current/BP-17034281-10.10.77.194-1528264430557/current/finalized/subdir0/subdir0
2. 文件上传
hadoop的网页界面:http://10.10.77.194:50070中的文件查看工具界面,只能查看、下载文件,而不能上传文件,所以要使用hadoop命令才能上传
命令行:#hadoop fs -put test.txt /
ps:文件超过128MB,hdfs会切分存放,因为配置文件中默认blocksize是128MB,可以在hdfs-site.xml中配置dfs.blocksize参数中修改
3. 查看文件目录中的文件
3.1 网页界面查看
查看上传成功的文件3.2 命令行查看
#hadoop fs -ls /
命令行查看3.3 查看内容
#hadoop fs -cat /test.txt
3.4 下载HDFS中的文件
#hadoop fs -ls /
#hadoop fs -get /test.txt
转hadoop常用命令及参数介绍:https://blog.csdn.net/wangxizhen123/article/details/73359157
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。