hadoop文件复制命令，
hadoop内置的distcp命令，采用map -reduce的方式对文件进行复制，对于大数据文件夹的复制，特别是文件夹的嵌套式很有效的。
不需要我们手工指定底层文件夹，即可完成复制。并且复制的结果文件与源文件文件名相同，不会出现part-*的文件的情况。
但是对于小数据文件，推荐使用hadoop内置的fs -cp命令，当hadoop比较拥挤的时候，启动一个map -reduce得过程会变得很慢，这就体现出了cp的优势，直接完成文件的复制，减少了distcp由于启动map，reduce造成的文件复制的延迟。
本站文章为和通数据库网友分享或者投稿，欢迎任何形式的转载，但请务必注明出处.
同时文章内容如有侵犯了您的权益，请联系QQ：970679559，我们会在尽快处理。