hadoop discp输出复制状态到控制台

问题描述

我正在使用hadoop distcp将400 + GB的某些文件一个群集复制到另一个群集。

distcp运行时,它会向控制台生成一些输出包括地图并减少进度。问题是它只是直接跳到100%地图完成,但是当我在资源管理器中检查distcp作业时,我看到状态说“ 50.0%将hdfs:// cluster-a / path / to / file复制到hdfs:/ / cluster-b / path / to / file [200.0G / 400.0G]>地图”,并将定期进行自我更新。

有什么办法让distcp将此状态消息输出到控制台,以便我可以看到副本的真实进度吗?我查看了distcp文档,但找不到任何有关状态的信息。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)