有关k8s中部署hadoop出现的特殊问题

有关k8s中部署hadoop出现的特殊问题

WARN datanode.DataNode: Problem connecting to server: namenode:8020

 出现此处类似的问题，说明Datanode 缓存 namenode DNS 查找失败并且无法启动

如果 DataNode 启动而 NameNode 主机甚至无法在 DNS 中解析，则 DataNode 不会尝试重新解析。我提供了一个补丁，可以将 DNS 解析移动到连接重试循环中。

目前hadoop还未修复这个问题，将在3.4.0, 3.3.2, 3.2.4的版本中修复。

最新版本出来后，我会更新此贴。

如果你们急需修复，可以通过修改源码的方式修正bug。

具体更改内容，请参考https://github.com/apache/hadoop/pull/3348/commits/c8d5b06ff8c2e7629d0bdf5713b7cf35f87bdad6https://github.com/apache/hadoop/pull/3348/commits/c8d5b06ff8c2e7629d0bdf5713b7cf35f87bdad6