hadoop - 如何知道哪个主机正在写入 HDFS 的目录?
问题描述
有一些进程一直在写入 HDFS 的目录。如何知道哪个主机或应用程序正在这样做?
解决方案
假设您使用的是安全的 HDP-Kerberos 集群并且安装了 RANGER 并启用了 HDFS 插件,您可以从审核日志中监控所有 HDFS 访问,并可能找到有罪的人。否则可能在调试模式下的Namenode日志?
推荐阅读
- python - Python Flask avro 请求问题
- php - Laravel 在 null 上调用成员函数 first()
- javascript - classList 的 JavaScript 问题
- python - 有谁知道如何更改函数,以便仅将生成的列表输出到 csv,而 df 中的每一行都不会被范围内的数字分割?
- jboss - 当我有 1000 多个规则时,如何优化我的 Kiebase 构建时间?
- python - 尝试使用 Scrapy 抓取时出现 555 HTTP 协议
- azure-devops - Task.json azure devops 扩展隐藏输入
- python - python中的异步错误
- hugo - 在 hugo 中替换 .Page.UniqueID 以解决弃用警告
- reactjs - 在表上使用 redux 是否值得?