linux - Linux / Hadoop 集群的配置管理

Question

我必须在 Linux (Ubuntu) 机器上设置一个小型 Hadoop 集群。为此，我必须在所有系统上安装 JDK、python 和其他一些 linux 实用程序。之后，我必须为每个系统一个一个地配置 Hadoop。是否有任何可用的工具，以便我可以从单个系统安装所有这些工具。例如，如果我必须在某个系统上安装 jdk，则应该安装该工具。我更喜欢该工具是基于网络的。

标签： linuxhadoopconfiguration

Answer 1

Apache Ambari 或 Cloudera Manager 专门用于为 Hadoop 完成这些任务

他们还监控集群，并提供与它通信的额外服务，如 Kafka、Hbase、Spark 等

不过，这只能让你走这么远，你会想要像 Ansible 这样的东西来部署自定义配置（AWX 是 Ansible 的 Web UI）。Puppet & Chef 也是替代品