amazon-web-services - 在 AWS 中设置自动 HDFS
问题描述
我最近一直致力于寻找一种经济高效且快速的方法来在 AWS 上设置 HDFS 集群。一方面,AWS EMR 服务可以快速启动和运行,但成本很高,因为它不允许在不使用时关闭集群。另一方面,可以在 EBS 支持的 EC2 实例上手动设置 HDFS。由于这些实例是 EBS 支持的,因此即使机器关闭,数据也会保留。这种方式成本效益高,但耗时。如果集群包含 50 台机器,则手动配置每台机器将花费大量时间。此外,集群机器需要具有固定的 DNS 名称才能在重新启动后正确运行。
是否有 AWS 服务可以让我们在几分钟内启动 HDFS 集群并且还具有成本效益?
解决方案
推荐阅读
- button - JavaFX TabPane 宽度和 Button 宽度不匹配
- ios - CoreData & Codable:避免重复
- java - 为什么我的低电量警报代码不起作用?
- java - 如何使用不同的搜索创建元素的 Xpath ( cssSelector / tag / ClassName )
- gradle - 未找到 Gradle DSL 方法:更新到 Gradle 5.2.1 后的“destination()”
- ios - Firebase Storage putData 方法从不执行完成块
- amazon-web-services - 如何使用 AWS Java Elastic Load Balancer SDK 检查负载均衡器的状态
- excel-formula - SUM 单元格是特定日期的 4 个单元格 RIGHT
- c# - 在 .net 核心中注册 IUnitOfWork 作为服务
- cypress - 在 Cypress 中设置浏览器语言