amazon-web-services - 为什么 s3a 的性能远低于我用 cosbench 进行的基准测试?
问题描述
我使用本地构建的对象存储服务(支持S3接口),和Hadoop集群在同一个机房运行。
当我使用运行Hadoop的centos服务器执行cosbench测试对象存储服务时,带宽可以达到2G/s。
在我修改hadoop的core-site.xml文件将默认fs改为S3a后,我尝试使用TestDFSIO测试IO性能,我疑惑地发现结果比预期的慢很多(大约200Mb/s)。
所以想问问有没有可以参考的调优方案?
谢谢。
解决方案
推荐阅读
- visual-studio-2017 - VS 2017 连接服务 Office 365 API 不可用
- java - 无法在硒测试中调用自定义注释
- c - 使用 MPI (C) 发送和接收 3D 矩阵
- arrays - 在 Groovy 中动态创建二维数组
- reactjs - React:从先前的状态构建动态表单并在其上处理错误。状态错误
- c# - 'system.stackoverflowexception' 类型的异常在 c# 中被 OpenGL 抛出
- c# - 为什么物体向下移动而不是向上移动?
- python-3.x - ldap3 查询组用户不返回用户数据
- c# - C# 获取文件类型的默认应用程序
- javascript - Native Base 如何获取 List dataArray 的 ListItem 索引?