amazon-s3 - Oozie 在 EMR 上将操作数据路径从 S3 更改为 hdfs
问题描述
我们使用 oozie 来运行我们的工作流程,并使用 EMR 作为我们的集群服务。
在作业日志中观察到,所有操作数据都以以下路径写入 S3 user/oozie/oozie-oozi/${wf-id}/${action-name}--spark/${wf-id}@ ${动作名称}@0
oozie-site.xml 中是否有将上述路径从 S3 更改为 hdfs 的配置所有工作流都存在于 S3 中。
解决方案
推荐阅读
- javascript - Vue列表不显示javascript字典的键?
- python - 从模块中导入类列表
- sql - 快速从表中取出所有相关行
- android - androidTestImplementation 不包括库权限
- powerbi - 如何在 Microsoft PowerBI 中实现用户特定的仪表板
- eclipse - Eclipse 启动时会弹出一个终端
- c++ - 该文件中的代码是什么 *.cpp.. #define mdTyVzgFy4_0UFy9GimmM
- html - 无法在 Safari 浏览器上加载图像 url?
- mysql - mysql触发器不插入选定的列
- javascript - 使用 react-navigation 无法正常运行 Jest 测试