python - 将数据从 Athena 导出到 Python
问题描述
我正在尝试将数据从 Athena (AWS) 导出到 Python。或者,有没有一种方法可以将 python 连接到 Athena,就像有一种方法可以将 python 连接到 MySql。
我在 Athena 中有大约 15gb 的数据,想导出并进行进一步分析。需要有某种方法来导出如此庞大的数据集。
详细步骤将不胜感激!
提前感谢!
解决方案
数据实际上并未存储在 Amazon Athena 中。相反,Amazon Athena 查看存储在 Amazon S3 中的数据并在其中运行查询。
因此,如果您只想要原始数据,只需直接从 S3 复制文件即可。简单的!
但是,如果您希望在 Amazon Athena 中运行查询并导出/操作结果,您可以使用Athena — Boto 3 Docs 文档从 Python 调用 Athena。
推荐阅读
- robocopy - Robocopy /xo 然后将最新的文件复制到一个空文件夹
- ios - 将背景设置为 uitabbar 无法正常工作
- facebook - 为什么我的 facebook 像素不会在元刷新重定向页面上触发?
- python - 如何在 python 中使用 selenium 替换 ID?
- java - 处理 Lambda 表达式中的空值
- python - 将三位数和四位数整数转换为日期
- google-ads-api - 如何在 AdWords API 中更改广告系列时更新数组值
- python - 发布帖子请求时无法获得所需的响应
- java - BorderPane 重叠内容
- python - 如何在元素不可点击错误后重试循环并继续脚本?现在脚本刚刚停止