python-3.x - 如何在 S3 中读取示例记录镶木地板文件?
问题描述
我在 S3 中有 100 个 parquet 文件,我想检查所有 parquet 文件是否正确创建。基本上下游系统应该能够毫无问题地读取这些镶木地板文件。在下游系统读取这些文件之前,我希望我的 python 脚本读取示例,每个 parquet 文件有 10 条记录。我使用以下语法读取镶木地板文件:
import pandas as pd
from boto3 import client
conn = client('s3')
buffer = io.BytesIO()
s3 = boto3.resource('s3')
result = s3.get_object(Bucket="my bucket", Key="my file location")
text = result["Body"].read().decode()
需要您的输入来读取示例记录,而不是 parquet 文件中的所有记录。谢谢你。
解决方案
推荐阅读
- excel - 为什么在此代码期间激活了我的屏幕键盘数字锁定?
- ubuntu - Nginx- 98: Address already in use, Failed to bind to ports 433 and 80
- javascript - CSS / XPATH 选择器查询
- c++ - 在函数中创建多个 lock_guard
- c#-8.0 - 如何转换 IList
到 IList 在 C# 8 中可以为空的引用类型 - c - 执行未从 exec 返回
- c# - 我们可以取消次要视图的 UWP 应用的合并事件吗?
- tensorflow - Talos - 导入 talos - 无法导入名称“tf_utils”
- django - 码头工人 mariadb 和 django
- botframework - 使用 Postman 来自我的本地机器人的 400 错误请求