parquet - 如何创建 Parquet 格式的 Glue 表?
问题描述
在文档中,我找到了如何以格式创建Glue table
,JSON
但我找不到如何以Parquet
格式创建。
我想我可以提供一个子类型glue.DataFormat
,但我不知道该怎么做https://docs.aws.amazon.com/cdk/api/latest/docs/aws-glue-readme.html
解决方案
好的,我在 Terraform 的网站上找到了工作值。 https://www.terraform.io/docs/providers/aws/r/glue_catalog_table.html
const glue_DataFormat_Parquet = <glue.DataFormat> {
inputFormat: new glue.InputFormat('org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat'),
outputFormat: new glue.OutputFormat('org.apache.hadoop.hive.ql.io.parquet.MapredParquetOutputFormat'),
serializationLibrary: new glue.SerializationLibrary('org.apache.hadoop.hive.ql.io.parquet.serde.ParquetHiveSerDe')
};
推荐阅读
- javascript - 通过queryselectorAll而不是getElelementById调用函数不适用于innerHTML元素
- woocommerce - Woocommerce - 通过产品 ID 获取元数据
- css - 响应式网格(网格模板列)
- pivot-table - 从值列表中筛选数据透视表 - VBA 代码
- python - 如何将日期时间中的日期更改为当月的第一天
- coinbase-api - Coinbase Candle API 结果的差异
- ruby - 无法在 Windows 上安装 shopify-cli
- graphql - 从 src 文件到源的 GraphQL 查询返回空边数组
- javascript - 使用 javascript 创建带有图像的多边形图案
- ssh - Ansible ssh 连接在其中一项任务中丢失 [失败] 而对其他任务有效