amazon-s3 - 在 S3 上更改 Apache Drill 镶木地板碎片大小
问题描述
我正在使用 apache-drill-1.17.0 (./bin/drill-embedded) 并将我的数据存储在 S3 上。
我已经运行了以下命令:
ALTER SYSTEM SET `store.parquet.block-size` = 1073741824;
并添加到 core-site.xml:
</property>
<property>
<name>fs.s3a.block.size</name>
<value>256M</value>
</property>
但是每次我运行如下命令时:
CREATE TABLE entities (a, b, c,...) AS SELECT a, b, c,... FROM entities_view
我得到了几个片段,每个 32M。
我怎样才能控制它们的大小?
解决方案
推荐阅读
- sql - SQL - 仅显示大于 0 的值
- javascript - 如何在javascript中为“确认”警报制作连续循环
- php - 未知系统变量“post_content”
- apache-spark - 为什么水槽无法使用启动脚本运行?
- amazon-web-services - 如何从 AWS CloudWatch 向 Slack 发送有关特定错误的通知?
- pandas - 如何在 groupby 之后过滤特定的列值?
- android - 如何打印登录撰写
- django - Django:从模板访问 ModelMultipleChoiceField 中的查询集
- swift - 通过协议继承的 SwiftUI 可重用视图
- c++ - Cpp - 传递一个非静态函数作为参数