首页 > 解决方案 > ParquetWriter 或 AvroParquetWriter 可以单独存储模式吗?

问题描述

你知道吗,ParquetWriter 或 AvroParquetWriter 可以不带数据单独存储 schema 吗?

现在模式被写入镶木地板文件:

AvroParquetWriter.Builder builder = AvroParquetWriter.<GenericRecord>builder(new Path(file.getName()))
            .withSchema(payload.getSchema())
            .build90;

你知道可以只将没有模式的数据写入镶木地板文件吗?谢谢!

标签: hadoopavroparquet

解决方案


@ЭльфияВалиева。不,页脚中的 parquet 元数据(模式)对于为 parquet 阅读器提供必要的模式来读取 parquet 数据是必要的。


推荐阅读