python-3.x - 如何使用 Python 在现有 AVRO 文件中追加数据
问题描述
我有一个具有相似架构的数据框，我需要将数据附加到 AVRO 文件中。我不喜欢将 avro 文件作为一部分添加到文件夹中。供您参考，我的 AVRO 文件未作为一部分放入该文件夹中。你能帮我解决这个任务吗？
解决方案
您可以在写入数据帧时使用模式覆盖来写入数据。
但是part文件是spark创建的，是分布式处理，每个executor根据数据量吐出一个文件
推荐阅读
- c - 计算和打印矩阵的对角线之和
- javascript - 如何在 Angular 中使用 addEventListener 和 postMessage？
- php - 如何将日期、时间和值从单选按钮放入数据库
- c# - 逐个像素地动态绘制和显示，有一些延迟
- npm - 如何从 Nexus oss 代理获取依赖于 github 项目的 npm 包
- django - Django 测试 - 发送包含整数的数组数组
- android - 在 android 中使用改造登录
- json - 我如何在 nunjuncks 中乘以数据？
- swift - 为什么不能在swift中将可变参数标记为inout？
- vue.js - Vue Js 2 / Vue-CLI 3 / 托管时显示空白页