azure-data-factory - Azure 数据工厂数据流 - 删除空列
问题描述
在 azure 数据工厂中使用数据流移动数据时,我注意到数据(在接收器)缺少包含 NULL 值的列。当使用复制活动复制相同的数据时,这些列以它们的 NULL 值存在于接收器中。
源是镶木地板,汇是天蓝色 cosmos db。我的目标是避免定义任何模式,因为我只想“按原样”复制所有数据。我在源和接收器上使用了“允许架构漂移”选项。
我只会使用复制活动,但它似乎无法像数据流那样定义最大速度(RU 消耗),因此复制活动最终会很快消耗所有 cosmos db 的 RU(如此处描述)
编辑:
解决方案
数据流总是跳过写入带有 NULL 的 JSON 标记。除了复制活动之外,目前没有其他解决方法。
推荐阅读
- pandas - Pandas 按组的条件平均
- c - scanf 和 getchar 如何协同工作?
- python - Kivy文本输入宽度不变
- r - 在函数内返回带引号的变量,输入z在R中没有引号
- python - 如何将可能性设置为 tf.keras.layers.RandomFlip?
- python - 带滑动窗口的 ARIMA 模型 (SWARIMA)
- python - tensorflow梯度所有nan值-图卷积网络
- c - MinGW32 代码块-> 链接器 ld 返回错误 undefined reference to `__main'
- android-jetpack-compose - 如何在 Compose Image 中显示位图
- django - “响应”对象没有属性“用户”