azure-data-factory-2 - 数据工厂 Power Query DFExecutorUserError UnsafeProjection$
问题描述
我的 Azure 数据工厂 (v2) 管道作业在我的所有 powerquery 步骤上都开始失败。这是有效的,我无法识别任何更改。似乎是 UnsafeProjection$ 的火花错误:
Operation on target ######## failed:
{"StatusCode":"DFExecutorUserError",
"Message":"Job failed due to reason: org.apache.spark.sql.catalyst.expressions.UnsafeProjection$.create(Lscala/collection/Seq;Lscala/collection/Seq;Z)Lorg/apache/spark/sql/catalyst/expressions/UnsafeProjection;",
"Details":"org.apache.spark.sql.catalyst.expressions.UnsafeProjection$.create(Lscala/collection/Seq;Lscala/collection/Seq;Z)Lorg/apache/spark/sql/catalyst/expressions/UnsafeProjection;"}
步骤Source与前一个复制步骤共享一个Sink 。Previsue 步骤将数据复制到 DataLake Gen2enter code here
容器中。
仔细检查了架构等,但找不到任何问题。
希望有人可以提供帮助?
解决方案
好的,所以这已经解决了:-)
今天抽出一些时间进行更多调查,进入我的干净测试项目并且它起作用了。然后回到生产管道,它也起作用了。
一定是天蓝色的问题。
只是希望有一种方法可以向微软报告问题,并且至少可以确认问题已被注意到并正在处理中!!!!