google-cloud-platform - BQ 表的模式转换 - 列数据类型的更改

Question

我们正在 GCP 上进行大数据管道自动化，并正在摄取一些 CSV 文件。为了防止由于架构导致 BQ 级别的进程中断，我们在将所有列转换为“STRING”类型后摄取了第一个表。

在 BQ 中是否可以在刚刚摄取的表上进行模式转换，以便我们可以将 STRING 类型更改为它们的实际类型，如 INT64、FLOAT 等。

这是一个好方法吗？

标签： google-cloud-platformgoogle-bigquerypipeline

Answer 1

您可以尝试GCS/BQ 传输服务并提前定义您的架构。如果出现故障，您可以收到通知。