json - 安排从 Google Cloud Storage 到 BigQuery 的传输
问题描述
我在 GCS 中有一个包含多个子文件夹的存储桶,所以它就像 My Bucket -> 2021 -> 每个月的文件夹,包含每天的文件夹,包含每个小时的文件夹,包含多个文件。我一直在为每个文件手动创建表。它们在 json 中。我正在使用自动模式。
由于手动操作太艰巨,有没有办法安排自动创建这些表?我阅读了有关创建从 GCS 到 BQ 的传输的信息,但我需要为它创建一个目标表 - 我是否创建一个空表并手动输入架构?如果有这么多子文件夹,如何编写 Cloud Storage URI?
最后,这种方法是否正确?我读过很多东西,比如工作流或云功能,但这一个似乎更直截了当。
解决方案
推荐阅读
- firebase - Firebase 客户端对您的实时数据库的访问权限将在 X 天后到期
- c# - 通过 Outlook 发送电子邮件
- generics - 以元组结构的类型作为参数调用泛型函数是什么意思?
- angular - 在 Angular 7 注册表单错误处理中出现错误,例如缺少电子邮件@
- node.js - NodeJS 12.x:AWS Greengrass 中未找到错误
- sqlite - 如何在 Ubuntu 18.04 上安装或升级到 sqlite 3.33.0?
- apostrophe-cms - 如何强制撇号 cms 中的页面树?
- python - 如何绘制在 Y 轴上显示总人口百分比的分布曲线
- swift - ForEach onDelete 不适用于 LazyVStack
- c# - 使用 Winforms 使用 Combobox 绑定空值