intake - 数据持久化到原始数据源
问题描述
任何人都可以告诉我以下用例是否有意义并且适用于摄入软件组件。
我们喜欢使用 Intake 构建抽象层或 API 服务端点来封装典型的数据操作,例如数据检索和数据持久化回原始数据系统。简而言之,从数据库系统构建 read() 和 save(),例如 GCP BigQuery。
解决方案
Intake 提供有限的写入功能(目前):对于每种数据容器类型,仅支持一种格式,用于“持久”(本地存储)和“导出”(或上传)功能。您的 bigquery 数据可能类似于数据框,所以这将是镶木地板。我相信你可以简单地保存到 GCS,并对这些文件运行 bigquery,但我不知道你是怎么做的。
没有一种通用的方法可以将数据写入任何支持读取的后端。
推荐阅读
- r - 在条形图中向第三个变量添加另一个标签(ggplot2)
- unity3d - 如何生成一个随机数并确保在 Unity 中使用 Photon 的每个人都相同?
- mysql - sql中join语句如何执行
- android - Facebook 与来自 android 应用的元数据共享链接
- django - 从列表中向下移动后,Django url 无法工作
- c - 这个函数如何将我输入的单词数作为 argc 的参数?当你有一个未声明的 int 参数时总是这样吗?
- python - 从 git 推送和拉取后,我的 python exe (cx_freeze) 不起作用
- button - Indesign 按钮添加操作以在 acrobat 中打开查找窗口
- android - 如何使用 Android-Image-Cropper 制作位图
- xml - 通过 SOAP 在 Polarion 中创建工作项