google-cloud-platform - bigQuery 数据导出费用
问题描述
我正在开发一个项目,该项目包括在 BigQuery 中接收数据、进行一些聚合并将其导出到 Qlik Sense 以制作仪表板。我仍处于探索阶段,只有几 Gb 的数据,但我想计算在生产阶段将数据从 BigQuery 导出到外部平台需要支付多少费用。当我将数据从 Cloud Storage 存储桶(数据的来源)传递到 BigQuery 时,会发生数据压缩,即 bigQuery 中的表占用的空间比 Cloud Storage 存储桶中的要少。因此,我的问题是,当我将数据从 BigQuery 导出到外部平台时,会考虑多少流量?数据的原始大小(压缩前),还是 bigQuery 上的大小(压缩后的)?出口(导出)量是否取决于 Qlik 用于导出数据的格式?如果是,
解决方案
如果您遵循BigQuery Exporting Data并将 BigQuery 表数据导出到 GCS。出口本身是免费的。
虽然是免费的,但每个项目每天的导出数据限制为 10 TB。如果导出配额不适合您,建议您使用Storage API 。
如果您尝试使用Qlik/BigQuery connector。我注意到压缩后的最大响应大小为 128MB,它可能无法为您导出几 GB 的数据。从文档来看,BigQuery 端的定价模型很简单,因为连接器只是放置查询和读取响应:
- 查询成本:请参阅BigQuery 查询定价,它基于查询扫描的表的大小
- 接送费用:免费
推荐阅读
- javascript - Redux-form 异步验证,避免使用“throw”
- node.js - Houndify Speech to Text 将 SpokenRespons 留空
- html - 网页上的 CSS / HTML 溢出问题
- acumatica - 重定向操作中的数据视图搜索不一致?
- gradle - IntelliJ IDEA(2020.2):Gradle:锁定文件:repository/caches/journal-1/journal-1.lock
- vue.js - 页面刷新后 Axios 拦截器不起作用(Vue.js)
- git - 如果将 Jenkins 管道作为代码提交(用于 SCM 设置的管道脚本),如何停止构建触发器
- python - “utf-8”编解码器无法解码位置 39 中的字节 0x85:无效的起始字节(怎么办?)
- javascript - 在终端中使用 vscode 命令没有这样的文件或目录
- php - 无法启动 PHP 7.2 FastCGI 进程管理器