google-bigquery - BigQuery 从 sftp 检索数据

Question

我有一个面向互联网的 sftp 服务器，它定期更新 csv 文件。是否有命令让 BigQuery 从此 sftp 检索数据并将其放入表中。或者，任何支持此功能的 API 或 python 库？

标签： google-bigquerysftp

Answer 1

至于 BigQuery - 我所知道的与 SFTP 没有集成。

您需要：

• 创建/查找从 SFTP 读取并推送到 GCS 的脚本。
• 向 SFTP 服务器添加 HTTPS 服务，以便使用 GCS 传输服务 ( https://cloud.google.com/storage-transfer/docs/ )读取您的数据