google-cloud-storage - 从外部网站上传数据到 Cloud Storage
问题描述
我需要将数据从公共来源上传到我的 Cloud Storage 存储分区之一。目前,我将数据下载到我的机器,然后将其上传到 GCS。作为庞大的数据源(本周总共 60GB),我开始遇到问题。
有没有办法直接在 GCS 中进行编码,而不需要所有本地下载过程?
更新:我尝试过使用curl http://originaladdress | gsutil cp - gs://bucket
. 问题是使用 100 MB 块完成整个过程需要 21 小时,这比我下载和上传文件所需的时间要长。那正确吗?我错过了一些参数吗?
解决方案
推荐阅读
- python - 正则表达式匹配失败
- xml - Python3 xml,我怎样才能找到这个非命名空间的 xml 元素?
- php - 如何修改magento 2中产品的描述?
- ios - 在 SceneKit 中播放视频的最佳方式是什么?
- python-3.x - 如何利用每个字符的另外 4 个字节
- ruby-on-rails - 使用 Stripe Checkout,我可以在 Stripe 端验证客户电子邮件地址的唯一性吗?
- angular - 将光标放在焦点输入字段值的末尾 | 角度 2
- javascript - 我正在尝试使用选择列表中的值但没有成功
- java - ClientHandlerException——泽西岛
- javascript - 为什么我的 redux 应用程序中的 state 总是为 null?