google-cloud-platform - 将 10gb 文件上传到 GCS
问题描述
我正在将此文件上传到云中,并看到上传速度约为 1.3MiB/s。感觉这很慢,可能有更好的方法,但我的公司对云计算很陌生。
我正在使用 google SDK 通过以下方式连接和上传:
gsutil cp [10gb 文件] [桶]
我读过有关并行上传的信息,但担心需要一些特殊的 crcmod 的警告。
任何帮助深表感谢!
编辑:我尝试了 -o GSUtil:Parallel 建议,但这并没有加快我的上传速度。我正在通过 VPN 路由的桌面执行此操作。我不知道这是否有任何后果,或者我如何检查这是否可能导致问题。
解决方案
您已经了解了gsutil
哪些处理可恢复的上传。
可恢复上传是上传大文件的推荐方法
将数据上传到 Cloud Storage 时,gsutil 命令行工具在 gsutil cp 和 gsutil rsync 命令中使用可恢复上传。
此 Google 文档中有关可恢复上传的更多详细信息。
推荐阅读
- java - 排除应用程序 Java 错误的原因
- sql - 选择所有对话和每个对话的最后一条消息(+ 用户数据)
- python - Django 在 view.py 中管理同一页面中的不同表单
- python - 无法理解打开文本文件的错误
- java - JavaFX - 根据窗口大小将 ScrollPane 的 vvalue 更改为特定数量
- sublimetext3 - 如何覆盖 Sublime Text 3 包的 (CSS3) 完成语法
- python - 使用来自另一个列表的信息生成列表的 Python 问题
- reactjs - WebSocket 服务器中的 Redux
- html - TOSCA - 试图引导表列内部 html 元素
- java - 使用其他文件的 Gradle exec python 文件:权限被拒绝