linux - “错误 429:请求过多。” 使用 wget 从 Zenodo 下载大文件(15G)时发生
问题描述
我想从这里下载 Zenodo 的 LoDoPaB-CT 数据集。
“测试”和“验证”数据已成功下载。但是在下载火车数据时,这些数据非常大。ERROR 429: Too Many Requests
有时开始下载后,我总是收到错误消息。也就是说当下载大小在1G~3G左右时,就会出现429错误。我应该怎么做才能解决这个问题?谢谢!
解决方案
尝试使用 wget 的“--wait”和“--continue”选项。例如:
wget --wait 10 --random-wait --continue ${your_url}
将在检索之间随机等待 5 到 15 秒,然后继续获取部分下载的文件。
推荐阅读
- java - 多点触控安卓工作室,实现
- scala - 使用 scala spark 删除具有给定扩展名的所有文件
- java - Java中的多态性以及类和方法之间的关系
- r - 如何在r中绘制具有相同均值但方差不同的正态分布
- saml - saml 身份验证中用户的 Azure 标识平台定价
- javascript - ReactJS:onSubmit 取决于 API 响应关闭模式框
- node.js - async_hooks - 为什么没有调用/清理资源
- android - 如何理解为什么 R8 不混淆代码
- server - Windows 服务器上的计划任务无法写入网络驱动器 - 错误的凭据,来自 cmd 行有效
- ansible - Ansible - 在循环中附加一个字符串 var 本身