python - 请求过多的链接会破坏 Selenium 的网站吗
问题描述
我正在使用 selenium 开发一个 youtube 项目,我每 30 秒请求一个新链接,但是在 10 个链接之后,评论部分继续加载,并且从不加载,我检查了互联网,复制了相同的链接并将其粘贴另一个浏览器,但工作正常,所以抓取太多链接会影响网站吗?
解决方案
是的,它确实。
您不能继续不断地抓取网站。他们有适当的系统来检测这些类型的活动并阻止这些请求。
我建议您使用YouTube API来获取您需要的数据。
推荐阅读
- ios - iOS 14、mobileconfig、DNS over HTTPS,支持 DNSDomainMatch 白名单
- visual-c++ - 如何在 MSVC 中启用 SSE4.1 和 SSE3(但不是 AVX)
- json - 通过宏定义时未正确推断特征实现
- dbus - 使用 busctl 读取 openbmc 中的传感器值
- javascript - 某些 PDF 在使用 Base64 字符串显示时显示为空白
- c# - NET Core RazorPages 中实现 PageModel 的抽象类
- excel - 函数“如果”在结果的情况下是一个变量
- spring-boot - 在 Springboot 中输入代理设置后分级未知主机“services.gradle.org”错误
- c# - 如何在C# for loop Logic中将三分为三
- css - 任何自定义 CSS 来删除 Slick Slider 轮播中图像上的灰色叠加层?