python - 可以向下滚动以加载更多页面的网络爬虫?
问题描述
我正在学习一些关于网络爬虫的知识,并想制作一个可以在 Steam 上寻找优惠的网络爬虫。Steam 有自己的页面,其中包含所有优惠,所以我可以抓取它以获得最佳优惠,但它只加载特定数量,你必须进一步向下滚动才能加载更多,然后你甚至必须滚动一次又一次地往下走。网络爬虫如何获得这些仅在您向下滚动时才加载的优惠?
解决方案
推荐阅读
- arrays - Swift Alamofire 将值放入字符串
- java - for Loop 2d 数组 BufferedWriter 未写入 txt
- angular - 为什么没有完整部署的 Angular Firebase Cloud Functions Emulator 不会更新函数?
- apache-spark - SparkSQL 无法将数据放入内存
- xamarin - 如何将 MVVMCross6 与 Xamarin.Forms 一起使用
- ruby-on-rails - ActiveAdmin - 如何通过 AJAX 向表单提交按钮发送 http 请求
- mysql - 选择我所属的所有组并显示这些组的成员
- c# - 在 Unity 中自动为脚本添加自定义编辑器的快捷方式
- angular - 如何使用 Angular 2 中的指令在宿主元素上设置计算宽度
- java - 如何防止 proguard 从输出 jar 中删除“module-info.class”?