python - Python Shopify Scraper 不抓取所有集合
问题描述
我正在使用这个刮板刮板 Shopify 商店:
https://github.com/helloiamelliot/shopify-python-scraping-tool/blob/master/shopify.py
当我运行时,python shopify.py [url]
一些集合被刮掉但不是全部
我将检查集合,python shopify.py --list-collections [URL]
然后按特定集合进行搜索,刮刀将刮取不在原始查询中的产品。
例如:如果我运行python shopify.py -c wipes https://shop.superbodycare.com/
2 个产品被刮掉。
但是,当我运行时:
python shopify.py https://shop.superbodycare.com/
原始查询中的 2 个产品未被抓取。
知道为什么吗?我希望在不查询每个集合的情况下抓取每个产品。
解决方案
推荐阅读
- apache-spark - 使用 Cloud SQL 代理从 Dataproc 连接到 Cloud SQL
- c# - 字典将键与列表相交,并在开始的 LINQ 处获得具有值的结果字典
- javascript - Multiple image upload feature with jquery - Preview Images won't disappear on click
- pandas - 如何将带有列表的字典转换为具有默认索引和列名的数据框
- sql - SQL Server:查明用户是否在特定时间段内启用
- javascript - MongoDB Node.JS 驱动程序:使用数组创建、附加和更新文档
- node.js - 目标文件夹为空,imagemin webp 不工作
- android - 使用 Zip4j 库在播放控制台中出现警告错误如何解决?
- awk - 如何使用管道同时使用 grep 和 sed
- html - 三.js OrbitControls 不工作,控件未定义