首页 > 解决方案 > Python Shopify Scraper 不抓取所有集合

问题描述

我正在使用这个刮板刮板 Shopify 商店:

https://github.com/helloiamelliot/shopify-python-scraping-tool/blob/master/shopify.py

当我运行时,python shopify.py [url]一些集合被刮掉但不是全部

我将检查集合,python shopify.py --list-collections [URL]然后按特定集合进行搜索,刮刀将刮取不在原始查询中的产品。

例如:如果我运行python shopify.py -c wipes https://shop.superbodycare.com/2 个产品被刮掉。

但是,当我运行时:

python shopify.py https://shop.superbodycare.com/

原始查询中的 2 个产品未被抓取。

知道为什么吗?我希望在不查询每个集合的情况下抓取每个产品。

标签: pythonweb-scraping

解决方案


推荐阅读