web - scrapy splash - SplashFormRequest 参数错误
问题描述
我是splash的新手,我只是将它实现为scrapy,并尝试用它来替换一个经典的scrapy请求(因为我想抓取的页面使用了一些js)。到目前为止,我有:
for a in res_json['data']:
req = SplashFormRequest(
'my_url_to_request',
self.fill_details, #my callback
args={'http_method': 'POST', 'body': "valeur="+str(a['id'])},
)
yield req
问题是我一直在寻找一种方法来设置我的标题和我的 cookie,但我找不到方法(即使如此文档谈论它我不明白最好的方法?
解决方案
推荐阅读
- python - Conda 激活基础错误 - 术语“conda”未被识别
- if-statement - 我的程序可以运行,但我不知道我的源代码是否空闲
- machine-learning - 如何确定 RNN Keras 层中的单元数?
- python - Python Selenium如何仅在锚标签包含某些属性值时获取锚标签href值
- azure - 如何使用数据流在 blob 存储中获取 JSON 数组
- android - 从锁定屏幕中的通知打开通话活动
- groovy - Groovy 捕获父异常但不是子异常
- javascript - 调用初始 res.render 后向 EJS 发送数据?
- reactjs - 从 API 加载数据后 PrimeReact Select Item 为空
- c++ - 如何让 QtCreator FakeVim 在文件保存时用空格替换 TABS?