首页 > 解决方案 > 如何执行放置在标签href内的javascript

问题描述

任何人都可以帮助我进行网络抓取,我想从包含多个页面的 url 中获取数据,并且 url 未更改。

我试过用漂亮的汤,但我只能得到第一页的数据。

html = urlopen(URL)
soup = BeautifulSoup(html, 'lxml')
df = soup.find_all('a', href=True)
for x in df:
    exxxx = js2py.eval_js(x['href'])

尝试使用js2py,没有用。

标签: javascriptpythonbeautifulsoup

解决方案


推荐阅读