python - virustotal.com 中的 Python 抓取

Question

我想从https://www.virustotal.com/gui/user/thor/comments获取恶意软件哈希并保存到文本文件或数据库。之后每 5 分钟刷新一次并自动将新哈希添加到文本文件或数据库。我用beautifulsoup 和request libs 尝试了它，但是这个评论没有标签（a，div 等）和类，因为评论部分适用于javascript。

我怎样才能从评论中刮掉这个散列？

感谢您的帮助。

标签： pythonwebscreen-scraping

Answer 1

您需要使用像Selenium这样的东西来实际呈现网页，而不是像 beautifulsoup 这样的 html 解析器。