python - Beautifulsoup 到 mysql
问题描述
我在一个站点上找到了这个示例代码,并尝试根据我希望它的工作方式来实现它。不幸的是,原始代码工作正常,有多行被刮掉的项目,但我改变的那一行只插入了 1 个项目。
from urllib import urlopen
from bs4 import BeautifulSoup
import pymysql.cursors
html = urlopen("https://www.banggood.com/Wholesale-Computer-and-Networking-c-155.html")
bsObj = BeautifulSoup(html, "html.parser")
recordList = bsObj.findAll("div", {"class": "wrap overflow", })
connection = pymysql.connect(host='localhost',
user='root',
password='',
db='db',
charset='utf8mb4',
cursorclass=pymysql.cursors.DictCursor)
try:
with connection.cursor() as cursor:
for record in recordList:
title = record.find("span", {"class": 'title', }).get_text().strip()
artist = record.find("span", {"class": "price wh_cn"}).get_text().strip()
sql = "INSERT INTO `artist_song` (`artist`, `song`) VALUES (%s, %s)"
cursor.execute(sql, (artist, title))
connection.commit()
finally:
connection.close()
我做错了什么 ?
解决方案
推荐阅读
- python-3.x - 如何解决virtualenv中的“没有名为'cPickle'的模块”异常
- python - Python Plotting API:如何通过烧瓶 API 公开您的科学 Python 图?
- swift - 如何根据用户给出的数量使用循环显示AZ字符?
- javascript - 将 pug 编译的内容附加到 pug 模板
- git - Visual Studio 2017 的多个 Git 存储库
- javascript - jsx 和 React 中的动态标签名称不传递道具
- php - 我无法在 wordpress 中使用 elementor 编辑我的主页
- gradle - gradle 中的自定义配置
- python - 在 Python 中使用带有 R 语法的 statsmodels.api 进行逻辑回归
- azure - Azure 应用程序网关中的失败请求列表