时间戳

首页 > 解决方案 > BS4 网页抓取到 CSV 文件，我想我也抓取了可能的行（'tr'）

python - BS4 网页抓取到 CSV 文件，我想我也抓取了可能的行（'tr'）

问题描述

我的网页抓取代码抓取的数据行比我需要的多。我想为每个玩家抓取行，看起来这些“tr”都包括：-

<tr class="diff-row evTabRow bc"

此外，我要获取的 TD 数据是：-
data-odig=
来自下表数据列表：-

<td class="bc bs o" data-bk="B3" data-odig="9" data-o="8" data-hcap="" data-fodds="9.0" data-ew-denom="4" data-ew-places="5" xpath="1"><p>9</p></td>

代码正在拾取
data-o=
td 这对我来说是有问题的，因为有时表示为分数。

任何建议表示赞赏

我是编码新手，python是我的第一次尝试。我的代码主要是根据我从 youtube 上获取的内容编写的，并复制了其他人试图满足我的需求。我试图编辑以具体说明要包含的表行和数据的类型，但找不到有效的答案（许多语法错误）。我怀疑我有一两行也没有做任何事情。

url = 'https://www.oddschecker.com/golf/the-masters/2020-us-masters/winner'

r = requests.get(url,headers = header)
soup = BeautifulSoup(r.text,'lxml')
table = soup.findAll("table")[1]

rows_list = []

for rows in table.findAll('tr'):
    cell_list = []
    for cell in rows.findAll('td'):
        text=cell.text
        cell_list.append(text)
    rows_list.append(cell_list)

标签： pythonweb-scrapinghtml-tablebeautifulsoupexport-to-csv

解决方案

find()并且findAll()/find_all()可以获得其他参数来过滤结果

findAll('tr', {'class': 'diff-row evTabRow bc'})

或者

findAll('tr', class_='diff-row evTabRow bc')

您可以使用Trueif 属性必须存在，但它可能具有不同的值

findAll('td', {'data-o': True})

在BeautifulSoup的文档中查看更多信息

推荐阅读