代码之家 › 专栏 › 技术社区 › Horai Nuri

Python-如何使用BeautifulSoup将一个类定位到另一个类中?

web-crawler beautifulsoup python

Horai Nuri · 技术社区 · 9 年前

我正在学习用beautuloup和Python 3创建一个爬虫,我遇到了一个问题,我想在一个网站上获取的数据有多个类,这里有一个示例:

<tr class="phone">
  <a href="..." class="number"></a>
</tr> 

<tr class="mobile">
  <a href="..." class="number"></a>
</tr>

下面是我想用Python做的事情:

for num in soup.findAll('a', {'class':'mobile -> number'}):
    print(num.string)

我应该做什么来针对班级 .mobile .number ?

2 回复 | 直到 9 年前

Robáµ© 9 年前

您可以使用 soup.select 根据 CSS selector .

from bs4 import BeautifulSoup


html_doc = '''<tr class="phone">
  <a href="tel:+18005551212" class="number"></a>
</tr> 

<tr class="mobile">
  <a href="+13034997111" class="number"></a>
</tr> '''

soup = BeautifulSoup(html_doc)

# Find any tag with a class of "number"
# that is a descendant of a tag with
# a class of "mobile"
mobiles = soup.select(".mobile .number")
print mobiles

# Find a tag with a class of "number"
# that is an immediate descendent
# of a tag with "mobile"
mobiles = soup.select(".mobile > .number")
print mobiles

# Find an <a class=number> tag that is an immediate
# descendent of a <tr class=mobile> tag.
mobiles = soup.select("tr.mobile > a.number")
print mobiles

Pandemonium 9 年前

find_all() 元素,然后遍历列表并打印其 parent 的类是“移动”。

for dom in soup.find_all("a", "number"):
    # this returns a list of class names
    for class in dom.parent()["class"]:     
    if class == "mobile":
        print(dom.string)

或使用 select() 用于CSS选择器样式

for dom in soup.select("tr.mobile a.number"):
    print(dom.string)

推荐文章

yash agarwal · Python Selenium-如何基于span标记内的文本提取元素?

3 年前

Amar · 漂亮汤错误:“NoneType”对象没有属性“find\u all”

3 年前

ihonestlydontKnow · Python(BeautifulSoup)仅1个结果

3 年前

ARH · 如何使用Selenium识别网站中使用的所有标签

3 年前

Kevin Rodgers Jr. · Python BeautifulSoup:在in select语句中排除其他标记

3 年前

Jensen Holm · 在非常大的字符串中查找链接时遇到问题

3 年前

koshiboto · 使用python(bs4)从段落中获取第一个不位于括号之间的常规链接

3 年前

LaddieMawery · Beautifulsoup获取嵌套跨元素时遇到问题

3 年前

Ventorro · Python和Web抓取的新手。抓取一个HTML表格——但是它并没有显示所有的列

3 年前

aphexlog · 正在尝试使用BeautifulSoup将新行附加到表体中的第一行

3 年前