如何提取特定标题后面的HTML表?

遵循@zroq的逻辑 answer 在另一个问题上,此代码将为您提供定义的头后面的表(“好东西”)。请注意,我只是把所有的HTML放在一个名为“HTML”的变量中。

from bs4 import BeautifulSoup, NavigableString, Tag

soup=BeautifulSoup(html, "lxml")

for header in soup.find_all('h3', text=re.compile('THE GOOD STUFF')):
    nextNode = header
    while True:
        nextNode = nextNode.nextSibling
        if nextNode is None:
            break
        if isinstance(nextNode, Tag):
            if nextNode.name == "h3":
                break
            print(nextNode)

输出:

<table class="foo">
<tr>
<td>Key C</td>
</tr>
<tr>
<td>I WANT THIS STRING</td>
</tr>
</table>

干杯!

这个 docs 如果你不想使用 find_all ,您可以这样做:

for sibling in soup.a.next_siblings:
    print(repr(sibling))

我相信有很多方法可以更有效地做到这一点,但我现在可以考虑的是:

from bs4 import BeautifulSoup
import os
os.chdir('/Users/Downloads/')
html_data = open("/Users/Downloads/train.html",'r').read()
soup = BeautifulSoup(html_data, 'html.parser')
all_td = soup.find_all("td")
flag = 'no_print'
for td in all_td:
    if flag == 'print':
        print(td.text)
        break
    if td.text == 'Key C':
        flag = 'print'

输出:

I WANT THIS STRING