当我找到值时，如何停止网页抓取数据？

Question

我有这段代码，我可以在Python 2.7的网站上搜索名为“ctable”的所有表。但是我想停止它，当它到达这个值为XXXX的“ctable”时。我需要这个值XXXX。所以如果它找到这个文本我想停止网页浏览这些表。

可能吗？

这里我的代码：

soup = BeautifulSoup(x, 'lxml') 
 

 
datatable=[] 
 
for ctable in soup.find_all('table', "ctable")[:-1]: 
 
    for record in ctable.find_all('tr'): 
 
     temp_data = [] 
 
     for data in record.find_all('td'): 
 
      temp_data.append(data.text.encode('latin-1')) 
 
     datatable.append(temp_data)

我尝试这样做：

datatable=[] 
 
for ctable in soup.find_all('table', "ctable")[:-1]: 
 
    for record in ctable.find_all('tr'): 
 
     temp_data = [] 
 
     for data in record.find_all('td'): 
 
      temp_data.append(data.text.encode('latin-1')) 
 
      if 'modul' in data.text: 
 
       break   
 
datatable.append(temp_data)

Answer 1

在代码中实现一个break操作：

... 
    (your code above) 
datatable=[] 
stop = 0 
for ctable in soup.find_all('table', "ctable")[:-1]: 
    if stop == 1: 
     break 
    for record in ctable.find_all('tr'): 
     if stop == 1: 
      break 
     temp_data = [] 
     for data in record.find_all('td'): 
      temp_data.append(data.text.encode('latin-1')) 
      if 'modul' in data.text: 
       stop = 1 
       break   
     datatable.append(temp_data) 

我没有给予足够的重视，你有一个三重for循环。也许现在它会工作？

我将break添加到每个循环。

替代if和break：

datatable=[] 
stop = 0 
for ctable in soup.find_all('table', "ctable")[:-1]: 
    for record in ctable.find_all('tr'): 
     temp_data = [] 
     for data in record.find_all('td'): 
      temp_data.append(data.text.encode('latin-1')) 
      if 'modul' in data.text: 
       stop = 1 
       break   
     datatable.append(temp_data) 
     if stop == 1: 
      break 
    if stop == 1: 
     break