Python抓取标题请求

Question

它可以通过任何方式来抓取来自站点的所有头文件请求，该请求会在浏览器网络工具（也许是selemium）中加载？

我需要这个URL

Answer 1

试试这个代码，让我知道的任何问题的情况下：

links = [] 
for element in driver.find_elements_by_xpath('//head/*[@href or @src]): 
    link = element.get_attribute("href") 
    links.append(element.get_attribute("href")) if link != '' else links.append(element.get_attribute("src")) 

要想从内部框架链接也可能需要补充一点：

for frame in driver.find_elements_by_tag_name('iframe'): 
    driver.switch_to_frame(frame) 
    for element in driver.find_elements_by_xpath('//head/*[@href or @src]): 
     link = element.get_attribute("href") 
     links.append(element.get_attribute("href")) if link != '' else links.append(element.get_attribute("src")) 
    driver.switch_to_default_content()