Python使用四种方法实现获取当前页面内所有链接的对比分析

# 再打开所有iframe查找全部的a标签

for iframe in soup.find_all('iframe'):

  url_ifr = iframe['src'] # 取得当前iframe的src属性值

  rr = requests.get(url_ifr)

  rr.encoding = 'gb2312'

  soup_ifr = BeautifulSoup(rr.text,'lxml')

  for a in soup_ifr.find_all('a'):

    link = a['href']

    m = re.match(r'http:\/\/.*?(?=\/)',link)

    #print(link)

    if m:

      all_urls.add(m.group(0))