脚本专栏 
首页 > 脚本专栏 > 浏览文章

python使用BeautifulSoup分页网页中超链接的方法

(编辑:jimmy 日期: 2024/11/18 浏览:3 次 )

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出www.jb51.net主页上所有包含了jb51的url链接

from BeautifulSoup import BeautifulSoup
import urllib2
import re
url = urllib2.urlopen("https://www.jb51.net")
content = url.read()
soup = BeautifulSoup(content)
for a in soup.findAll('a',href=True):
  if re.findall('sharejs', a['href']):
    print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

上一篇:Python中使用PDB库调试程序
下一篇:python实现分析apache和nginx日志文件并输出访客ip列表的方法