python爬虫

发布时间:2019-08-16 10:57:15编辑:auto阅读(1730)

    #!/usr/bin/python
    import re #导入正则模块
    import urllib #导入url模块
    def getHtml(url): #定义获取网页函数
            page = urllib.urlopen(url) #打开页面
            html = page.read() #读取页面
            return html #返回页面
    def getImg(html): #定义获取图片函数
            reg = r'src="(.*?\.jpg)" width' #定义获取的图片匹配
            imgre = re.compile(reg) #编译定义的正则
            imglist = re.findall(imgre,html) #查找页面中的图片
            x = 0
            for imgurl in imglist: #循环获取图片的名字
                    urllib.urlretrieve(imgurl,'%s.jpg' % x) #传递参数给图片赋名
                    x+=1
    html = getHtml("http://tieba.baidu.com/p/1948539548") #定义页面地址
    getImg(html) #运行函数获取图片


关键字