首页 > 代码库 > Python 网络爬虫（图片采集脚本）
Python 网络爬虫（图片采集脚本）
===============爬虫原理==================
通过Python访问网站，获取网站的HTML代码，通过正则表达式获取特定的img标签中src的图片地址。
之后再访问图片地址，并通过IO操作将图片保存到本地。
===============脚本代码==================
import urllib.request # 网络访问模块import random # 随机数生成模块import re # 正则表达式模块import os # 目录结构处理模块# 初始化配置参数number = 10 # 图片收集数量path = ‘img/‘ # 图片存放目录# 文件操作if not os.path.exists(path): os.makedirs(path)# 图片保存def save_img(url, path): message = None try: file = open(path + os.path.basename(url), ‘wb‘) request = urllib.request.urlopen(url) file.write(request.read()) except Exception as e: message = str(e) else: message = os.path.basename(url) finally: if not file.closed: file.close() return message# 网络连接http = ‘http://zerospace.asika.tw/photo/‘ # 目标网址position = 290 + int((1000 - number) * random.random())ids = range(position, position + number)for id in ids: try: url = "%s%d.html" % (http, id) # 后缀生成 request = urllib.request.urlopen(url) except Exception as e: print(e) continue else: buffer = request.read() buffer = buffer.decode(‘utf8‘) pattern = ‘class="content-img".+\s+.+src="http://www.mamicode.com/(.+/.jpg)"‘ imgurl = re.findall(pattern, buffer) # 过滤规则 if len(imgurl) != 0: print(save_img(imgurl[0], path)) else: continue pass
===============运行结果==================
Python 网络爬虫（图片采集脚本）
声明：以上内容来自用户投稿及互联网公开渠道收集整理发布，本网站不拥有所有权，未作人工编辑处理，也不承担相关法律责任，若内容有误或涉及侵权可进行投诉： 投诉/举报 工作人员会在5个工作日内联系你，一经查实，本站将立刻删除涉嫌侵权内容。