首页 > 代码库 > python爬取商品信息
python爬取商品信息
老严要爬某网购网站的商品信息,正好我最近在学python,就一起写了一个简单的爬虫程序。
需求:某网的商品信息,包括商品名,市场价和售价
工具:python2.7.8,urllib2,re
#coding = utf-8import urllib2import repath = "aaa.txt"f = open(path, ‘w+‘)for i in range(4980, 4991): print i # get webpage content url = "http://*" + str(i) + "*" page = urllib2.urlopen(url).read() # Regular matching matchTitle = re.search(r‘<dt>(.*?)</dt>‘, page) matchMarketPrice = re.search(r‘<del.*?>(.*?)</del>‘, page) matchCurrentPrice = re.search(r‘<b>(.*?)</b>‘, page) # save result if matchTitle and matchMarketPrice and matchCurrentPrice: f.write(matchTitle.group(1) + ‘\t‘ + matchMarketPrice.group(1) + ‘\t‘ + matchCurrentPrice.group(1) + ‘\n‘)f.close()
部分结果显示:
欧莱雅奇焕光感粉嫩透亮修颜霜30ml ¥120.00 109.00欧莱雅复颜洁面乳125ml ¥130.00 105.00欧莱雅复颜抗皱紧致滋润眼霜15ml ¥210.00 179.00欧莱雅复颜清漾柔肤水175ml ¥160.00 138.00
python爬取商品信息
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。