python爬取商品信息

老严要爬某网购网站的商品信息，正好我最近在学python，就一起写了一个简单的爬虫程序。

需求：某网的商品信息，包括商品名，市场价和售价

工具：python2.7.8，urllib2，re

#coding = utf-8import urllib2
import repath = "aaa.txt"
f = open(path, 'w+')for i in range(4980, 4991):print i# get webpage contenturl = "http://*" + str(i) + "*"page = urllib2.urlopen(url).read()# Regular matchingmatchTitle = re.search(r'<dt>(.*?)</dt>', page)matchMarketPrice = re.search(r'<del.*?>(.*?)</del>', page)matchCurrentPrice = re.search(r'<b>(.*?)</b>', page)# save resultif matchTitle and matchMarketPrice and matchCurrentPrice:f.write(matchTitle.group(1) + '\t' + matchMarketPrice.group(1) + '\t' + matchCurrentPrice.group(1) + '\n')
f.close()

　　部分结果显示：

欧莱雅奇焕光感粉嫩透亮修颜霜30ml ¥120.00 109.00
欧莱雅复颜洁面乳125ml   ¥130.00 105.00
欧莱雅复颜抗皱紧致滋润眼霜15ml   ¥210.00 179.00
欧莱雅复颜清漾柔肤水175ml ¥160.00 138.00

转载于:https://www.cnblogs.com/Rosanna/p/4125508.html

python爬取商品信息相关推荐

Python爬取商品信息（一）
爬取淘宝网商品的名称,价格,付款人数完整代码 def getHTML()讲解 def findMS(html)讲解 def download(data)详解需要改进的地方步骤一:提交商品搜索请求 ...
Python爬取商品信息，包括标题、店铺、价格、评论数量、好评数、差评数、好评率
Python爬取电商商品信息,包括标题.店铺.价格.评论数量.好评数.差评数.好评率对电商商城数据的爬取主要是评论数量的爬取,标题.店铺.价格等字段可以直接获取网页源码然后通过etree进行解析,但 ...
python爬取商品信息_python爬取商品信息
原博文 2014-11-27 02:09 − 老严要爬某网购网站的商品信息,正好我最近在学python,就一起写了一个简单的爬虫程序. 需求:某网的商品信息,包括商品名,市场价和售价工具:pytho ...
python商品会员打折_双十一商品优惠打折，用Python爬取商品信息分析发现这里套路真深...
咱们今天就以京东笔记本电脑为例分析一下首先咱们针对京东商城笔记本的网页进行分析,这回只要在网页源码上分析,就可以获取笔记本价格.标题.评论数.商家名称.商家性质. 想要学习Python.关注小编,私 ...
python爬取商品信息_Python基于BeautifulSoup爬取京东商品信息
今天小编利用美丽的汤来为大家演示一下如何实现京东商品信息的精准匹配~~ HTML文件其实就是由一组尖括号构成的标签组织起来的,每一对尖括号形式一个标签,标签之间存在上下关系,形成标签树:因此可以说Be ...
苏宁易购网址爬虫爬取商品信息及图片
利用scrapy来爬取苏宁官网上任何商品的信息,主要的信息有商品标题.商品现价.商品原价.商铺名称,以及用scrapy的ImagesPipeline来下载商品图片. 部分主函数代码如下: # -*- ...
Python 爬取网页信息并保存到本地爬虫爬取网页第一步【简单易懂，注释超级全，代码可以直接运行】
Python 爬取网页信息并保存到本地[简单易懂,代码可以直接运行] 功能:给出一个关键词,根据关键词爬取程序,这是爬虫爬取网页的第一步步骤: 1.确定url 2.确定请求头 3.发送请求 4.写入 ...
python爬取机票信息
python爬取机票信息飞机和高铁列车不同,在同样的航线中有着不同的票价,借此我们希望获取尽量多的机票信息来分析机票的变化规律. 首先我们选取京东机票为爬取对象http://jipiao.jd.co ...
python爬取控制台信息_python爬虫实战之爬取智联职位信息和博客文章信息
1.python爬取招聘信息简单爬取智联招聘职位信息 # !/usr/bin/env python # -*-coding:utf-8-*- """ @Author ...
Python爬取售房信息并保存至CSV文件
Python爬取售房信息并保存至CSV文件在上一篇文章: Python爬取租房信息并保存至Excel文件,介绍了如何使用Python爬取租房信息并保存至Excel文件,在本案例中则是使用Python ...

python爬取商品信息

python爬取商品信息相关推荐

最新文章

热门文章