python爬取京东手机参数_python抓取京东小米8手机配置信息

本文代码是使用python抓取京东小米8手机的配置信息

首先找到小米8商品的链接：https://item.jd.com/7437788.html

然后找到其配置信息的标签，我们找到其配置信息的标签为

然后再分析其配置信息的页面的规律，我们发现都是dl中包含了dt和dd，而一个dt对应的一个dd，dt对应的是参数，dd对应的是参数具体的值

下面是源代码

import requests

from bs4 import BeautifulSoup

from pandas import Series

from pandas import DataFrame

response=requests.get("https://item.jd.com/7437788.html")

html=response.text

soup=BeautifulSoup(html,"html.parser")

divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的标签

data=DataFrame(columns=["参数","值"]) #定义一个二元的DataFrame

dls=divSoup.find_all("dl")

for dl in dls:

dts=dl.find_all("dt")

dds=dl.find_all("dd")

if len(dts)==len(dds):

for i in range(len(dts)):

f=dts[i].getText();

p=dds[i].getText();

data=data.append(Series([f,p],index=["参数","值"]),ignore_index=True);

print(data)

这是最终抓取到的配置信息，一共有64行，这里我就不一一列举出来了

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持我们。

本文标题: python抓取京东小米8手机配置信息

本文地址: http://www.cppcns.com/jiaoben/python/244577.html

python爬取京东手机参数_python抓取京东小米8手机配置信息相关推荐

python爬知识星球付费数据_python抓取知识星球精选帖,制作为pdf文件
版权声明:本文为xing_star原创文章,转载请注明出处! 背景: 这两年知识付费越来越热,我也加入了不少知识星球,总觉得信息有些过载了.一天不看,就有500+的内容显示未读,弄的自己格外的焦虑.感 ...
python批量下载网页文件夹_Python抓取网页批量下载文件方法初探（正则表达式+BeautifulSoup） (转)...
最近两周都在学习Python抓取网页方法,任务是批量下载网站上的文件.对于一个刚刚入门python的人来说,在很多细节上都有需要注意的地方,以下就分享一下我在初学python过程中遇到的问题及解决方法 ...
python爬取京东商品价格走势_python抓取京东价格分析京东商品价格走势
代码如下: from creepy import Crawler from BeautifulSoup import BeautifulSoup import urllib2 import json ...
python 爬取财经新闻股票_python 抓取新浪财经股票数据
新浪并未提供API,但我们可以通过抓包来获取实时或历史行情数据. 实时行情比如我们可以通过浏览器访问: ?== 来获取证券代码为的实时行情数据,可以看到内容为: ="华泰证券,,,,20. ...
python抓取股票竞价数据_Python 抓取新浪财经股票数据
新浪并未提供 API,但我们可以通过抓包来获取实时或历史行情数据. 实时行情比如我们可以通过浏览器访问: http://hq.sinajs.cn/?format=text&list=sh60 ...
python百度贴吧发帖时间_python抓取百度度贴吧
我们打开一个百度贴吧的帖子然后查看源码 Paste_Image.png 首先我们先拿到帖子的标题,通过查看源码,我们发现,他的标题的html为: 纯原创我心中的NBA2014-2015赛季现役50大 ...
python模拟手机登录_Python(Tornado)模拟登录小米抢手机
今天看到同事参与小米的抢购,几经数个星期的尝试,终于抢到了一台小米电视--看了一下小米的抢购流程,似乎可以用程序可破.于是想写点东西玩玩(你懂的--),第一步肯定是先得模拟登录小米帐号,当练手吧. 用 ...
Python爬虫实战：手机APP数据抓取分析！谁说不能爬取app数据的？
大多数手机APP里面返回的是json格式数据,或者一堆加密过的数据 .这里以超级课程表APP为例,使用python抓取超级课程表里用户发的话题.主要是练习python爬取app的一些方式和技巧. 1. ...
Python之 - 使用Scrapy建立一个网站抓取器，网站爬取Scrapy爬虫教程
Scrapy是一个用于爬行网站以及在数据挖掘.信息处理和历史档案等大量应用范围内抽取结构化数据的应用程序框架,广泛用于工业. 在本文中我们将建立一个从Hacker News爬取数据的爬虫,并将数据按我 ...

python爬取京东手机参数_python抓取京东小米8手机配置信息

python爬取京东手机参数_python抓取京东小米8手机配置信息相关推荐

最新文章

热门文章