爬取楼盘网并将数据保存在excel表中

初学，代码有点烂，有些错误先不处理。

#!/usr/bin/python
# -*- coding: <encoding name> -*-import requests
from bs4 import BeautifulSoup
from openpyxl import Workbookwb = Workbook()
ws = wb.active
ws.append(['序号','楼盘名称', '面积', '价格','地址'])
# wb.save("e:sample.xlsx")headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.77 Safari/537.36'
}# 定义楼盘的各项信息列表，便于进行数据追加保存
name_list = []
price_list = []
area_list = []
add_list = []i = 1
pagenum = input('请输入要抓取<楼盘网>多少页的数据：')# 通过循环，设定pagenum数值来抓取多少页的楼盘数据
while i <= int(pagenum):url = 'http://fs.loupan.com/xinfang/p'+str(i)res = requests.get(url,headers = headers)print('第>>>>>  '+ str(i) + '  <<<<<页数据抓取完毕！！' ) # 打印抓取页面的进程res.encoding = res.apparent_encodingsoup = BeautifulSoup(res.text,'html.parser')# 获取楼盘名字，并追加保存在name_list列表中name = soup.find_all('h3')for a in name:name_list.append(a.text)# 获取楼盘面积大小，并追加保存在area_list列表中area = soup.find_all(class_="type")for a in area:area_list.append(a.text)# 获取楼盘地址，并追加保存在add_list列表中add = soup.find_all(class_="add")for a in add:add_list.append(a.text)# 获取楼盘价格，并追加保存在price_list列表中price = soup.find_all('li',class_="price")for b in price:price_list.append(b.text)i += 1x = 0
y = 27 # 每一页有27个楼盘信息需要爬取，进行for循环不要超出。并通过append一行一行将楼盘信息保存到Excel表格中
while x < y*(i-1):ws.append([str(x+1),name_list[x],area_list[x],price_list[x],add_list[x]])x += 1wb.save("e:sample.xlsx") # 将文件存盘

爬取楼盘网并将数据保存在excel表中相关推荐

爬取豆瓣电影 Top250 电影并存储到 Excel 表中
文章目录一.前期准备二.代码一.前期准备观察网页 url 或者通过最下面的分页审查元素: 发现规律,0-25-50...递增,以此确定爬取 page 页码确定爬取的内容名称.图片.排名.评 ...
爬取东方财富网股票行情数据和资讯
爬取东方财富网股票行情数据和资讯这个需求源于我的一个练手项目本篇博客参考:https://zhuanlan.zhihu.com/p/50099084 该博客介绍的东西本博客不做论述使用技术: 语 ...
python爬取火车票网的时刻表数据
python爬取火车票网的时刻表数据导包 import re,requests,datetime,time,json from prettytable import PrettyTable from ...
python二手房价格预测_Python爬取赶集网北京二手房数据R对爬取的二手房房价做线性回归分析...
前言:本文主要分为两部分:Python爬取赶集网北京二手房数据&R对爬取的二手房房价做线性回归分析.文章思路清晰,代码详细,特别适合刚刚接触Python&R的同学学习参考. Part1 ...
Python爬取中国大学排名，并且保存到excel中
前言以下文章来源于数据分析和Python ,作者冈坂日川今天发的是python爬虫爬取中国大学排名,并且保存到excel中,当然这个代码很简单,我用了半小时就写完了,我的整体框架非常清晰,可以直接 ...
python爬取沪深所有股票数据并生成Excel文件
爬取沪深所有股票数据并生成Excel文件一.分析需求 1.对于沪深两市的各只股票,获取其:'股票代码', '股票名称', '最高', '最低', '涨停', '跌停', '换手率', '振幅', ' ...
Python爬取URP教务系统课程表并保存到excel
Python爬取URP教务系统课程表并保存到excel 爬取URP教务系统课程表最终结果如图所示: 接下来开始操作: 首先打开教务系统->按F12->点击Network->刷新一下界 ...
bs4主要知识点介绍及实例解析---利用bs4爬取伯乐在线(分别存储在数据库和xls表中)
bs4主要知识点介绍及实例讲解 bs4 是第三方解析html数据的包 from bs4 import BeautifulSoup lxml 解析读取html的第三方解释器,解析速度快,底层通过c实现 ...
asp.net学习笔记·将数据库中的数据保存在EXCEL文件中
提取数据库中的数据,将其保存在EXCEL文件中,并提供下载. 在一般处理程序中将数据库数据保存在EXCEL文件中的代码 using System; using System.Collections.G ...

爬取楼盘网并将数据保存在excel表中

爬取楼盘网并将数据保存在excel表中相关推荐

最新文章

热门文章