爬虫–爱彼迎北京房价名称、类型、价格(一页)

【声明】本文档只做学习交流,使用selenium的小栗子

准备工作:

  • 安装谷歌浏览器
  • npm install selenium
  • 下载chromedriver.exe,供程序驱动本机的谷歌浏览器

代码:

from selenium import webdriver
driver = webdriver.Chrome(executable_path=r'F:\img\chromedriver_win32\chromedriver.exe')
driver.implicitly_wait(30)#打开网页
driver.get('https://www.airbnb.cn/s/%E5%8C%97%E4%BA%AC/homes?refinement_paths%5B%5D=%2Fhomes&current_tab_id=home_tab&selected_tab_id=home_tab&screen_size=large&hide_dates_and_guests_filters=false&place_id=ChIJuSwU55ZS8DURiqkPryBWYrk&map_toggle=false')
#获取当前页所有的房子信息div_v72lrv
house_list = driver.find_elements_by_css_selector('div._v72lrv')
#查看获取多少个
print(len(house_list))
for eachhouse in house_list:#span里面的其他span也属于第一个span的文字house_type = eachhouse.find_element_by_css_selector('span._faldii7')house_name = eachhouse.find_element_by_css_selector('div._qrfr9x5')house_price = eachhouse.find_element_by_css_selector('span._1d8yint7')print('房屋类型:',house_type.text)print('名称:',house_name.text)print(house_price.text)

结果:

20
房屋类型: 整套住宅
,
· 1室1.5卫1床
名称: 屋宜居(近301医院、五一小学)
价格
¥288/ 晚
房屋类型: 整套LOFT
,
· 1室1卫1床
名称: 【素灰】小loft苏州桥人大理工清华北大中关村免费台球篮球健身房
价格
¥279/ 晚
房屋类型: 整套LOFT
,
· 1室1卫1床
名称: 宋家庄地铁站高端智能复式loft公寓家庭房闺蜜情侣近王府井后海天安门天坛公园协和医院天坛医院
价格
¥379/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 50平米天安门/国贸/双井/大望路一居室后现代城1308
价格
¥284/ 晚
房屋类型: 整套公寓型住宅
,
· 2室1卫3床
名称: 能看见风景(中国尊)的好房子。 每个体验者都出乎意料。
价格
¥368/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 02/地铁50米!二环边干净敞亮的森林公寓|天坛|北京南站
价格
¥299/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫2床
名称: 地铁100米|二环市中心|天坛故宫|北京站和南站 |『慢·煮』生活 简约风
价格
¥256/ 晚
房屋类型: 整套普通公寓
,
· 1室1卫1床
名称: 【九零home】整套独立公寓丨4K家庭影院空间+音响丨宋家庄地铁500米
价格
¥368/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 107.草场地独立公寓
价格
¥150/ 晚
房屋类型: 整套公寓型住宅
,
· 1室2卫1床
名称: 夏季特惠|丰台区榴乡路地铁宋家庄站loft公寓距离北京南站天安门西单王府井驾车20分钟路程
价格
¥499/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 住我家·童话|国贸/大望路/鬼市/莫兰迪/北京东站/首都机场/飘窗/百子湾/五道口
价格
¥340/ 晚
房屋类型: 整套公寓型住宅
,
· 2室1卫2床
名称: 【艾雪小屋·晚安】仅月租/温馨唯美一居/楼下即金台路地铁站/近国贸、三里屯
价格
¥382/ 晚
房屋类型: 整套普通公寓
,
· 单间1卫2床
名称: 【那维亚-如坤】近地铁60米/高清投影/坚果设备/白天可看
价格
¥276/ 晚
房屋类型: 整套住宅
,
· 1室1卫1床
名称: 平/新房特惠!市中心地铁50米,干净敞亮的超用心民宿|天坛|旅行者的家
价格
¥272/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 日式公寓,3站直达北京南站,2站换乘大兴机场快轨草桥站,步行2分钟进地铁站,7站到西单后步行游天安门
价格
¥359/ 晚
房屋类型: 精品酒店客房
,
· 1室1卫1床
名称: 北京温馨四合院酒店_房间10/坐落于前门大栅栏/天安门广场近在咫尺/步行看升旗
价格
¥199/ 晚
房屋类型: 整套普通公寓
,
· 1室2.5卫1床
名称: 国贸百子湾双井劲松潘家宋家庄地铁站5号10号线网红豪华装北欧智能网红复式科技大床复式落地窗亲子套房
价格
¥315/ 晚
房屋类型: 精品酒店客房
,
· 1室1卫1床
名称: 故宫天安门百年胡同四合院露台投影私人影院大床房
价格
¥574/ 晚
房屋类型: 独立房间
,
· 1室1.5卫1床
名称: 【特价】小葵有猫 | 双井地铁步行200米/一站抵达国贸CBD/三里屯/优士阁/男士止步/轻复古公寓
价格
¥288/ 晚
房屋类型: 整套公寓型住宅
,
· 1室1卫1床
名称: 地铁朱辛庄站80米落地大窗瞰景公寓(暖巢贰号)
价格
¥288/ 晚Process finished with exit code 0

优化-获取更多信息思路

  • 利用selenlium点击下一页,爬取下一页信息,把信息存储到文件里
  • 获取每一页link,使用多线程爬取
  • 设置等待时间,防止爬的太快封ip【中招多次】

爬虫--爱彼迎北京房价名称、类型、价格相关推荐

  1. [手游屌丝研究] 手游IP市场调查:授权金似北京房价【一】

    最近,万码游戏副总刘波有点后悔,当初没有多拿下一些小说IP(版权).同时,他也为去年下半年买下<茅山后裔>游戏改编权感到庆幸.据他估算,现在的价格较去年下半年几乎翻了5番.而从一开始就强调 ...

  2. 爱彼迎房源爬取价格和名称

    爱彼迎是用javascripe渲染的,不能使用静态网页获取法,因此调用selenium库 from selenium import webdriver from bs4 import Beautifu ...

  3. airbnb爱彼迎python爬虫与简单分析

    目的 作为一个挂了几套公寓在airbnb上的小房东,又作为一个喜欢分析数据的小孩子,当学习爬虫的过程中当然要选择爱彼迎这个网站来试手:在网上看到一个大神po的一长串的代码,用了之后的确可以马上爬取,但 ...

  4. kaggle经典案例:爱彼迎租房数据探索

    公众号:尤而小屋 作者:Peter 编辑:Peter 大家好,我是Peter~ Airbnb是AirBed and Breakfast ( "Air-b-n-b" )的缩写,中文名 ...

  5. Plotly+Seaborn+Folium可视化探索爱彼迎租房数据

    Airbnb是AirBed and Breakfast ( "Air-b-n-b" )的缩写,中文名称之为:空中食宿,是一家联系旅游人士和家有空房出租的服务型网站,可以为用户提供各 ...

  6. Python爬虫 —3000+条北京二手房数据可视化分析

    关注公众号:[小张Python],为你准备了 50+ 本Python 精品电子书籍 与 50G + 优质视频学习资料,后台回复关键字:1024 即可获取:如果对博文内容有什么疑问,公众号后台添加作者[ ...

  7. 美通企业日报 | 爱彼迎招募5名南极科考志愿者;中金拟与腾讯成立合资技术公司...

    要闻 普华永道预测,到2025年,许多国家的肥胖率将超过68% 德国百年科研护肤--优色林分享全球创新研究成果 特劳特举办定位理论50周年全球盛典 爱彼迎全球招募5名南极科学考察团志愿者 中金宣布拟与 ...

  8. Airbnb(爱彼迎)产品分析报告

    Airbnb(爱彼迎)产品分析报告 一.Airbnb背景 Airbnb成立于2008年,一家联系旅游人士和家有空房出租的房主的服务型网站,它可以为用户提供多样的住宿信息.用户可通过网络或手机应用程序发 ...

  9. 美通企业日报 | 微软和宝马推出开放式制造平台;爱彼迎Plus在中国发展势头强劲...

    要闻 舍弗勒城市车辆转向系统研究完成,可实现全自动平行泊车 微软和宝马推出开放式制造平台,支持智能工厂解决方案开发 爱彼迎Plus在华推出一周年,将再扩展到30多个城市 宁夏慢阻肺数字化管理中心与葛兰 ...

最新文章

  1. 什么是Python的var_dump()的Python等价物? [重复]
  2. qt 启动画面显示图片_Qt程序起动画面QSplashScreen
  3. 模板格式丢失_公司法人私章证明丢失应该怎么办,需要补办吗?
  4. Spring Bean引用例子
  5. TypeError: Router.use() requires a middleware function but got a Object报错解决
  6. Alone in Office
  7. C语言: ---Linux下ulimit是什么鬼
  8. 技术者利用wordpress+阿里云服务器+LAMP新搭建的博客网站:www.youngxy.top
  9. linux卸载时提示未安装,Ubuntu 安装卸载软件命令,及出现没有可用软件包提示时的处理办法...
  10. vmware 12 可用 序列号
  11. 数据绑定之DataFormatString
  12. 五种不同的微博评论数据获取方法
  13. oracle 排除节假日,ORACLE 计算节假日
  14. Excel 表格数据去重
  15. Python 分析《三国演义》看司马懿三父子如何用计谋干掉了曹操后代
  16. office excel 打开csv文件乱码问题解决
  17. 程序员讨厌没有价值的任务
  18. 苹果4s怎么越狱教程_苹果iOS 11.4-11.4.1越狱发布:附越狱教程
  19. 使用Hystrix实现自动降级与依赖隔离
  20. 5G关键技术之波束成型

热门文章

  1. #千锋逆战班,ssf# 在千锋“逆战”学习第 26天, 每个人生阶段都需要努力去扮好自己的角色,越努力越轻松,越坚强越幸运! 加油
  2. 不同API加载geojson
  3. 关于MySQL中复合索引优化
  4. slimscroll niceScroll 漂亮的虚拟滚动条(Jquery)
  5. 【Android】蓝牙开发—— 经典蓝牙配对介绍(Java代码实现演示)附Demo源码
  6. Spring Boot Security OAuth2 入门
  7. 数据库 查询计算机系姓王,数据库实验3简单查询和连接查询
  8. SCS【16】从肿瘤单细胞RNA-Seq数据中推断拷贝数变化 (inferCNV)
  9. vue-ssr 远程服务器部署
  10. 微信小程序自定义轮播图