用Python爬取了全国近5000家旅游景点,分析国庆去哪玩
双节同庆,小长假如约而至
我想今年大家在家都憋坏了
这么长的假期,当然是出去 玩玩玩!
每当长假的时候,有没有想起被人山人海支配的恐惧!
该去哪些地方呢?
我用 Python 爬取了全国近 5000 个旅游景点,并结合 pyecharts 来做分析
技能包
爬虫
Mysql
sqlalchemy
pyecharts
数据爬取
旅游景点的数据是从网上爬取的,该数据包含以下维度:景点名称,所属省市区,景点简介,门票价格,评分,近期销量,景点评级等。
爬虫比较简单,多分析下就可以,直接贴代码了
基本上没什么反爬,加点延时别爬太快就是了...
爬取下来之后直接入库,入库部分代码如下:
当然,每个省份我只爬了前 10 页,因为后面的基本都是些不知名的旅游景点
爬完之后看了下数据库有 4572 条数据,我想应该够了吧...
有了数据之后,是不是就能搞事情了...,简单做几个分析
数据分析
接下来我们使用 pyecharts 来对爬取的数据做一个简单的分析
1. 景点销量排行榜
直接从数据库查出数据,丢进去就行。
结果展示:
2. 景点评级排行榜
假期这么长,想玩的地方有很多!如何选择一个景点多的地方并且评级高的
这样就能在一个地方尽情的玩耍,而不用四处奔波
我们不妨来看看各省市能排的上号的景点有多少吧!
代码如下:
将数据查询出来后作一个简单的清洗,统计各省份 4A 级以上景点数量
一起来看看吧
再将这些数据放到地图上看看..更加直观
3.各省销量排行榜
通过该数据,可以看出哪些省市区的人会比较多...
这样就能避免去人山人海的地方看人人人人.。。
综合分析
最终考虑去哪儿,可能需要多维度的分析。
所有,我把价格,评分,销量这三个维度放在一起
当然,你也可以选择你关心的维度来..最好自己动手试试
这样印象深刻!
来看看效果把:
重点关注下销量高,评分高,价格合适的...
提前祝大家国庆有个美好的假期。
推荐阅读
01
《从零开始学Python网络爬虫》
推荐语:爬虫畅销书,上市1年畅销万余册!带小白一周掌握Python网络爬虫。涵盖爬虫的3大方法/爬取数据的4大存储方式/22个实战案例/30个网站信息提取/64个避坑技巧/2500行代码详解/源代码/PPT。
02
《Python网络爬虫从入门到实践 第2版》
推荐语:使用Python编写网络爬虫程序获取互联网上的大数据是当前的热门专题。本书内容包括三部分:基础部分、进阶部分和项目实践。
03
《精通Python网络爬虫:核心技术、框架与项目实战》
推荐语:资深专家,以实战为导向,讲透Python网络爬虫各项核心技术和主流框架,深度讲解网络爬虫的抓取技术与反爬攻关技巧
04
《Python数据整理》
推荐语:这是一本实用的Python数据整理入门教程。书中全面、系统地阐释数据整理和提炼过程背后的所有核心思想,通过大量的练习和实例,帮助你全方位理解并掌握相关概念、工具和技术。
05
《Python数据可视化:基于Bokeh的可视化绘图》
推荐语:从图形绘制、数据动态展示、Web交互等维度全面讲解Bokeh功能和使用,不含复杂数据处理和算法,深入浅出,适合零基础入门,包含大量案例。
更多精彩回顾
书讯 |9月书讯(下)| 开学季,读新书
书讯 |9月书讯(上)| 开学季,读新书
资讯 |TIOBE 9 月编程语言:C++ 突起、Java 流行度下降
上新 | 一本书带你吃透Nginx应用与运维
书单 | 开学季——计算机专业学生必读的10本畅销经典
干货 | 用户画像从0到100的构建思路
收藏 | 更新!更薄!更精华:《JavaScript编程精解》来了
视频 | 大佬出镜推荐不可不读系列——程序员陈彼得
赠书 |【第22期】网络安全在身边|最强学习书单整理
用Python爬取了全国近5000家旅游景点,分析国庆去哪玩相关推荐
- python爬取旅游信息_用Python爬取了全国近5000家旅游景点,分析国庆去哪玩
2020 国庆马上就要到了 我想今年大家在家都憋坏了 今年国庆和中秋刚好又是同一天,加起来有 8 天假 这么长的假期,当然是出去 玩玩玩! 但是每次长假期间,你有没有想起被人山人海支配的恐惧呢? 那么 ...
- 国庆小长假来点不一样的,如何用Python爬取了全国近5000家旅游景点,一起来看
2020 国庆马上就要到了 我想今年大家在家都憋坏了 今年国庆和中秋刚好又是同一天,加起来有 8 天假 这么长的假期,当然是出去 玩玩玩! 但是每次长假期间,你有没有想起被人山人海支配的恐惧呢? 那么 ...
- 揭秘了!双十一手机真的优惠吗?我用Python爬取了京东近3000部手机,深度分析!
双十一就要到了,许多小伙伴也准备换一台新的手机,小编也为大家将京东的手机信息爬取下来,为大家分析一下手机的品牌和折扣力度,帮助大家更好的选择手机. 1 数据爬取 首先是对于手机数据的爬取,这里小编采用 ...
- 国庆去哪玩?用Python爬取了全国5000家旅游景区(记得收藏)
2020 国庆马上就要到了 我想今年大家在家都憋坏了 今年国庆和中秋刚好又是同一天,加起来有 8 天假 这么长的假期,当然是出去 玩玩玩! 但是每次长假期间,你有没有想起被人山人海支配的恐惧呢? 那么 ...
- 双11,用Python爬取4000多条笔记本电脑的销售数据并分析
双11,用Python爬取4000多条笔记本电脑的销售数据并分析 2022年,大部分电子产品的销量都在下滑,比如手机,一方面,产品的创新和提升不足,另一方面,大部分人更愿意把钱存起来,降低生活中其他因 ...
- 我用Python爬取了《安家》所有数据,分析后发现它背后的一些秘密
最近最火的电视剧,非<安家>莫属了.这是一部讲述房产中介的故事,有一个中介公司叫做"安家天下",其中有两个店长,在剧情设定方面,我们就知道,这中间肯定会发生一些有(go ...
- 利用python爬取京东平台评论及图片并进行分析
一.背景及目的 在淘宝.京东等网络平台上购物,逐渐成为大众化的购物方式.但假冒伪劣产品在这个摸不着实物的购物平台严重危害着消费者的购物体验,即使我们可以通过七天无理由退货退款来维护我们的合法权益,但是 ...
- python爬取网易云音乐评论并进行可视化分析
2019独角兽企业重金招聘Python工程师标准>>> 前言 今天为大家一个爬取网易云音乐评论的Python案例,并用Python的第三方库来进行可视化分析,生成图表样式,可以清晰地 ...
- 【没落的985/211】Python爬取知乎8万字回答进行高校分析
↑ 点击上方 "一行数据" 关注 + 星标 ~ 每周送书,绝不错过 最近知乎一个"有哪些较原来没落的985/211院校?"的问题引起了很多人的关注,回答者各种分 ...
最新文章
- C#网页数据采集(三)HttpWebRequest
- ElasticSearch大数据分布式弹性搜索引擎使用
- android内置picker控件,android中控件DatePicker控件-Fun言
- SpringBoot的配置详解application
- Android官方开发文档Training系列课程中文版:布局性能优化之按需加载View
- 研究一下识别验证码,。。。随笔记录
- 腾讯优测-优社区干货精选 |安卓适配之Camera拍照时快门咔嚓声
- 狂奔的瑞幸咖啡讲了一个好故事 但还缺失一种 “感觉”
- ×××数据库导数据ora-01400错误小计
- php word 数学公式,如何在word中输入复杂的数学公式? 详细始末
- JS 回车提交,兼容IE、火狐、Opera、Chrome、Safari
- Spatial Pyramid的BOW和Pyramid HOG的多核
- win7 删除 未知账户(s-1-5-21-2000478354
- java并发包 atomic_Java并发包之AtomicXX
- 一文告诉你Java素数怎么判断
- 教大家一个免费复制粘贴百度文库文字的方法
- Xweibo:新浪云微博服务 - 新浪开源微博系统
- 机器学习应用——导学part
- 浏览器无法访问此网站,连接已被重置,无法加载
- android x86引导修复,Android-x86 9.0-r2 发布,更新内核与UEFI引导修复