怎么把动态图从python弄下来_发一只我一直在用的爬虫——爬取“解闷”动态图的爬虫,绅士不妨留步^=^...
马上注册,结交更多好友,享用更多功能^_^
您需要 登录 才可以下载或查看,没有帐号?立即注册
x
本帖最后由 疾风。意破天晴 于 2018-5-27 13:56 编辑
因为GIF这种东西似乎从诞生到现在一直挺流行的,所以我今天再来爬上一记^_^
我用爬虫也不是一天两天了,所以应该有资格给新新手们指导一下了:
爬一个页面在我看来就三步,一定位想要的资源,二搞清页面的结构,三理出程序的结构。
第一和第二步做好了,你就能得到爬虫的攀爬路径,然后根据此路径便可做到第三步,届时你的程序就差不多编好了,然后就来到最终的:
while 1:
try:
run my app
break
except:
fix my app
说一下我在刚学爬虫时遇到的问题:
1: 出现 ModuleNotFoundError: No module named "ooxxooxx"?
那么就去pip安装相应的包(其实代码语言排错和静态语言比起来简直太容易了,基本无需Debug,只要你英语过得去,那么根据错误提示一般都能
解决问题)
2: 怎么爬ajax的页面?
在当前页面右键审查元素,然后找到Network下的xhr,当有ajax请求时会有记录
3: 网站网络不稳定,或者有反爬虫机制怎么办?
在当前页面右键审查元素,然后把请求头复制一份,每次提取完资源后都time.sleep(second),并且每次尝试抓取做好异常处理(防止中断)并设置
timeout(防止死等),具体的可以参照我的代码。
好了,就这些,你以为爬虫是个什么东西?,看看学校图书馆里面那么一堆的书把你们吓的。。。作一个基本爬虫,这就是你所需要的全部。
游客,如果您要查看本帖隐藏内容请回复
福利图片:
0.gif (1.31 MB, 下载次数: 1)
2017-10-12 20:15 上传
1.gif (1.64 MB, 下载次数: 0)
2017-10-12 20:15 上传
2.gif (1.58 MB, 下载次数: 0)
2017-10-12 20:16 上传
3.gif (835.62 KB, 下载次数: 0)
2017-10-12 20:16 上传
相关网址推荐:
http://www.gifjia.com/category/neihan/(GIF发源地): (这个应该都听过
)
http://www.fulibae.com/ (福利社)(这里面就挺杂的了,寂寞了看看吧
)
have good day^_^
最新文章
- Google Colab使用教程
- 1470篇!CVPR2020结果出炉(附13篇论文链接/开源代码/解读)
- Java Properties的使用
- EasyOffice-.NetCore一行代码导入导出Excel,生成Word
- java isequal_Java LocalDate isEqual()用法及代码示例
- matlab里markersize,Matlab scatter/plot绘制图时,单点的'MarkerSize'与空间位置的
- Sublime Text 3配置与vim模式(待完整)
- 大神干货:腾讯广告算法大赛亚军女极客生存图鉴
- linux上tomcat安装
- Unity3d UGUI 通用Confirm确认对话框实现(Inventory Pro学习总结)
- 谷歌地图:谷歌地图的级别与对应比例尺及分辨率探究
- linux 常用图形库,在Linux下常用的3款Git图形客户端
- 【Python】基于Python的百度迁徙4——上班和休闲指数(附代码)
- 前端面试题汇总(vue+html基础)最新最全
- Gephi绘制微生物网络图
- arcgis_随机数vb脚本
- 猿人学第五题上---代码
- Windows10 64位系统设置FRPC开机自动启动
- web前端作业--响应式美食菜谱网页设计(HTML+CSS+JavaScript+)实现
- 一文看懂线性回归和非线性回归
热门文章
- win10 ctrl + 空格 热键取消
- python创建小火龙角色_当《火影忍者》遇上《宝可梦》,佐助化身小火龙,他变成了皮卡丘?...
- 从根上理解高性能、高并发(二):深入操作系统,理解I/O与零拷贝技术
- 问题 G: Heartlessly 的魔法石
- MyBatis-Plus 如何实现连表查询
- MySQL 查看数据库表容量大小
- 测测你的寿命还剩多少年?
- 吃鸡服务器维护6月17号,绝地求生6月17日更新维护什么时候结束 绝地求生2020年6月17日更新维护结束时间...
- iro机器人地区选多少人_第二十届IRO国际机器人奥林匹克大赛江苏省选拔赛举行...
- android无线打印