《结对-爬取大麦网演唱会信息-设计文档》
结对编程成员:阎大为,张跃馨
搭建环境:
1.安装Python
网址:https://www.python.org/
2.安装Pycharm
网址:http://www.jetbrains.com/pycharm/
3.安装Beautiful Soup模块
网址:https://pypi.python.org/pypi/beautifulsoup4/4.6.0
4.安装Firefox Developer Edition
网址:https://www.mozilla.org/zh-CN/firefox/developer
设计阶段:
1.通过Firefox Developer Edition 进行对大麦网源码分析
2.编写爬虫代码达到无人值守自动爬取网站源码并进行保存
3.进行保存源码分析
4.提取相关数据
5.构建后续功能
6.测试网站爬取速度达到效率最高化
7.稳定性测试
8.同时学习Python并发与线程相关知识
http://www.cnblogs.com/iYdw/p/7504548.html
转载于:https://www.cnblogs.com/iZyx/p/7582493.html
《结对-爬取大麦网演唱会信息-设计文档》相关推荐
- ComeFuture英伽学院——2020年 全国大学生英语竞赛【C类初赛真题解析】(持续更新)
视频:ComeFuture英伽学院--2019年 全国大学生英语竞赛[C类初赛真题解析]大小作文--详细解析 课件:[课件]2019年大学生英语竞赛C类初赛.pdf 视频:2020年全国大学生英语竞赛 ...
- ComeFuture英伽学院——2019年 全国大学生英语竞赛【C类初赛真题解析】大小作文——详细解析
视频:ComeFuture英伽学院--2019年 全国大学生英语竞赛[C类初赛真题解析]大小作文--详细解析 课件:[课件]2019年大学生英语竞赛C类初赛.pdf 视频:2020年全国大学生英语竞赛 ...
- 信息学奥赛真题解析(玩具谜题)
玩具谜题(2016年信息学奥赛提高组真题) 题目描述 小南有一套可爱的玩具小人, 它们各有不同的职业.有一天, 这些玩具小人把小南的眼镜藏了起来.小南发现玩具小人们围成了一个圈,它们有的面朝圈内,有的 ...
- 信息学奥赛之初赛 第1轮 讲解(01-08课)
信息学奥赛之初赛讲解 01 计算机概述 系统基本结构 信息学奥赛之初赛讲解 01 计算机概述 系统基本结构_哔哩哔哩_bilibili 信息学奥赛之初赛讲解 02 软件系统 计算机语言 进制转换 信息 ...
- 信息学奥赛一本通习题答案(五)
最近在给小学生做C++的入门培训,用的教程是信息学奥赛一本通,刷题网址 http://ybt.ssoier.cn:8088/index.php 现将部分习题的答案放在博客上,希望能给其他有需要的人带来 ...
- 信息学奥赛一本通习题答案(三)
最近在给小学生做C++的入门培训,用的教程是信息学奥赛一本通,刷题网址 http://ybt.ssoier.cn:8088/index.php 现将部分习题的答案放在博客上,希望能给其他有需要的人带来 ...
- 信息学奥赛一本通 提高篇 第六部分 数学基础 相关的真题
第1章 快速幂 1875:[13NOIP提高组]转圈游戏 信息学奥赛一本通(C++版)在线评测系统 第2 章 素数 第 3 章 约数 第 4 章 同余问题 第 5 章 矩阵乘法 第 6 章 ...
- 信息学奥赛一本通题目代码(非题库)
为了完善自己学c++,很多人都去读相关文献,就比如<信息学奥赛一本通>,可又对题目无从下手,从今天开始,我将把书上的题目一 一的解析下来,可以做参考,如果有错,可以告诉我,将在下次解析里重 ...
- 信息学奥赛一本通(C++版) 刷题 记录
总目录详见:https://blog.csdn.net/mrcrack/article/details/86501716 信息学奥赛一本通(C++版) 刷题 记录 http://ybt.ssoier. ...
- 最近公共祖先三种算法详解 + 模板题 建议新手收藏 例题: 信息学奥赛一本通 祖孙询问 距离
首先什么是最近公共祖先?? 如图:红色节点的祖先为红色的1, 2, 3. 绿色节点的祖先为绿色的1, 2, 3, 4. 他们的最近公共祖先即他们最先相交的地方,如在上图中黄色的点就是他们的最近公共祖先 ...
最新文章
- 中间件ROS/CyberRT/AutoSAR对比
- 并发、并行、串行、同步、异步、阻塞、非阻塞
- pandas中DataFrame的apply()方法和applymap()方法,以及python内置函数map()
- 下面哪项属于计算机在教育教学中的应用,东师现代教育技术18秋在线作业2答案...
- 程序人生:织梦dedecms后台/会员验证码关闭
- 征服 Ajax 应用程序的安全威胁
- 小米手机首发开箱图赏
- 计算机应用技术知识,计算机应用技术主要学什么
- typhoon-blade c++ lib manager
- 谷歌下架应用引争议,网友请愿 GitHub 开发「App Store」!
- Qt实现判断鼠标左右键信号
- 【安全狗高危安全通告】2月“微软补丁日” 发布多个高危漏洞
- 【Unity3D】表格
- HP M280 鼠标驱动
- 如何制定有效的项目章程?【含项目章程模板】
- 宏碁台式计算机u盘启动,Acer台式机怎么U盘启动
- Vue keep-alive和activated的用法
- 疯狂springboot终极讲义笔记(二)
- Rocksdb prefix Bloomfilter
- Java中的四种XML解析方式(一)