可爱的python下载_GitHub - palxiao/PythonWebSpider: 一个可爱的python简单爬虫

Python网络爬虫

语言环境：Python2.7

运行爬虫入口开始爬取 output.html查看结果

简单py爬虫，修改入口及解析器改变规则

新增存入数据库操作需要插件(MySql)

补充：(折腾了很久，网上很多方法都试不通，最后在控制台import成功却也用不了)

mac下安装MySQL-python

下载MySQLdb源码

下面是1.2.5的版本

https://pypi.python.org/packages/source/M/MySQL-python/MySQL-python-1.2.5.zip#md5=654f75b302db6ed8dc5a898c625e030c

下载后解压，然后在终端cd到文件目录

修改 site.cfg, 修改下面内容:

由#mysql_config = /usr/local/bin/mysql_config

改成mysql_config = /usr/local/mysql/bin/mysql_config

否则会出现找不到 MySQL_config 的问题:

然后修改 _mysql.c, 把第 37 到 39 行注释掉, 如下:

//#ifndef uint//#define uint unsigned int//#endif(这一步我没做，不知何意)

然后再用 python ./setup.py build 编译

$ python ./setup.py build

然后再用 python ./setup.py install 安装

$ sudo python ./setup.py install

安装完成后导包出现：Reason: image not found

vi .bash_profile

进入编辑状态，在最后添加

export DYLD_LIBRARY_PATH="/usr/local/mysql/lib"

esc退出编辑后执行以下命令

保存退出bash

可爱的python下载_GitHub - palxiao/PythonWebSpider: 一个可爱的python简单爬虫相关推荐

linux python复制安装,复制一个Python全部环境到另一个环境，python另一个,导出此环境下安装的包...
复制一个Python全部环境到另一个环境,python另一个,导出此环境下安装的包导出此环境下安装的包的版本信息清单pipfreeze>requirements.txt联网,下载清单中的包到a ...
python下载无法安装_各种版本的python下载安装教程
关键时刻,第一时间送达! 先不说楚枫的这般年纪,能够踏入元武一重说明了什么,最主要的是,楚枫在刚刚踏入核心地带时,明明只是灵武七重,而在这两个月不到的时间,连跳两重修为,又跳过一个大境界,踏入了元武一 ...
Mac电脑的python下载、安装和环境配置——JDK+python+pycharm
Mac电脑的python下载.安装和环境配置--JDK+python+pycharm 之前一直用的windows,换了Mac之后用的还有些生疏,刚好都是重新配置就随手记一下之前一直用的windows ...
3个可以免费学习Python的网站，每一个成功的Python大牛都去过！
想要学好Python,只靠看Python相关的书籍是远远不够的!互联网时代,我们还要充分利用网络上的免费资源,不然怎样成为一名优秀的Pythoner呢?今天就为大家分享几个神奇有效的Python学习网 ...
python下载网页上的文件_用Python下载一个网页保存为本地的HTML文件实例
Python打开网页并另存为静态html怎么实现如何用python把网页上的文本内容保存下来那一世的长情,谱一首长相思,冷了多少凄凉,漫了多少青丝,化作多少烟雨,吹散多少世间情!徒悲,奈何,这一世, ...
python下载教程win10-win10系统下如何安装Python软件
Python是一门受广大用户所喜爱欢迎的.使用广泛的语言.最近,就有一些升级win10系统的用户反映自己想要在新系统中安装Python软件,但是又不知道该如何操作.接下来,小编就为大家分享win10系 ...
python工程师怎么考-【一个合格的Python工程师需要达到怎样的编程水平】
如何才算精通Python?在Python学习中,我们都有哪些误区?相信你看完这篇文章都会得到解答. 如果不能,我希望这篇回答能让你意识到自己Python知识还存在哪些不足,在之后的学习中,从哪些方面去 ...
python交互式绘图库_一个交互式可视化Python库——Bokeh
本篇为<Python数据可视化实战>第十篇文章,我们一起学习一个交互式可视化Python库--Bokeh. Bokeh基础 Bokeh是一个专门针对Web浏览器的呈现功能的交互式可视化Py ...
python新手项目-推荐：一个适合于Python新手的入门练手项目
原标题:推荐:一个适合于Python新手的入门练手项目随着人工智能的兴起,国内掀起了一股Python学习热潮,入门级编程语言,大多选择Python,有经验的程序员,也开始学习Python,正所谓是人 ...

可爱的python下载_GitHub - palxiao/PythonWebSpider: 一个可爱的python简单爬虫

可爱的python下载_GitHub - palxiao/PythonWebSpider: 一个可爱的python简单爬虫相关推荐

最新文章

热门文章