将爬取的数据存储到数据库

之前都是将数据存到了文档中或者excel中（排版很不好，稍后研究一下），今天尝试一下对数据库的操作……

先上代码吧：

class Mysql_Exe():def _getconn(self):try:self.conn=pymysql.connect(host='127.0.0.1',user='root',passwd='123456',port=3306,db='mysql',charset='utf8')except pymysql.Error as e:print(e,'数据库连接失败')def _closeconn(self):try:if self.conn:self.conn.close()except pymysql.Error as e:print(e,'关闭数据库连接失败')def insertData(self,item):sql='insert into userInfo value(%s,%s,%s)'try:self._getconn()cursor=self.conn.cursor() #获取cursor对象cursor.execute(sql,(item[0],item[1],item[2])) #预处理并执行数据库操作self.conn.commit() #提交所有操作到数据库print('success')except py

将爬取的数据存储到数据库相关推荐

Python爬取豆瓣音乐存储MongoDB数据库(Python爬虫实战1)
Python爬取豆瓣音乐存储MongoDB数据库(Python爬虫实战1) 1. 爬虫设计的技术 1)数据获取,通过http获取网站的数据,如urllib,urllib2,requests等模块: ...
python爬取电影网站存储于数据库_python爬虫猫眼电影和电影天堂数据csv和mysql存储过程解析...
字符串常用方法 # 去掉左右空格 'hello world'.strip() # 'hello world' # 按指定字符切割 'hello world'.split(' ') # ['hello' ...
python 爬虫源码 selenium并存储数据库_使用pythonSelenium爬取内容并存储MySQL数据库的实例图解...
这篇文章主要介绍了python Selenium爬取内容并存储至MySQL数据库的实现代码,需要的朋友可以参考下前面我通过一篇文章讲述了如何爬取CSDN的博客摘要等信息.通常,在使用Selenium ...
Python爬虫项目：爬取JSON数据存储Excel表格与存储图片
随着网络的迅速发展,万维网成为大量信息的载体,如何有效地提取并利用这些信息成为一个巨大的挑战.搜索引擎(Search Engine),例如传统的通用搜索引擎AltaVista,Yahoo!和Googl ...
python爬取股票数据并存到数据库
Python 用Tushare接口获取股票数据并存储到Sqlite数据库使用技术介绍: 关于接口由于tushare旧版本即将不能用了,所以我们这里使用的是tushare pro 接口. 关于数据库 ...
python3读取excel数据-Python3将爬取的数据存储到Excel
我们学习 Python3 爬虫的目的是为了获取数据,存储到本地然后进行下一步的作业,今天小雨就教大家 python3 如何将爬取的数据插入到 Excel 我们直接来讲如何写入 Excel 文件: 基本 ...
爬虫入门：利用爬虫爬取有效数据后录入数据库(一)
写在前面的话: 博主也是一个初学者,写的可能也不是很详细或者有错误的,希望大家可以多多指正,多多交流学习经验,不胜感激. 一.如何利用python连接数据库利用pymysql来实现对数据库的连接 # ...
python爬取证券数据并存入数据库
用python爬虫爬取数据并存到数据库 1----------------------------------------------------------------------编写爬虫,下载数据 ...
中国大学MOOC课程信息爬取与数据存储
版权声明:本文为博主原创文章,转载请注明出处: https://blog.csdn.net/sc2079/article/details/82016583 10月18日更:MOOC课程信息D3.js ...

将爬取的数据存储到数据库

将爬取的数据存储到数据库相关推荐

最新文章

热门文章