老鱼Python数据分析——篇八：项目重构(思路)

本篇解决的问题：如果某个月有几天忘记保存数据了怎么办？只能查看历史数据，然后再重新下载，但之前写的代码都是下载当天的数据，所以把整个项目实现的思路进行了重构，功能如下：

1. 从“选股宝”网站，根据选择的月份下载当月的所有数据，如果是本月，则下载到当前时间截止。（后期考虑准备2个备用数据来源网站，防止该网站不可用时没有数据来源）

2.下载的数据保存到CSV文件，后期考虑保存到MySql数据库（主要不会别的数据库啊，如果有更有的，请大家推荐）

3. 将每天的复盘数据做成两张图表：一张是涨停票数的波动图，一张是当天热点板块的涨停图（按板块分类，显示涨停票最多的前三个板块，显示涨停板的数据包括“代码，票名，最后一次涨停时间，连板数”）

4. 从“财联社”网站，读取每天的最新消息

5. 做成Web版的控制端，具体功能还没想好，先把现阶段想到的功能先实现吧

6. 设计一套判断方法，使用AI预测第二天的大盘、热点板块、热门个股的走势

7. 调用API实现账户的登录和买卖操作

老鱼Python数据分析——篇八：项目重构(思路)相关推荐

老鱼Python数据分析——篇九：项目重构(代码)
修改后的结构如下图所示: common目录下是通用文件,test目录下是功能文件,test目录下的agudata用于保存A股每月的数据一.xgb_data.py,用于保存xgb网站需要的个人信息,如 ...
老鱼Python数据分析——篇十七：使用pycharm创建django项目
最近把基础的数据爬取和存储都学习完了,开始进行数据的显示,考虑到通用性,还是使用Web方式来显示数据吧. 所以接下来就开始django学习之路,因为django是一个免费并且强大的开源Web框架. 使 ...
老鱼Python数据分析——篇十八：消息推送（二）
任务三:使用微信机器人和极光API推送消息一.微信机器人推送消息使用微信机器人的本质其实就是使用Web端微信,所以有不少的限制,比如近几个月申请的新微信号是不能登录的 (亲测证实),要注意. 在 ...
老鱼Python数据分析——篇十八：消息推送（一）
需求分析这两天想把分析处理之后的数据,做一个定时发送,按照自己设想和百度搜索,发现有以下几种办法.(只是我发现比较大众化的办法,不代表只有这几种方法) 发送邮件 QQ机器人微信机器人极光API ...
老鱼Python数据分析——篇十三：“选股宝”数据下载代码优化
今天在测试下载本月(5月)数据时发现,只有6号.7号.9号和15号有数据,其他日期的数据都是完全相同的. 如何解决这个问题? 通过观察发现,没有数据或数据读取很慢时,页面上会出现这样的进度条: 所以修 ...
老鱼Python数据分析——篇五：将python程序打包成exe
前一篇的多线程程序写好后,就可以挂在后台执行了,但在编写后面代码时,总是容易中断所以我们可以把当前处理代理IP的程序打包生成exe文件后运行,这就,就不会影响后面的编码了. 我们可以直接通过pych ...
老鱼Python数据分析——篇十五：“选股宝”使用API下载JSON格式数据
从页面读取数据每次都需要定位HTML标签,那么有没有更简洁的办法呢? 当然有,那就是找到页面数据的来源,分析哪些数据是我们想要的,直接通过WebAPI来获得数据. 我使用的是360极速浏览器,按F12 ...
老鱼Python数据分析——篇二：系统设计(找代理IP)
开发环境:win7 x64版本,python 3.6,Anaconda3 (64-bit) 因为频繁访问容易被封IP,所以我们需要使用代理来进行数据的爬取(当然你也可以放慢节奏,比如每5秒爬一条记录) ...
老鱼Python数据分析——篇三：操作MySQL数据库
Python操作数据库非常的方便. 不同的数据库你需要下载不同的DB API模块,例如你需要访问Oracle数据库和Mysql数据,你需要下载Oracle和MySQL数据库模块. DB-API 是一个 ...
老鱼Python数据分析——篇七：将爬取的数据保存到CSV文件
使用Python操作CSV文件非常方便,三行代码搞定. 一.向文件中追加数据 import csv# 将数据写入文件 with open("d:\\data.csv", " ...

老鱼Python数据分析——篇八：项目重构(思路)

老鱼Python数据分析——篇八：项目重构(思路)相关推荐

最新文章

热门文章