最近一个朋友想将股票历史数据导入到数据库中进行分析,目前市场上有很多股票行情交易软件,各种软件提供了丰富的分析和展示功能,而且基本上是免费的。但这些数据都是在线的、无法统一地下载到本地进行分析,于是上网找了些资料,有的是将程序到新浪搜狐的财经频道或其他财经类网站抓取并分析网页,这种方法操作性不强而且准确率较低,遇到广告或网页变动时风险较大。于是找到了Sina股票数据接口,这个接口是通过在IE端输入"http://hq.sinajs.cn/list="+相应股票代码网站返回一个文件形式的数据,也可以通过JS获取该文件中的变量得到想要的数据字符串。
        以大秦铁路(股票代码:601006)为例,如果要获取它的最新行情,只需访问新浪的股票数据接口:http://hq.sinajs.cn/list=sh601006这个url会返回一串文本,例如:

var hq_str_sh601006="大秦铁路, 27.55, 27.25, 26.91, 27.55, 26.20, 26.91, 26.92,
22114263, 589824680, 4695, 26.91, 57590, 26.90, 14700, 26.89, 14300,
 26.88, 15100, 26.87, 3100, 26.92, 8900, 26.93, 14230, 26.94, 25150, 26.95, 15220, 26.96, 2008-01-11, 15:05:32";

这个字符串由许多数据拼接在一起,不同含义的数据用逗号隔开了,按照程序员的思路,顺序号从0开始。
0:”大秦铁路”,股票名字;
1:”27.55″,今日开盘价;
2:”27.25″,昨日收盘价;
3:”26.91″,当前价格;
4:”27.55″,今日最高价;
5:”26.20″,今日最低价;
6:”26.91″,竞买价,即“买一”报价;
7:”26.92″,竞卖价,即“卖一”报价;
8:”22114263″,成交的股票数,由于股票交易以一百股为基本单位,所以在使用时,通常把该值除以一百;
9:”589824680″,成交金额,单位为“元”,为了一目了然,通常以“万元”为成交金额的单位,所以通常把该值除以一万;
10:”4695″,“买一”申请4695股,即47手;
11:”26.91″,“买一”报价;
12:”57590″,“买二”
13:”26.90″,“买二”
14:”14700″,“买三”
15:”26.89″,“买三”
16:”14300″,“买四”
17:”26.88″,“买四”
18:”15100″,“买五”
19:”26.87″,“买五”
20:”3100″,“卖一”申报3100股,即31手;
21:”26.92″,“卖一”报价
(22, 23), (24, 25), (26,27), (28, 29)分别为“卖二”至“卖四的情况”
30:”2008-01-11″,日期;
31:”15:05:32″,时间;

相应地,也可以获得深市相关股票信息,但是这种方法的弊病是只能获得最新的或者是当天的股票数据,无法将历史数据导入到数据库,当然,你也可以以某一天为起始点自己重新创造历史数据。所以继续寻找其他网站接口,终于找到了雅虎财经网站,它提供的接口可以直接把股票历史数据导成Excel,真实太方便了!直接在浏览器地址中数据网址即可http://table.finance.yahoo.com/table.csv?s=股票代码,但是如果手动输入再逐一下载保存简直是太麻烦了,光上证股票就800多个,估计刚手动下载完就又开盘了还得重新下载。所以我的思路是,1、利用多线程方法下载股票文件。2、将这些文件统一导入数据库。

1.1文件下载类:
import java.io.*;
import java.net.*;
import java.util.List;

import fatowen.stocksystem.sysconfig.data.DownLoadVO;

public class HttpDownFile {

private static int BUFFER_SIZE = 8096;

/**根据URL下载文件并保存
 * @param destUrl String
 * @param fileName String
 * @throws Exception
 */
 public void saveToFile(String destUrl, String fileName) throws IOException {
  
  FileOutputStream fos = null;
  BufferedInputStream bis = null;
  HttpURLConnection httpUrl = null;
  URL url = null;
  byte[] buf = new byte[BUFFER_SIZE];
  int size = 0;
  
  url = new URL(destUrl);
  httpUrl = (HttpURLConnection) url.openConnection();
  httpUrl.connect();
  bis = new BufferedInputStream(httpUrl.getInputStream());
  fos = new FileOutputStream(fileName);
  while ((size = bis.read(buf)) != -1)
   fos.write(buf, 0, size);
  fos.close();
  bis.close();
  httpUrl.disconnect();
 }
}

1.2多线程实现下载类:
import java.util.ArrayList;
import java.util.List;

public class HisDataAddThread extends Thread {

boolean runFlag = true;
 List myParamList = null;
 String downLoadData ="";
 String baseUrl = "http://table.finance.yahoo.com/table.csv?s=";
 String result = "";
 String savePath = "";
 
 public HisDataAddThread(List paramList,String savePath){
  this.myParamList = paramList;
  this.savePath = savePath;
 }
 
 public void run() {
 
  while(runFlag){
   downLoadData = PublicDataUtil.getDownLoadData(myParamList);
   if(!Lib.isEmpty(downLoadData)){
    HttpDownFile oInstance = new HttpDownFile();
    try {
     oInstance.saveToFile(baseUrl + downLoadData, savePath + downLoadData + ".csv");
    }catch (Exception err) {
     System.out.println(err.toString());
    }
   }else{
    runFlag = false;
   }
   try {
    Thread.sleep(1000);
   } catch (InterruptedException e) {
    e.printStackTrace();
   }
  }
 }

public List getFailureList() {
  return failureList;
 }

public void setFailureList(List failureList) {
  this.failureList = failureList;
 }

public List getSuccessList() {
  return successList;
 }

public void setSuccessList(List successList) {
  this.successList = successList;
 }

}

2.将下载完的文件统一保存到数据库工具类
import java.io.BufferedReader;
import java.io.File;
import java.io.FileReader;
import java.io.IOException;
import java.util.ArrayList;
import java.util.Iterator;
import java.util.List;

public class CSVUtitl {

private BufferedReader bufferedreader = null;
 private List list = new ArrayList();
 
 public CSVUtitl(){

}
 public CSVUtitl(String filename) throws IOException{

bufferedreader = new BufferedReader(new FileReader(filename));
       String stemp;
       while((stemp = bufferedreader.readLine()) != null){
           list.add(stemp);
       }
 }
 public List getList() throws IOException {

return list;
 }
 // 得到csv文件的行数
 public int getRowNum(){

return list.size();
 }

//得到csv文件的列数
 public int getColNum(){

if(!list.toString().equals("[]")) {
      
         //csv文件中,每列之间的是用','来分隔的
            if(list.get(0).toString().contains(",")) { 
                return list.get(0).toString().split(",").length;
            }else if(list.get(0).toString().trim().length() != 0) {
                return 1;
            }else{
                return 0;
            }
       }else{
            return 0;
        }
 }
 
    //取得指定行的值
 public String getRow(int index) {

if (this.list.size() != 0)
      return (String) list.get(index);
     else                      
      return null;
 }

//取得指定列的值
 public String getCol(int index){

if (this.getColNum() == 0){
                return null;
       }
      
       StringBuffer scol = new StringBuffer();
       String temp = null;
       int colnum = this.getColNum();
     
       if (colnum > 1){
          for (Iterator it = list.iterator(); it.hasNext();) {
             temp = it.next().toString();
             scol = scol.append(temp.split(",")[index] + ",");
          }
       }else{
          for (Iterator it = list.iterator(); it.hasNext();) {
            temp = it.next().toString();
            scol = scol.append(temp + ",");
          }
       }
       String str=new String(scol.toString());
       str = str.substring(0, str.length() - 1);
       return str;
 }

//取得指定行,指定列的值
 public String getString(int row, int col) {

String temp = null;
        int colnum = this.getColNum();
        if(colnum > 1){
            temp = list.get(row).toString().split(",")[col];
        }else if(colnum == 1) {
            temp = list.get(row).toString();
        }else{
            temp = null;
        }
            return temp;
 }

public void CsvClose() throws IOException {
     this.bufferedreader.close();
 }

public void run(String filename) throws IOException {
        
  CSVUtitl cu = new CSVUtitl(filename);

for(int i=0;i<cu.getRowNum();i++){
           String SSCCTag = formatData(cu.getString(i,1));//得到第i行.第一列的数据.
           String SiteName = formatData(cu.getString(i,2));//得到第i行.第二列的数据.
           String StationId= formatData(cu.getString(i,3));
          
           //将数据保存到数据库中
           ... ...
           ... ...
           ... ...
     }
     cu.CsvClose();
 }

public String formatData(String baseData){
  
  String result = null;
  if(!"".equals(baseData) && baseData != null){
   if(baseData.length() > 1){
    result = baseData.substring(1,baseData.length());
    result = result.substring(0, result.length()-1);
   }else{
    result = baseData;
   }
  }else{
   result = "";
  }
  return result.trim();
 }
 
 public static void main(String[] args) throws IOException {

CSVUtitl test = new CSVUtitl();
  try{
   File path = new File("e:\\data");
   File[] f = path.listFiles();
   List l = new ArrayList();
   for(int i=0;i<f.length;i++){
    if(f[i].getName().endsWith(".csv"))
    l.add(f[i]);
   }
   Iterator it = l.iterator();
   while(it.hasNext()){
    File ff = (File)it.next();
    test.run(path.toString()+File.separator+ff.getName());
   }
         }catch (Exception e){
     
   }
  }

}

JAVA获得股票数据大全相关推荐

  1. 如何通过java股票数据接口实现股票的自动化交易?

    如何通过java股票数据接口实现股票的自动化交易? 目前,在股市中,股票自动化交易简称自动交易或机器交易,是投资策略家将自己的交易策略系统化了的电脑程序.这种电脑程序能够代替人在互联网上进行股票.qh ...

  2. java 抓取新浪财经网上的股票数据(1)

    经过这两天对正则表达式以及网友一些分享资料的学习,今天终于写出了抓取股票数据挖掘的程序了,虽然大部分借鉴了一位网友的思路,但是也经过自己学习消化和封装整理,尤其是正则表达式方面(?=等特殊结构,网上资 ...

  3. Java通达信接口如何实现获取实时股票数据?

    Java通达信接口如何实现获取实时股票数据? 一般有三种方式: 网页爬虫.采用爬虫去爬取目标网页的股票数据,去相关网站或技术论坛上找一下别人写的爬虫集成到项目中. 请求第三方API.会有专门的公司(例 ...

  4. java 股票_java抓取东方财富股票数据

    背景 前段时间给朋友写了一个自动抓取同花顺股票数据的程序,不少人觉得不错. 这几天后台有粉丝给我留言让我也抓一下东方财富的数据,说东方财富的数据特别难抓,我还真不一定能搞得定. 本来我是一个德艺双磬且 ...

  5. java股票数据_java抓取东方财富股票数据(附源码)

    背景 前段时间给朋友写了一个自动抓取同花顺股票数据的程序,不少人觉得不错. 这几天后台有粉丝给我留言让我也抓一下东方财富的数据,说东方财富的数据特别难抓,我还真不一定能搞得定. 本来我是一个德艺双磬且 ...

  6. Java知识大全 - 十二、Java和大数据

    Java 是大数据处理中使用最广泛的编程语言之一,因为它的性能.可扩展性和易用性.Java有几个库和框架为大数据处理提供支持,包括Apache Hadoop,Apache Spark,Apache S ...

  7. 实时股票数据接口大全

    股票数据的获取目前有如下两种方法可以获取: 1.http/javascript接口取数据 2.web-service接口 1.http/javascript接口取数据 1.1Sina股票数据接口 以大 ...

  8. JAVA获取股票实时KDJ_Java从网络获取股票实时数据,2种方法webservice和javascript

    两种方法: /javascript接口取数据 -service接口 1. http/javascript接口取数据 1.1 Sina股票数据接口 以大秦铁路(股票代码:601006)为例,如果要获取它 ...

  9. matlab抓取股票数据,Matlab经过sina web接口获取个数即时股票数据函数实现代码

    Matlab通过sina web接口获取个数即时股票数据函数实现代码 代码如下: function stockinfo = queryprice(stocktype, stockid) %stockt ...

最新文章

  1. 10玩rust_有趣的 Rust 类型系统: Trait
  2. vb 怎样指定 dll 引用路径_C#/VB.NET 比较两个Word文档差异
  3. U盘从4G变为了75M 恢复U盘容量的方法
  4. java的知识点12——==和equals方法、 super关键字、 继承树追溯、封装的作用和含义、封装的实现—使用访问控制符、封装的使用细节
  5. TIMING_03 时序分析原理
  6. 设计模式笔记-命令模式
  7. c语言通讯录程序线性表,数据结构(C语言)课设1——单位员工通讯录管理系统(线性表应用)...
  8. sql-libs(6) 双引号的报错注入
  9. mysql远程定时任务_Linux下定时任务实现mysql自动备份并上传远程ftp
  10. perl模块net mysql_Perl模块实例化DBI Forks“Mysql服务器已经消失”
  11. c语言常量ascii码表,C语言常用转义符和ASCII码表
  12. 在张朝阳的直播间里,没有搜狐的未来
  13. OCiOS开发:汉字转拼音
  14. Echarts饼图实现颜色渐变
  15. 关于Kaggle入门,看这一篇就够了
  16. 运动控制卡讲解及实例应用
  17. 【无标题】USB2514i USB HUB使用经验总结
  18. midi java_java midi音乐文件播放器
  19. VSCode中git相关使用的记录
  20. 论文中英对照翻译--(Fusing Multiple Deep Features for Face Anti-spoofing)

热门文章

  1. 2022湖北省各市专精特新小巨人企业认定补贴、条件流程
  2. 解决VMware虚拟机中没有vmnet0的情况
  3. 安卓浏览本地指定路径视频文件并播放
  4. pygame制作游戏全套的
  5. Linux下挂载NTFS分区
  6. 大恒相机sdk二次开发 _c#从0开始新建winform窗体实现相机基础采集功能
  7. seqkit根据基因id_基因家族分析保姆级教程(分子进化)-生信小白自学之路
  8. oracle 修改lsnrctl,Oracle中 lsnrctl命令使用总结(推荐)
  9. 每日英语-20230221
  10. 毛利率逼近茅台,巨子生物赴港IPO市场会买单吗?