dddddddddddddd

import requests  # 导入requests包
from bs4 import BeautifulSoup
from urllib import request
import re
import pymongomongo_client = pymongo.MongoClient('mongodb://localhost:27017/')
# 若没有Database 和Collection，则会自动创建
mongo_db = mongo_client['quant_01']
mongo_collection = mongo_db['EPS_Stock']
'''
Company name:', 'Net assets per share:', 'Earnings per share:', 'Net profit:', 'Net profit growth rate:',
'Net profit growth rate:', 'Operating income:', ' Total share capital: ', 'tradable shares:
'''headers = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3877.400 QQBrowser/10.8.4507.400'
}all_list = []
for i in range(3):# 同花顺下载数据Furl = 'http://stockpage.10jqka.com.cn/'allrul = ['600511', '600512', '600513', '600515']url = Furl + allrul[i]print(url)req = request.Request(url=url, headers=headers)rsp = request.urlopen(req)# print(rsp.read().decode('utf-8'))html = rsp.read().decode('utf-8')bf = BeautifulSoup(html, "html.parser")texts = bf.find_all('dl', class_='company_details')str_Result = str(texts)# print(str_Result)splitR = str_Result.splitlines()print(splitR)print(len(splitR))# "<dd.+?/dd>|<dt.+?/dt>"   "<dd.+?/dd>|<dt.+?/dt>"gm# print('+++++++++++++++++++++++++++++++++++++++++++')result = re.findall(r"<dd.+?/dd>|<dt.+?/dt>", str_Result, flags=0)# print(result)# print(len(result))num_list1 = []num_list2 = []for i in range(len(result)):if result[i].find('公司名称') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('上市时间') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('每股净资产') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('每股收益') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('净利润') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('净利润增长率') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('营业收入') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('总股本') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passif result[i].find('流通股') > -1:num_list1.append(result[i])num_list2.append(result[i + 1])else:passprint('$$$$$$$$$$$$$$$$$$$$$$$$$')# print(num_list1)# print(len(num_list1))# Important_Books1 = []# for m in num_list1:#     Important_Books1.append(m[4:-5])## print(Important_Books1)# print(num_list2)# print(len(num_list2))# ['公司名称：', '每股净资产：', '每股收益：', '净利润：', '净利润增长率：', '净利润增长率：',# '营业收入：', '总股本：', '流通股：']Important_Books1 = ['Company_Name', 'Net_assets_per_share', 'EPS', 'Net_Profit', 'Net_Profit_Ratio', 'operating_revenue','total_share_capital', 'outstanding_shares']Important_Books2 = []for m in num_list2:Important_Books2.append(m[4:-5])print(Important_Books2)dict1 = dict(zip(Important_Books1, Important_Books2))# print(dict1)all_list.append(dict1)
'''        列表转字典
list1 = ['key1','key2','key3']
list2 = ['1','2','3']
dict(zip(list1,list2))
{'key1':'1','key2':'2','key3':'3'}
'''
print('&&&&&&&&&&&&&&&&&&&&&&&&&&&&&')
print(all_list)
# mongo_collection.insert_many(all_list)

dddddddddddddd相关推荐

安全的交互通道及栈回塑检查与伪造
第四章:安全的交互通道消息钩子,Hook游戏消息处理过程,GetKeyState(),GetAsyncKeyState()和GetKeyBoardState()函数,进程间通信. 消息钩子:SetW ...
无法创建接口的实例_什么是接口?
接口接口概述接口,是java语言中一种类型,是方法的集合,如果说类的内部封装了成员变量,构造方法,和成员方法,那么接口的内部主要就是封装了方法,包含抽象方法,默认方法和静态方法接口是对功能的 ...
linux系统初级管理书,Linux系统管理基础--超级适合Linux新手的书
liuyongqing 于 2012-11-15 11:53:18发表: 谢谢分享 liuyongqing 于 2012-11-15 11:53:11发表: 谢谢分享 liuyongqing 于 20 ...
Qt实践| HTTP知识点-接入某图片验证码系统识别验证码
目录基本概念代码与实例基本概念这里有一个查询余额的:https://blog.csdn.net/qq78442761/article/details/100096351 下面来看看官方API文 ...
css中hover的妙用！！
css 中有个属性为hover.当鼠标放上的时候,将其激活,可以实现类似于js的一些,譬如菜单等功能: 22.html文件: <link rel="stylesheet" t ...
slotformatcombinations_用于确定无线通信系统中的时隙配置的方法和设备与流程
相关申请的交叉引用本申请要求2018年5月11日提交的第62/670,553号美国临时专利申请的权益,所述临时专利申请的全部公开内容全文以引用的方式并入本文中.本公开大体上涉及无线通信网络,且更具体地 ...
1. 批处理常用符号详解：
1. 批处理常用符号详解: -------------------------------------------- 1.@ 一般在它之后紧跟一条命令或一条语句,则此命令或语句本身在执行的时候不会显示 ...
【JavaScript】原生态兼容IE6的图片轮播
<[Bootstrap]图片轮播组件Carousel>(点击打开链接)虽然做得很不错,但是由于只兼容到IE8,所以没有用的.其实原生态兼容IE6的图片轮播并没有想象中的那么难,网上的很多兼 ...
原来js可以这样用。类似51la.cnzz统计的js接口
自己工作的时候遇到的一个要求,发现原来js和php结合竟然可以如此的强大. 张存超php技术博客今天接到了一个任务,我们有个门户的网站,里面有好几个地区的医院,老板要让不同地区的人访问的时候,弹窗他 ...

dddddddddddddd

dddddddddddddd相关推荐

最新文章

热门文章