采集网页数据生成到静态模板newslist.html文件中（正则表达式）

采集数据源：http://www.sgcc.com.cn/xwzx/gsyw/

//根据URL地址获取所有htmlpublic static string GetUrltoHtml(string Url, string type){try{System.Net.WebRequest wReq = System.Net.WebRequest.Create(Url);// Get the response instance.System.Net.WebResponse wResp = wReq.GetResponse();System.IO.Stream respStream = wResp.GetResponseStream();// Dim reader As StreamReader = New StreamReader(respStream)using (System.IO.StreamReader reader = new System.IO.StreamReader(respStream, Encoding.GetEncoding(type))){return reader.ReadToEnd();}}catch (System.Exception ex){//errorMsg = ex.Message;}return "";}

 /// <summary>/// GetSubString截取字符串/// </summary>/// <param name="strSource">原始字符</param>/// <param name="strIndexOf">开始字符</param>/// <param name="strLastOf">结束字符</param>/// <returns></returns>public static string GetSubString(string strSource, string strIndexOf, string strLastOf){string strResult = string.Empty;int indexOf = strSource.IndexOf(strIndexOf);if (indexOf > -1){string strTemp = strSource.Substring(indexOf + strIndexOf.Length);if (!string.IsNullOrEmpty(strTemp)){strResult = strTemp.Substring(0, strTemp.IndexOf(strLastOf));}}return strResult;}

转载于:https://www.cnblogs.com/500k/p/4824086.html

采集网页数据生成到静态模板newslist.html文件中（正则表达式）相关推荐

java多线程数据采集,【多线程数据采集课题】java采集网页数据方法
[多线程数据采集专题]java采集网页数据方法 java多线程网络数据采集第一步抓取数据. java采集网页数据.获取html文本节点有几种办法.转载文章请注明来处:http://blog.cs ...
c html保存为图片格式,【单选题】在 IE 中,若要把整个网页的文字和图片一起保存在一个文件中,则文件的类型应为。 A. HTM B. HTML C. MHT D. TXT...
[单选题]在 IE 中,若要把整个网页的文字和图片一起保存在一个文件中,则文件的类型应为 . A. HTM B. HTML C. MHT D. TXT 更多相关问题不属于肺主治节范畴的是()A.主持 ...
python文件读取方法read(size)的含义是_在Python中可使用read([size])来读取文件中的数据,如果参数size省略,则读取文件中的()。...
[单选题]李明在他所属的公司工作五年,每天都很认真地处理繁杂的事情,同事们都夸他认真,但是依然没有建树,这是因为: [多选题]品牌标志的作用表现在 [单选题]新产品开发的第一个阶段是_______. ...
python文件读取方法read(size)的含义是_在Python中可使用read([size])来读取文件中的数据,如果参数size省略,则读取文件中的()。(4.0分)_学小易找答案...
[单选题]文本文件存储的是(),由若干文本行组成,通常每行以换行符 '\n' 结尾.(4.0分) [单选题]()属性是返回被打开文件的访问模式.(4.0分) [单选题]重力坝是由砼或( )修筑而成的大 ...
python中数据读写_【循序渐进学Python——文件中数据的读写以及操作】
[循序渐进学Python--文件中数据的读写以及操作] [循序渐进学Python--文件中数据的读写以及操作] [循序渐进学Python--文件中数据的读写以及操作] 相信大家都想过自己有一天,可以用 ...
基于layui 的数据表格复杂表头导出到excel文件中
基于layui,js-xlsx的前台数据复杂表头导出到excel文件中前言 : layui table 加载 layui 表头样式 4. 封装之后的sheet !cols !rows ! merge ...
如何读取csv文件中第n行数据python-python数据处理之如何选取csv文件中某几行的数据...
前言有些人看到这个问题觉得不是问题,是嘛,不就是df.col[]函数嘛,其实忽略了一个重点,那就是我们要省去把csv文件全部读取这个过程,因为如果在面临亿万级别的大规模数据,得到的结果就是boom, ...
将数据导入到已存在的excel文件中
CRUD数据访问类基类 using System; using System.Collections; using System.Collections.Generic; using System.T ...
利用xpath爬取链家租房房源数据并利用pandas保存到Excel文件中
我们的需求是利用xpath爬取链家租房房源数据,并将数据通过pandas保存到Excel文件当中下面我们看一下链家官网的房源信息(以北京为例) 如图所示,我们通过筛选得到北京租房信息那么我们需要将 ...
python读取xls数据_python_从.mat与.xls类型文件中读取数据
从.xls类型文件中读取数据在写机器学习算法的时候从UCI下载了一些数据,但是格式不是csv,而是.txt/.data,可以先用excel打开数据,在excel中将数据进行分列后导入python进行 ...

采集网页数据生成到静态模板newslist.html文件中（正则表达式）

采集网页数据生成到静态模板newslist.html文件中（正则表达式）相关推荐

最新文章

热门文章