MATLAB 批量下载网页中的数据

任务描述：网页中有数据如下，点击每个链接便可下载，想要实现批量下载

%% 代码用于下载MSWEP三小时和天的数据，需要将系统默认浏览器设置为Chrome，存储路径在浏览器中修改clc
clear
close allfor i = 1979:2017for j = 1:12if j < 10 url = ['http://hydrology.princeton.edu/',num2str(i),'0',num2str(j),'.nc']; elseurl = ['http://hydrology.princeton.edu/',num2str(i),num2str(j),'.nc'];  endweb(url,'-browser')end
end

实现原理：
http://hydrology.princeton.edu/ 是该网页，加个后缀比如1979.nc变成 http://hydrology.princeton.edu/1979.cn 就可以下载其中的数据，因此用web函数一一打开链接，记得将系统默认浏览器设置为Chrome浏览器！！！，原因是其他浏览器（目前只测试过火狐）还会多问你一句‘打开还是保存’，而Chrome不问你，只要点开链接就自动保存，实际上前者更安全，但下数据（已知安全）的时候肯定是后者方便

也可能有人问为啥不用websave，原因是会报错，如何解决我也不知道，所以只能兵行此着

Finish!

后记：

写博客的初衷是分享经验，同时是算是自己对思路和代码的整理，方便日后处理数据，应该可以帮到很多人。
我已免费分享我的心得，如果看官还有其他问题的，那么：知识付费，我的时间和经验正好可以解决你的问题。
咨询问题请添加QQ：819369354
2022年4月20日

MATLAB 批量下载网页中的数据相关推荐

批量下载网页中所有的PDF文档
某日要下载网页中所有的PDF文档,大约400个.作为计算机专业的学生,显然不能手工去下载啊!!!于是在网上找到了相关的批量下载文档脚本,众里寻他千百度,终于在一篇博客http://blog.csdn. ...
matlab批量下载网页文件
需求准备参加十七届研究生数学建模比赛,打算把题目大致过一遍.准备工作包括,批量下载题目和优秀论文,代码实现其中几篇,理论知识复习,生产力工具以及写作模板.本文为第一步,批量下载题目. 实现过程网络 ...
python 批量下载网页图片_Python 实现简单的爬虫功能 -----批量下载网页中的图片...
我使用的是macPro , mac 自带了python2.7 , 我自己下载了pytho3.6根据操作进行安装后,终端默认的还是 python 2.7, 需要修改为 Python3.6 进入 ~/.b ...
如何批量获取网页中的下载链接
tips:下载 chrome json 正则表达式如何批量获取网页中的下载链接前言打开你要下载的网页二.获取网页的json数据 1.获取网页的源码 2.选取json 3.获取json字符串 4 ...
python之批量下载网页数据
python之批量下载网页数据要下载如下网页所示数据,一个一个点下载繁琐,我们用python代码来批量下载. python代码: import urllib.request # url reques ...
python批量下载网页图片，不用再复制粘贴了（7）
此为教程笔记教程地址:https://study.163.com/course/courseMain.htm?courseId=1209401897 感谢老师:城市数据团大鹏代码非常少,想要全部代 ...
【GEE】批量下载全球降水量GPM数据 (NASA)
[GEE]批量下载GPM月度降水量数据可访问GPM Data Directory 查看数据集下载方式: 直接在GES DISC中生成数据订单,并使用wget或down them all直接下载. ...
Node爬虫：批量下载网页
编写网页爬虫时,爬取 html 页面是基本功能.在 Node.js 中,只需借助内置的 http 模块,即可实现一个网页下载器,代码如下: const http = require('http') c ...
python 批量下载代码_Python + Selenium +Chrome 批量下载网页代码修改
Python + Selenium +Chrome 批量下载网页代码修改主要修改以下代码可以调用本地的 user-agent.txt 和 cookie.txt 来达到在登陆状态下批量打开并下载网 ...
C# 网络编程之webBrowser获取网页url和下载网页中图片
该文章主要是通过C#网络编程的webBrowser获取网页中的url并简单的尝试下载网页中的图片,主要是为以后网络开发的基础学习.其中主要的通过应用程序结合网页知识.正则表达式实现浏览.获取url.下 ...

MATLAB 批量下载网页中的数据

后记：

MATLAB 批量下载网页中的数据相关推荐

最新文章

热门文章