需求

准备参加十七届研究生数学建模比赛，打算把题目大致过一遍。准备工作包括，批量下载题目和优秀论文，代码实现其中几篇，理论知识复习，生产力工具以及写作模板。本文为第一步，批量下载题目。

实现过程

网络上已经有相关教程，利用matlab的urlwrite函数实现。但放在我的电脑上运行却报错了，原因估计是中间的文件名不是用字符串写的，而是用转义函数sprintf写的。
本文的技术路线是matlab中的websave，matlab版本为R2019a。

%以下载2011美赛数模证书为例
clc,clear;
num = 11701:11710;
URLs = cell(size(num));
folder_filenames = cell(size(num));
filenames = cell(size(num));
for idx  = 1:length(num)URLs{idx} = sprintf('http://www.comap-math.com/mcm/2011Certs/%d.pdf',num(idx));filenames{idx} = ['D:\研二上\研究生数学建模\test\',num2str(num(idx)),'.pdf'];
end
tic;
for idx = 1:length(num)fprintf(1,'正在下载%s...\n',filenames{idx});weboptions('Timeout',10);outfilename=websave(filenames{idx},URLs{idx});if ~isempty(outfilename)fprintf(1,'%s成功下载！\n',filenames{idx});elsefprintf(1,'%s下载失败！\n',filenames{idx});endoutfilename=[];
end
etime = toc;
fprintf('总下载文件数：%d，总耗时：%fs\n',length(num),etime);

运行结果如下图所示：

批量下载好的题目和优秀论文

后续会上传至CSDN空间中

matlab批量下载网页文件相关推荐

python批量下载网页文件-python使用selenium实现批量文件下载
背景实现需求:批量下载联想某型号的全部驱动程序. 一般在做网络爬虫的时候,都是保存网页信息为主,或者下载单个文件.当涉及到多文件批量下载的时候,由于下载所需时间不定,下载的文件名不定,所以有一定的困 ...
python批量下载网页文件-Python批量下载网页图片详细教程
目标:爬取某个网站上n多页的链接,每个链接有n多张图片,每一页对应一个文件夹,每个文件夹包含n个链接所对应的文件夹. 步骤1:获得网页的所有链接,访问所有链接,获得链接里的图片地址. 步骤2:根据图片 ...
python批量下载网页文件夹_Python抓取网页批量下载文件方法初探（正则表达式+BeautifulSoup） (转)...
最近两周都在学习Python抓取网页方法,任务是批量下载网站上的文件.对于一个刚刚入门python的人来说,在很多细节上都有需要注意的地方,以下就分享一下我在初学python过程中遇到的问题及解决方法 ...
python批量下载网页文件-超简单超详细python小文件、大文件、批量下载教程
按照不同的情况,python下载文件可以分为三种: 小文件下载大文件下载批量下载 python 小文件下载流程:使用request.get请求链接,返回的内容放置到变量r中,然后将r写入到你想放 ...
python批量下载网页文件-Python实现批量下载文件
Python实现批量下载文件 #!/usr/bin/env python # -*- coding:utf-8 -*- from gevent import monkey monkey.patch_a ...
python批量下载网页文件夹_Python实现批量从不同的Linux服务器下载文件
基于Python实现批量从不同的Linux服务器下载文件 by:授客实现功能批量从不同的Linux服务器下载指定文件测试环境 Win7 64位 Python 3.3.2 pscp 64位下载地 ...
python批量下载网页文件夹_Python的urllib模块、urllib2模块批量进行网页下载文件...
由于需要从某个网页上下载一些PDF文件,但是需要下载的PDF文件有几百个,所以不可能用人工点击来下载.正好Python有相关的模块,所以写了个程序来进行PDF文件的下载,顺便熟悉了Python的url ...
python 批量下载代码_Python + Selenium +Chrome 批量下载网页代码修改
Python + Selenium +Chrome 批量下载网页代码修改主要修改以下代码可以调用本地的 user-agent.txt 和 cookie.txt 来达到在登陆状态下批量打开并下载网 ...
python webdriver save_Python + Selenium +Chrome 批量下载网页代码修改【新手必学】
Python + Selenium +Chrome 批量下载网页代码修改主要修改以下代码可以调用本地的 user-agent.txt 和 cookie.txt 来达到在登陆状态下批量打开并下载网 ...

matlab批量下载网页文件

需求

实现过程

批量下载好的题目和优秀论文

matlab批量下载网页文件相关推荐

最新文章

热门文章