批量下载数据——以TRMM数据为例
批量下载TRMM数据
- 写在前面
- 1 下载TRMM数据
- 2 批量下载
- 2.1 使用DownThemAll!扩展程序批量下载
- 2.1.1 配置DownThemAll!扩展程序
- 2.2.2 请求数据
- 2.2 使用Aria2批量下载
- 2.2.1 关于Aria2
- 2.2.2 请求数据
- 2.2.3 Aria2批量下载
写在前面
使用DownThemAll!扩展程序和Aria2两种方案批量下载TRMM数据，对IDM批量下载感兴趣的评优可以参考TRMM数据windows平台IDM下载方法。
如何下载TRMM数据，可以参考TRMM降水数据下载步骤。
更多降水数据以及其他类型地学数据，详见地学常用数据及其下载地址。
TRMM数据nc格式转换成tif格式的matlab代码请参考博客—Matlab TRMM_3B42数据格式转换（nc转tif）。
DownThemAll!扩展程序需要使用Firefox浏览器。
本文中没有使用IDM下载，主要原因是在输入账号密码时，总是成功不了。对IDM感兴趣的朋友可以参考TRMM数据windows平台IDM下载方法。
本文介绍两种简单的批量下载方法（不仅仅能用于下载TRMM数据）。
1 下载TRMM数据
按照TRMM降水数据下载步骤请求数据。在选择结果过程中，点击Download links list，结果保存在一个txt文本文件中。
2 批量下载
2.1 使用DownThemAll!扩展程序批量下载
2.1.1 配置DownThemAll!扩展程序
打开Firefox浏览器，点击右上角的菜单栏，再单击“添加组件”。
输入“down”或者“DownThemAll!”，单击目标扩展，点击“添加到Firefox”。
2.2.2 请求数据
按照步骤1请求数据。注意，DownThemAll!将下载的是已经加载出来的链接。然后点击右上角的DownThemAll!图标，此时只下载该打开页面的链接，也就是说，目标中的2922个链接中只下载左边红色框中的链接，如需全部下载则要点击下拉到最后一条链接。
在快速筛选框中输入“.nc4”，再点击下载。
但是，只下载了19条数据，也就是在页面中加载的数据链接，想到全部下载的话，需要下拉到最后一条数据。
另外，数据的名字前方都有“TRMM_3B42RT.7ː”，这样对Matlab读取nc文件造成困扰（读取nc文件的函数不识别冒号）。
2.2 使用Aria2批量下载
2.2.1 关于Aria2
可以先查看知乎贴抛弃迅雷，Aria2 新手入门，下载Aria2（aria2-1.35.0-win-64bit-build1.zip版本），解压后直接存放在D盘。
2.2.2 请求数据
按照步骤1请求数据。这里为了快速展示，只选用部分下载链接。
trmmtest.txt文本文件放在了D:\aria2-1.35.0-win-64bit-build1\文件夹里。
2.2.3 Aria2批量下载
快捷键Win + R，输入cmd。
先输入“D:\”，再输入“aria2-1.35.0-win-64bit-build1\aria2c.exe -i aria2-1.35.0-win-64bit-build1\trmmtest.txt -j 100 --http-user=xxx --http-passwd=*** -d D:/download”。
语句解读：“执行文件路径 -i 链接所在的txt文件路径 -j 线程数 --http-user=用户名 --http-passwd=密码 -d 下载文件存放路径”。
其中：
aria2-1.35.0-win-64bit-build1为Aria2所在的文件夹，即D:\aria2-1.35.0-win-64bit-build1\文件夹
执行文件路径（aria2-1.35.0-win-64bit-build1\aria2c.exe）
链接所在的txt文件路径（aria2-1.35.0-win-64bit-build1\trmmtest.txt，方便起见，该文件放在了D:\aria2-1.35.0-win-64bit-build1\文件夹）
用户名和密码（略，在NASA EARTHDATA请求TRMM数据时的用户名和密码）
下载文件存放路径（Download，即D:\Download）
键盘上点击Enter键，开始下载trmmtest.txt文本文件中包含的数据。
查看下载的文件：
欢迎大家批评指正！
批量下载数据——以TRMM数据为例相关推荐
- Google Earth Engine（GEE）批量下载不透水面数据
目标: 提取山西省不透水面数据并批量下载,使用的数据为清华大学宫鹏老师的不透水面数据集"Tsinghua/FROM-GLC/GAIA/v10" 参考文献:Gong, P., Li, ...
- 【GEE】批量下载全球降水量GPM数据 (NASA)
[GEE]批量下载GPM月度降水量数据 可访问GPM Data Directory 查看数据集 下载方式: 直接在GES DISC中生成数据订单,并使用wget或down them all直接下载. ...
- 用Python批量下载DACC的MODIS数据
本人初次尝试用Python批量下载DACC的MODIS数据,记下步骤,提醒自己,数据还在下载,成功是否未知,等待结果中...... 若有大佬发现步骤有不对之处,望指出,不胜感激. 1.下载Python ...
- Getfasta--根据Acession Number（Ac号）批量下载GenBank分子序列数据的自动化程序
推断分子系统发育树时,很多分子序列数据都是从GenBank等公共数据库下载的.当数据很多时,每条序列都要检索.下载十分耗时,而且容易出错.作者基于NCBI官方提供的Entrez direct软件包,二 ...
- 使用IDM批量下载Sentinel(哨兵)卫星数据
目录 1.前言 2.Sentinel数据检索 3.对IDM进行设置并完成下载 建了一个QQ群,大家可以在里边聊聊水色遥感数据下载和数据处理方面的事情:1087024529 该方法只针对online的s ...
- 使用sentinelsat包和IDM批量下载offline的sentinel数据
目录 1.问题描述 2.下载思路 3.源码 4.结果 建了一个QQ群,大家可以在里边聊聊水色遥感数据下载和数据处理方面的事情:1087024529 1.问题描述 Sentinel数据(包括1,2,3) ...
- Google Earth Engine（GEE）批量下载哨兵1号数据
今天来简单分享下如何在GEE中批量下载哨兵1号数据 数据介绍: 数据源为COPERNICUS/S1_GRD,是SAR数据. 可能的组合是单波段 VV 或 HH,以及双波段 VV+VH 和 HH+HV: ...
- MODIS数据批量下载中断问题解决——以MOD13Q1为例
MODIS-NDVI数据MOD13Q1(250米,16天) 下载过程及问题解决 Terra 中分辨率成像光谱仪 (MODIS) 植被指数 (MOD13Q1) 第 6 版数据每 16 天以 250 米 ...
- python批量下载ECMWF欧洲中心数据
ECMWF欧洲中心提供的api只能根据单时间下载,我稍微改动了一下,可以根据时间进行批量下载.详细步骤如下: 1.注册账户获得key. 网址: https://cds.climate.copernic ...
最新文章
- 经典SQL（sqlServer）
- Ubuntu下硬盘读写时声音很响问题的解决
- php7实践指南图书手册
- 转：初学者简易 .vimrc编写指南
- Gitlab 10.1.4 (汉化版) for CentOS 7.4安装
- 【ROI 2019 Day2】课桌【贪心】【决策单调性】【分治】
- shopxo二次开发：商品管理添加、商品导入库存、设置库存量（教程）
- 良好的用户界面设计技巧
- pytorch查看loss曲线_pytorch loss总结与测试
- 144Hz和60Hz显示器差别很大吗？
- 数组成员是函数java_在Laravel 5.6中调用数组上的成员函数links（）
- 单例初始化（MRC模式之autorelease）
- 关于opencv标定的一些疑问，首先声明这篇文章转载于纸异兽，由于暂时联系不到他本人，只好请教各位了。有些问题想请教，各位大神可以留下联系方式帮我解决，万分感谢...
- 百度硬盘搜索插件开发指南(摘自百度）
- k2运营商服务器无响应,【求救】K2提示“等待PPP客户端连接”拨号失败
- JAVA调用WebService的三种方法
- EditText属性输入框Kotlin.Android
- python rsa模块学习笔记
- 怎样在 Linux 系统中恢复已删除文件
- LeetCode 古生物血缘远近判定 （ dp ）