使用Colab对wget下载加速
wget特性
这里介绍下常用的wget,及其常用命令。
wget是非交互的网络下载器。通过manpage,主要特性如下:
支持http,https, ftp以及http代理。对安全强度很高的系统而言,一般不会将自己的系统直接暴露在互联网上,所以,支持代理是下载软件必须有的功能
非交互。
可识别(follow)html,xhtml,和css链接,递归下载。
健壮性,支持断点下载。
网上常用方法mwget
wget相对于浏览器来说,速度会比较偏慢,特别是国外的网站。
刚好经常用的xftp无法正常使用了,于是开始折腾mwget。
mwget是一个多线程下载应用,可以明显提高下载速度。
下面来看一下mwget安装步骤:
#!/bin/bashwget http://jaist.dl.sourceforge.net/project/kmphpfm/mwget/0.1/mwget_0.1.0.orig.tar.bz2
yum install bzip2 gcc-c++ openssl-devel intltool -y
bzip2 -d mwget_0.1.0.orig.tar.bz2
tar -xvf mwget_0.1.0.orig.tar
cd mwget_0.1.0.orig
./configure
make
make install echo "至此,安装完成"
新wget加速方法
针对那些有科学上网手段但是还是网速感人的人。
尤其是在Linux上下载vscode,能下成功就已经是一个奇迹了。所以在这里我介绍一下一种巧妙的方法,下载对应的文件。
Google Colab:https://colab.research.google.com/
其原理就是租用Google的服务器,然后用他们那里的高速下载服务,下载想要的东西,然后从Google的网站上下载自己想要下载的任何东西,只要有直接的下载链接都可以下载好。如下图所示:
下面就拿Ubuntu下载vscode做例子。
首先,打开vscode的官网,单机下载建进入页面
选择适合自己电脑的版本,由于我的计算机用的是NVIDIA Xavier NX 版本,基于ARM64架构,点击下载,可以发现这个下载的速度可以说是龟速了。
不过不要紧,你只需要复制下载的连接(也就是wget能生效的连接)即可,第一步,就是打开下载的界面,然后打开自己下载的目录,找到自己下载的文件,右击,复制下载链接。
接着打开Google 的 Colab:https://colab.research.google.com/,打开欢迎使用的部分,如下图所示
…详情请参照古月居
使用Colab对wget下载加速相关推荐
- Linux 配置IP地址,子网,网关,DNS,linux远程, wget 下载工具
查看命令识别的网卡名:nmcli connection show 配置ip,子网,网关 nmcli connection modify 'System eth0' ipv4.method ...
- 解决wget下载中文乱码的方法
在下载用apache或者nginx做的索引目录时,遇到文件名乱码问题.一般情况下加上–restrict-file-names=nocontrol参数就可以用了. 有一个前提,要注意索引目录显示出来的是 ...
- Linux之wget下载
一.介绍 Linux系统下载文件工具,用来从指定的URL下载文件 二.使用方法 1 2 3 4 5 6 7 8 语法:wget [参数] [URL地址] 选项: -c接着下载没下载完的文件 -b启动后 ...
- Windows10下git bash中添加wget下载工具
Windows10下git bash中添加wget下载工具 文章目录: 一.说明 二.wget安装包的下载 三.添加环境变量 一.说明 Windows中git bash完全可以替代原生的cmd,而且更 ...
- 【转】让itunes下载加速的真正办法,转向至香港台湾澳门苹果服务器 -- 不错不错!!!...
原文网址:http://bbs.feng.com/read-htm-tid-2397269.html 今天,看了一个这个帖子是改dns的,http://bbs.feng.com/read-htm-ti ...
- Linux 命令之 wget -- 下载文件工具
文章目录 一.命令介绍 二.命令语法 三.常用选项 四.命令示例 (一)下载并以不同的文件名保存 (二)下载单个文件 (三)限速下载 (四)断点续传 (五)使用 wget 后台下载 (六)伪装代理名称 ...
- linux 命令行使用wget下载百度云资源
步骤一:在百度云把需要下载的资源共享出来. 比如我这里分享一个windows 的下载镜像 http://pan.baidu.com/s/1o6rdkW6 步骤二:获取共享资源的实际下载地址,这个可以在 ...
- java 调用wget_通过命令行执行WGET下载会更快,而通过Java代码执行时会更慢
我正在使用WGET通过java代码下载文件,这需要大约10分钟才能下载20 MB文件.但是通过命令行执行wget下载,同样的文件以10MbPs的速度在7秒内下载.有人知道为什么吗?我该如何改进我的Ja ...
- 初学shell,今天遇到由wget下载到本地的网页源代码的乱码问题,无聊的写了一个转码的脚本...
今天用wget想下载文件,结果下载了一堆本地的index.html文件,一查看全是乱码,然后百度了一下,网页的编码格式大概有三种: 1.utf-8 2.gb2312 3.gbk 要在网页源码中的< ...
- ubuntu 中wget (下载)命令用法
Linux wget是一个下载文件的工具,它用在命令行下. 对于Linux用户是必不可少的工具,尤其对于网络管理员,经常要下载一些软件或从远程服务器恢复备份到本地服务器 1.使用wget下载单个文件 ...
最新文章
- 图论 ---- C. Nastya and Unexpected Guest(图上最短路dp + 01bfs)
- Html 5.2 的简单介绍及新增元素 dialog/dialog
- 你的响应阻塞了没有?--Spring-WebFlux源码分析
- 中小企业CRM评测-八百客
- HYSBZ - 2243染色——树链剖分+线段树建树技巧
- Linux之export命令
- angularjs+ionic+'h5+'实现二维码扫描功能
- 立法者在民权受到侵蚀时忽略了黑匣子算法
- cognex扫码枪识别内容直接_康耐视cognex DataMan8600系列-手持终端-条码扫描枪-PDA-扫描模块-条码打印机-苏州奥维尔...
- 小米手机miui12系统下拉状态栏开关图标排序方法
- 2022年,计算机er保研选计科还是电信?
- 全国大学计算机专业排名2021,2021全国计算机专业大学排名一览表
- nodejs:underscore模块介绍
- 在vscode编辑器中,vetur和volar冲突
- 5款开源网站流量统计应用程序
- JavaScript Standard Style(JS Standard 代码风格规则详解)
- 三角形的内点(皮克定理)
- 华为鸿蒙首批升级机型名单曝光
- 编程题-判断数独是否正确
- 装修找哪家装修公司?新房收房时有哪些注意事项?