利用python下载网页到本地(python3)

这个功能需要用到urlretrieve，这个函数在urllib.request包里面。如果有同学用的是python2，那么这个函数就在urllib里面。

关于urlretrieve这个函数的用法，http://www.nowamagic.net/academy/detail/1302861中给出了很好的说明，大家有兴趣可以看一看。

我的是另一个例子，出自《python核心编程》一书，原书是基于python2的版本

下载一个网页，然后显示第一和最后一非空行，代码如下

from urllib.request import urlretrievedef firstNonBlank(lines):for eachLine in lines:if not eachLine.strip():continueelse:return eachLinedef firstLast(webpage):f = open(webpage, 'r')lines = f.readlines()f.close()print(firstNonBlank(lines))lines.reverse()print(firstNonBlank(lines))def download(url="http://info.tsinghua.edu.cn", process=firstLast):try:retval = urlretrieve(url)[0]except IOError:retval = Noneif retval:print(retval)process(retval)if __name__ == '__main__':download()

利用python下载网页到本地(python3)相关推荐

怎么在python下载网站内容-Python下载网页的几种方法
get和post方式总结 get方式:以URL字串本身传递数据参数,在服务器端可以从'QUERY_STRING'这个变量中直接读取,效率较高,但缺乏安全性,也无法来处理复杂的数据(只能是字符串,比如在 ...
利用python下载fnl数据方法
(1)下载python,网上下载方法很多,此处不再赘述,记得下载和电脑系统版本匹配的就好: (2)去ncar官网注册 https://rda.ucar.edu/ 先进行注册,需要注意的是注册最好用教育 ...
参考 | Python 下载网页端视频
Python | 下载网页端视频
用Python下载网页视频
你可以使用 Python 中的 requests 库来下载网页视频. 首先,你需要安装 requests 库.你可以在命令行中输入以下命令来安装它: pipinstall requests 然后,你可 ...
mac如何用python爬网页数据_Mac——利用Python进行网页爬取
Mac--利用Python进行网页爬取目标:利用Python爬取网页中的指定内容,例如,爬取百度百科网页中四川省的别名.html 输出:四川省的别名为:川.蜀.天府之国python 我的经验,网页爬 ...
利用wget下载网页上所有文件到指定文件夹
一.wget下载及安装参考上一篇:https://blog.csdn.net/Yingccu/article/details/119609655?spm=1001.2014.3001.5502 二. ...
python下载网页上的文件_用Python下载一个网页保存为本地的HTML文件实例
Python打开网页并另存为静态html怎么实现如何用python把网页上的文本内容保存下来那一世的长情,谱一首长相思,冷了多少凄凉,漫了多少青丝,化作多少烟雨,吹散多少世间情!徒悲,奈何,这一世, ...
利用python下载钉钉群直播视频
今年因为疫情的原因不能开学,所以很多学校都使用钉钉进行在线授课,但是在钉钉里面点击下载群直播回放的时候却发现管理员关闭了下载功能,那么,我们在这种情况下应该怎样利用 Python 程序来达到我们下载视 ...
python下载文件到本地-Python下载网络文本数据到本地内存的四种实现方法示例
本文实例讲述了Python下载网络文本数据到本地内存的四种实现方法.分享给大家供大家参考,具体如下: import urllib.request import requests from io imp ...

利用python下载网页到本地(python3)

利用python下载网页到本地(python3)相关推荐

最新文章

热门文章