Python标准库 urllib

urllib是python的一个获取url的模块。它用urlopen函数的形式提供了一个非常简洁的接口。这使得用各种各样的协议获取url成为可能。它同时也提供了一个稍微复杂的接口来处理常见的状况-如基本的认证，cookies，代理，等等。这些都是由叫做opener和handler的对象来处理的。

urllib

import urllibs = urllib.urlopen('http://tieba.baidu.com/p/3606519228')print s.read()  #将会打印出整个文件的html源代码

s.readline() #打印Html代码的第一行s.getcode()  #返回Http状态码。如果是http请求，200请求成功完成;404网址未找到s.info()     #返回一个httplib.HTTPMessage对象，表示远程服务器返回的头信息s.geturl()   #返回请求的url

>>> s = urllib.urlopen('http://www.alwme.com/')
>>> byte = s.read()
>>> print("从 %s 上获取了 %s 字节") % (s.geturl(),len(byte))
从 http://alwme.com/ 上获取了 26834 字节

urlretrieve方法将url定位到的html文件下载到你本地的硬盘中，如果不指定filename，则会存为临时文件。

urlretrieve() 返回一个二元组

临时存放：

>>> filename = urllib.urlretrieve('http://www.alwme.com/')
>>> type(filename)
<type 'tuple'>
>>> print filename
('/tmp/tmpaOdE2g', <httplib.HTTPMessage instance at 0x7f1b021e8680>)

存为本地文件：

>>> filename = urllib.urlretrieve('http://www.alwme.com/',filename='/home/zhg/temptest/alwme.html')
>>> type(filename)
<type 'tuple'>
>>> print filename
('/home/zhg/temptest/alwme.html', <httplib.HTTPMessage instance at 0x7f1b021e8a28>)

urllib.urlcleanup()   #清除由于urllib.urlretrieve()所产生的缓存

转载于:https://www.cnblogs.com/zhanhg/p/4378161.html

Python标准库 urllib相关推荐

Python标准库—urllib和urllib3
一.urllib urllib是Python中请求url连接的官方标准库,在Python2中主要为urllib和urllib2,在Python3中整合成了urllib.urllib中一共有四个模块,分 ...
Python 标准库 —— urllib（下载进度）
注意:python 3 环境下的 urllib 库,将 urlopen.urlretrieve.quote 等实用函数统一封装在 urllib.request 下. 在可使用的各种网络函数库中,功能最 ...
Python标准库介绍
1. 关于Python标准库众所周知,Python是一个依赖强大的组件库完成对应功能的语言,为了便捷实现各项功能,前辈大牛们打造了多种多样的工具库公开提供给大众使用,而越来越多的库已经因为使用的广泛 ...
Python标准库asyncio模块基本原理浅析
Python标准库asyncio模块基本原理浅析本文环境python3.7.0 asyncio模块的实现思路当前编程语言都开始在语言层面上,开始简化对异步程序的编程过程,其中Python中也开始了 ...
python第三方库排行-140种Python标准库、第三方库和外部工具
导读:Python数据工具箱涵盖从数据源到数据可视化的完整流程中涉及到的常用库.函数和外部工具.其中既有Python内置函数和标准库,又有第三方库和工具. 这些库可用于文件读写.网络抓取和解析.数据连 ...
python基本使用-Python标准库详细介绍与基本使用方式，超详细！
目录: Python 标准库概览概览操作系统接口 os 模块提供了很多与操作系统交互的函数: 应该用 import os 风格而非 from os import *.这样可以保证随操作系统不同而有所 ...
python标准库有多强大_Python标准库——走马观花
原文:Python标准库--走马观花作者:Vamei 出处:http://www.cnblogs.com/vamei 欢迎转载,也请保留这段声明.谢谢! Python的一大好处在于它有一套很有用的标 ...
Python学习笔记： Python 标准库概览
本文来自:入门指南开胃菜参考:开胃菜使用Python解释器:使用Python解释器本文对Python的简介:Python 简介 Python流程介绍:深入Python 流程 Python数据结构 ...
140种Python标准库、第三方库和外部工具都有了
导读:Python数据工具箱涵盖从数据源到数据可视化的完整流程中涉及到的常用库.函数和外部工具.其中既有Python内置函数和标准库,又有第三方库和工具. 这些库可用于文件读写.网络抓取和解析.数据连 ...
cassandra可视化工具_耗时1个月整理！160种Python标准库、第三方库和外部工具都有了...
耗时1个月整理!160种Python标准库.第三方库和外部工具都有了北京尚学堂 2019-12-09 14:59:15 Python数据工具箱涵盖从数据源到数据可视化的完整流程中涉及到的常用库.函数 ...

Python标准库 urllib

Python标准库 urllib相关推荐

最新文章

热门文章