实用的 Python 之 feedparser

feedparser 号称是一个 universal feed parser，使用它我们可轻松地实现从任何 RSS 或 Atom 订阅源得到标题、链接和文章的条目了。

>>> import feedparser

为了建立直观，首先来看一个标准的 item：

<item>
<title><![CDATA[厦门公交车放火案死者名单公布<br/>警方公布嫌犯犯罪证据]]></title>
<link>http://www.infzm.com/content/91404</link>
<description><![CDATA[6月11日下午，厦门BRT公交车放火案47名死亡者名单公布。厦门政府新闻办6月10日发布消息称，有证据表明，陈水总携带汽油上了闽DY7396公交车。且有多名幸存者指认其在车上纵火，致使整部车引起猛烈燃烧。经笔迹鉴定，陈水总6月7日致妻、女的两封绝笔书系陈水总本人所写。]]></description>
<category>南方周末-热点新闻</category>
<author>infzm</author>
<pubDate>2013-06-11 11:24:32</pubDate>
</item>

feedparser 最为核心的函数自然是 parse() 解析 URL 地址的函数，它返回的究竟是什么样的内容呢？

>>> feedparser.parse()
{'bozo': 1,'bozo_exception': xml.sax._exceptions.SAXParseException('no element found'),'encoding': 'utf-8','entries': [],'feed': {},'namespaces': {},'version': ''}

可以看到，得到是一个字典，’feed’（key）对应的值（value）也是一个字典，’entries’ 则是 list。

基本用法

每个 RSS 和 Atom 订阅源都包含一个标题（d.feed.title）和一组文章条目（d.entries）。

通常，每个文章条目都有一段摘要（d.entries[i].summary），或者是包含了条目中实际文本的描述性标签（d.entries[i].description）。

>>> import feedparser
>>> d = feedparser.parse('http://blog.csdn.net/lanchunhui/rss/list')

（1）d.feed

>>> d['feed']['title']                             # feed 对应一个字典
'以数学为生，终生学习数学'>>> d.feed.title                                   # 通过属性的方式访问
'以数学为生，终生学习数学'>>> d.feed.link
'http://blog.csdn.net/lanchunhui'>>> d.feed.subtitle
'数学、编程、物理、文字（The nature of reality itself）'

（2）d.entries

>>> type(d.entries)
list
>>> len(d.entries)
20                                                             # 共20篇文章>>> [e.title for e in e.entries][:3]
['[原]Spark MLlib（一）正则化特征','[原]Spark 基础 —— sc.broadcast','[原]Scipy 基础 —— 稀疏矩阵']>>> d.entries[0].summary             # 第一篇文章的摘要信息
>>> d.entries[0].summary == d.entries[0].description
True# 有些条目可能会不提供 summary 信息# 此时 summary 信息可通过 description 获得

References

[1] python feedparser 使用

实用的 Python 之 feedparser相关推荐

Python培训教程分享：“高效实用” 的Python工具库
作为一名合格Python技术员,对于Python工具库的使用是少不了的,本期Python培训教程就为大家分享的是""高效实用" 的Python工具库",希望能够 ...
20 条非常实用的 Python 代码，建议收藏！
[欢迎关注微信公众号:厦门微思网络] 微思网络(官网):https://www.xmws.cn/ 据说Python之父-Guido Van Rossum打算让CPython更快,速度直接翻五倍,这是实 ...
8个主流且实用的Python开发工具推荐
不管是刚入门学习Python还是已经在从事Python开发工作的人,都需要学习和掌握一些Python开发工具和软件.那么,现在已经主流且实用的Python软件有哪些呢?接下来小千就为大家介绍一下学习P ...
Python编程模块里一些小众但是却比较实用的python内置库
今天带来的是python里一些小众但是却比较实用的python库,一起来看看吧! 很多人学习python,不知道从何学起. 很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手. 很多 ...
几个常用的python脚本_几个很实用的python脚本
脚本写的好,下班下得早!程序员的日常工作除了编写程序代码,还不可避免地需要处理相关的测试和验证工作. 例如,访问某个网站一直不通,需要确定此地址是否可访问,服务器返回什么,进而确定问题在于什么.完成这 ...
用python建云盘_实用的Python（3）超简单！基于Python搭建个人“云盘”
1 简介当我们想要从本地向云服务器上传文件时,比较常用的有pscp等工具,但避免不了每次上传都要写若干重复的代码,而笔者最近发现的一个基于Python的工具updog,可以帮助我们在服务器上搭建类似 ...
python创意实用案例-python实用案例
广告关闭腾讯云双11爆品提前享,精选热门产品助力上云,云服务器首年88元起,买的越多返的越多,最高满返5000元! (python内部对异常已处理)1 class listiterator(obje ...
7个实用的Python自动化测试框架
目录前言 1.Unittest 2. Doctest 3.pytest 4.Nose 5.tox 6.Unittest2 7.mock unittest. 结语前言随着技术的进步和自动化技术的出 ...
学习必备的50条非常有趣且实用的Python一行代码，值得收藏
前言学习必备的50条非常有趣且实用的Python一行代码,值得收藏! 让我们愉快地开始吧~编程学习资料免费点击开发工具 Python版本: 3.6.4 相关模块: 环境搭建安装Python并添加 ...

实用的 Python 之 feedparser

基本用法

References

实用的 Python 之 feedparser相关推荐

最新文章

热门文章