python爬虫简单实例-最简单爬虫示例(入门级)

【实例简介】

【实例截图】

【核心代码】

from lxml import etree

import requests

def handle_request(url):

heades = {

'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/64.0.3282.140 Safari/537.36 Edge/17.17134',

}

response = requests.get(url=url,headers = heades).text

return response

def main():

url = 'https://voice.hupu.com/nba'

content = handle_request(url)

news = etree.HTML(content)

news_content = news.xpath(r'//div[@class="news-list"]/ul/li/div/h4/a/text()')

news_url = news.xpath(r'//div[@class="news-list"]/ul/li/div/h4/a/@href')

for new in zip(news_content ,news_url):

print(new)

if __name__ == '__main__':

main()

python爬虫简单实例-最简单爬虫示例(入门级)相关推荐

node工程默认url_node 爬虫入门实例，简单易懂
前言本文介绍一个 koa 的爬虫项目,受众对象为初学前端不久的小伙伴,通过这个项目能对 node 爬虫有一个简单的认识,也能自己动手写一些简单的爬虫.项目地址: Fe-Icy/firm-spider ...
python爬取图片实例_Python简单爬取图片实例
都知道Python的语法很简单易上手,也很适合拿来作爬虫等等,这里就简单讲解一下爬虫入门--简单地爬取下载网站图片.html 效果就像这样自动爬取下载图片到本地:python 代码: 其实很简单,咱 ...
python爬虫简单实例-最简单的Python爬虫案例，看得懂说明你已入门，附赠教程
原标题:最简单的Python爬虫案例,看得懂说明你已入门,附赠教程这是最简单的Python爬虫案例,如果你能看懂,那么请你保持信心,因为你已经入门Python爬虫,只要带着信心和努力,你的技术能力在 ...
python爬虫框架实例项目_python爬虫框架scrapy实例详解
生成项目 scrapy提供一个工具来生成项目,生成的项目中预置了一些文件,用户需要在这些文件中添加自己的代码. 打开命令行,执行:scrapy start tutorial/ scrapy.cfg t ...
python类定义实例以及简单的商品出售博弈游戏
购物博弈系统最近老师让我用python做一个银行系统,在研究了别人写的以后加上自己最近对博弈论有点兴趣.于是就有了今天这个捞比程序程序结果是得到一系列功能,实现简单的商品出售.获利.存储等功能,有 ...
Python GPU编程实例(最简单, 入门版)
1. 首先需要安装numba(python的CUDA版) conda install numba & conda install cudatoolkit 2. 导入numba from num ...
python界面设计实例qt_pyqt的最小示例qtreeview和qt设计
我试图为qt设计器设计的应用程序获取一个最小的示例,其中pyqt涉及一个QTreeView 1)我可以用这种方式启动应用程序,但是如果我按下按钮,TreeView小部件中没有显示任何条目,我没有收到任 ...
python爬虫入门实例-Python爬虫快速入门：基本结构简单实例
本爬虫系列入门教程假设读者仅有一点点Python基础或者近乎为零的基础.如果是有Python基础的可以跳过一些对于Python基本知识的补充. 爬虫能干什么呢?一句话概括,正常通过浏览器可以获取的数据 ...
python简单爬虫入门一_Python爬虫快速入门：基本结构简单实例
本爬虫系列入门教程假设读者仅有一点点Python基础或者近乎为零的基础.如果是有Python基础的可以跳过一些对于Python基本知识的补充. 爬虫能干什么呢?一句话概括,正常通过浏览器可以获取的数据 ...

python爬虫简单实例-最简单爬虫示例(入门级)

python爬虫简单实例-最简单爬虫示例(入门级)相关推荐

最新文章

热门文章