用python爬取3dm上的单机游戏评测信息
用python爬取3dm上的单机游戏评测信息
- 参考结果
#爬取3dm上单机游戏评测榜,50页的相关信息import requests
from lxml import etree
headers={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36"
}
def index():for num in range(1,50,1):try:base_url='https://www.3dmgame.com/original_40_{0}/'.format(num)response=requests.get(base_url,headers=headers)# print(response.status_code)print(base_url+'访问成功')response.encoding=('utf-8')except:print("error")html=response.textclean(html)
def clean(html):#代码预处理html=etree.HTML(html)# print(html)#xpath守则game_name=html.xpath("//div[@class='bt']/a/text()")game_score=html.xpath("//a[@class='font']/text()")test_time=html.xpath("//div[@class='time']/text()")short_list=html.xpath("//div[@class='p']/p/text()")# hot_index=html.xpath("//span[@class='selectarcnum']/text()")# print(game_score)# print(game_score)# print(test_time)for name,score,time ,list in zip(game_name,game_score,test_time,short_list):#提取游戏名称name=name.split('》')[0]name=name+'》'#游戏单体信息加工info=name+' 3dm评分:'+score+'\n\t\t3dm评测时间:'+time+'\n\t\t简介:'+list+'\n'# print(info)#保存信息sto(info)
def sto(info):fp.write(info)
if __name__ == '__main__':fp=open('./3dm游戏评测.txt','a',encoding='utf-8')index()fp.close()
参考结果
《全面战争:三国》 3dm评分:8.2
3dm评测时间:2020-09-01 22:00:00
简介:南蛮的野兽部队,靠滑铲可对付不了。
《枪火重生》 3dm评分:8.0
3dm评测时间:2020-08-31 13:40:22
简介:游戏还是要好玩才是硬道理,兼具系统深度与重复可玩性的《枪火重生》,会是消磨酷夏时光的一大杀器。
《Spiritfarer》 3dm评分:8.5
3dm评测时间:2020-08-30 21:37:03
简介:当看到游戏有着拥抱的功能后,我就知道,这会是个好游戏。
《控制》 3dm评分:8.0
3dm评测时间:2020-08-29 19:07:17
简介:喜欢本体的,玩就对了。
《曲途》 3dm评分:7.0
3dm评测时间:2020-08-28 20:37:21
简介:要跳要舞,要跳得出类拔萃,要舞得让大家心悦诚服。
《废墟战旗》 3dm评分:7.0
3dm评测时间:2020-08-27 19:27:37
简介:兽人确实很棒。
《雨中冒险2》 3dm评分:8.0
3dm评测时间:2020-08-26 11:31:55
简介:玩着玩着,一小时便过去了
《全网公敌》 3dm评分:7.5
3dm评测时间:2020-08-25 18:55:47
简介:答案都在细节里
《英雄传说:创之轨迹》 3dm评分:8.5
3dm评测时间:2020-08-22 20:03:01
简介:量大管饱的系列里程碑。
《冰汽时代》 3dm评分:7.0
3dm评测时间:2020-08-21 19:57:59
简介:To be,or not to be.
《浴血黑帮:傀儡师》 3dm评分:8.0
3dm评测时间:2020-08-20 21:00:00
简介:英伦黑帮,西装暴徒
《全面战争传奇:特洛伊》 3dm评分:8.2
3dm评测时间:2020-08-19 20:06:45
简介:这次的古希腊神话,代入感比三国好太多了。
《致命躯壳》 3dm评分:8.8
3dm评测时间:2020-08-18 12:00:00
简介:在《致命躯壳》里,攻击可以成为最好的防守
用python爬取3dm上的单机游戏评测信息相关推荐
- python爬取电影评分_用Python爬取猫眼上的top100评分电影
代码如下: # 注意encoding = 'utf-8'和ensure_ascii = False,不写的话不能输出汉字 import requests from requests.exception ...
- python爬取文献代码_使用python爬取MedSci上的影响因子排名靠前的文献
使用python爬取medsci上的期刊信息,通过设定条件,然后获取相应的期刊的的影响因子排名,期刊名称,英文全称和影响因子.主要过程如下: 首先,通过分析网站http://www.medsci.cn ...
- 1-3 用Python爬取微博上电影主题的热度(主题的阅读数和讨论数)
1-3 用Python爬取微博上电影主题的热度(主题的阅读数和讨论数) 1 weiboHeat.py 2 #-*- coding:utf-8 -*- 3 ''' 4 该脚本可以从wap版的微博网站上爬 ...
- python爬取csdn上的包含整人关键词的阅读量并且存入表格里。完整代码
请注意,爬取他人网站的数据可能违反网站的条款和条件.在进行爬虫操作之前,请确保获得网站的授权. 下面是一个使用 Python 爬取 CSDN 上所有包含 "整人" 关键词文章的阅读 ...
- python爬取Instagram上偶像的帖子(包括图片和视频)
python爬取Instagram上偶像的帖子(包括图片和视频) 声明:仅供技术交流,请勿用于非法用途,如有其它非法用途造成损失,和本博客无关 目录 python爬取Instagram上偶像的帖子(包 ...
- python爬取贝壳找房之北京二手房源信息
所用库 requests xpath解析库 multiprocessing多进程 pandas库用于保存csv文件 实战背景 本文首发于:python爬取贝壳找房之北京二手房源信息 主要是为了做北京二 ...
- steam夏日促销用Python爬取排行榜上的游戏打折信息
不知不觉,一年一度如火如荼的 steam 夏日促销悄然开始了.每年通过大大小小的促销,我的游戏库里已经堆积满还未下载过的游戏.但所谓"买到就是赚到,G胖一定大亏"的想法日渐流行,指 ...
- steam夏日促销悄然开始,用Python爬取排行榜上的游戏打折信息
前言 很多人学习python,不知道从何学起. 很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手. 很多已经做案例的人,却不知道如何去学习更加高深的知识. 那么针对这三类人,我给大 ...
- steam夏日促销悄然开始,用Python爬取排行榜上的游戏打折信息!
前言 本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 不知不觉,一年一度如火如荼的steam夏日促销悄然开始了.每年通过大大小小 ...
最新文章
- Solr -- Solr Facet 2
- 在android工程中,res目录下又有anim、drawable、layout、menu、raw、values和xml文件夹,分别用来保存?...
- HBase HFile与Prefix Compression内部实现全解–KeyValue格式
- hive 语法检查_升级Hive3处理语义和语法变更
- time、random以及序列化模块
- 2.2线性表的顺序表示和实现
- Python enumerate() 函数
- 主窗体的常用属性 c# 1615011872
- 7-34 点赞 (20 分)
- MySql索引分析及查询优化
- python编程(python和c相互调用)
- spring全家桶的技术体系介绍
- 原来大家最拼命的时候是这样子的
- windows中如何让chrome信任自签名证书?
- HTML中的空格、Tab、书名号大于号以及常用特殊符号
- 面试:设计一个电商平台积分兑换系统
- Matlab+cpp矩量法代码演示
- Leetcode994腐烂的橘子(广度搜索法)
- 招投标过程---投标之述标 大杂烩
- pandas常用命令
热门文章
- [集合]解决system权限3389无法添加的用户情况
- java-php-python-ssm信息工程学院办公经费管理系统服务端计算机毕业设计
- 瑞数动态安全 - 零补丁、零规则 主动抵御未知零日攻击
- 100行Python代码实现自动抢火车票
- Java官方SDK进行QQ接入
- python——保留字
- html页面整体变灰,CSS + JS 网站变灰(变黑白),兼容所有浏览器。
- UGUI Button在点击后停留在Highlighted状态的Bug
- 西门子PLC S1500新能源pack线程序(含触摸屏程序)
- xxx is not recognized as an internal