用python爬取3dm上的单机游戏评测信息

  • 参考结果
#爬取3dm上单机游戏评测榜,50页的相关信息import requests
from lxml import etree
headers={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36"
}
def index():for num in range(1,50,1):try:base_url='https://www.3dmgame.com/original_40_{0}/'.format(num)response=requests.get(base_url,headers=headers)# print(response.status_code)print(base_url+'访问成功')response.encoding=('utf-8')except:print("error")html=response.textclean(html)
def clean(html):#代码预处理html=etree.HTML(html)# print(html)#xpath守则game_name=html.xpath("//div[@class='bt']/a/text()")game_score=html.xpath("//a[@class='font']/text()")test_time=html.xpath("//div[@class='time']/text()")short_list=html.xpath("//div[@class='p']/p/text()")# hot_index=html.xpath("//span[@class='selectarcnum']/text()")# print(game_score)# print(game_score)# print(test_time)for name,score,time ,list in zip(game_name,game_score,test_time,short_list):#提取游戏名称name=name.split('》')[0]name=name+'》'#游戏单体信息加工info=name+'  3dm评分:'+score+'\n\t\t3dm评测时间:'+time+'\n\t\t简介:'+list+'\n'# print(info)#保存信息sto(info)
def sto(info):fp.write(info)
if __name__ == '__main__':fp=open('./3dm游戏评测.txt','a',encoding='utf-8')index()fp.close()

参考结果

《全面战争:三国》 3dm评分:8.2
3dm评测时间:2020-09-01 22:00:00
简介:南蛮的野兽部队,靠滑铲可对付不了。
《枪火重生》 3dm评分:8.0
3dm评测时间:2020-08-31 13:40:22
简介:游戏还是要好玩才是硬道理,兼具系统深度与重复可玩性的《枪火重生》,会是消磨酷夏时光的一大杀器。
《Spiritfarer》 3dm评分:8.5
3dm评测时间:2020-08-30 21:37:03
简介:当看到游戏有着拥抱的功能后,我就知道,这会是个好游戏。
《控制》 3dm评分:8.0
3dm评测时间:2020-08-29 19:07:17
简介:喜欢本体的,玩就对了。
《曲途》 3dm评分:7.0
3dm评测时间:2020-08-28 20:37:21
简介:要跳要舞,要跳得出类拔萃,要舞得让大家心悦诚服。
《废墟战旗》 3dm评分:7.0
3dm评测时间:2020-08-27 19:27:37
简介:兽人确实很棒。
《雨中冒险2》 3dm评分:8.0
3dm评测时间:2020-08-26 11:31:55
简介:玩着玩着,一小时便过去了
《全网公敌》 3dm评分:7.5
3dm评测时间:2020-08-25 18:55:47
简介:答案都在细节里
《英雄传说:创之轨迹》 3dm评分:8.5
3dm评测时间:2020-08-22 20:03:01
简介:量大管饱的系列里程碑。
《冰汽时代》 3dm评分:7.0
3dm评测时间:2020-08-21 19:57:59
简介:To be,or not to be.
《浴血黑帮:傀儡师》 3dm评分:8.0
3dm评测时间:2020-08-20 21:00:00
简介:英伦黑帮,西装暴徒
《全面战争传奇:特洛伊》 3dm评分:8.2
3dm评测时间:2020-08-19 20:06:45
简介:这次的古希腊神话,代入感比三国好太多了。
《致命躯壳》 3dm评分:8.8
3dm评测时间:2020-08-18 12:00:00
简介:在《致命躯壳》里,攻击可以成为最好的防守

用python爬取3dm上的单机游戏评测信息相关推荐

  1. python爬取电影评分_用Python爬取猫眼上的top100评分电影

    代码如下: # 注意encoding = 'utf-8'和ensure_ascii = False,不写的话不能输出汉字 import requests from requests.exception ...

  2. python爬取文献代码_使用python爬取MedSci上的影响因子排名靠前的文献

    使用python爬取medsci上的期刊信息,通过设定条件,然后获取相应的期刊的的影响因子排名,期刊名称,英文全称和影响因子.主要过程如下: 首先,通过分析网站http://www.medsci.cn ...

  3. 1-3 用Python爬取微博上电影主题的热度(主题的阅读数和讨论数)

    1-3 用Python爬取微博上电影主题的热度(主题的阅读数和讨论数) 1 weiboHeat.py 2 #-*- coding:utf-8 -*- 3 ''' 4 该脚本可以从wap版的微博网站上爬 ...

  4. python爬取csdn上的包含整人关键词的阅读量并且存入表格里。完整代码

    请注意,爬取他人网站的数据可能违反网站的条款和条件.在进行爬虫操作之前,请确保获得网站的授权. 下面是一个使用 Python 爬取 CSDN 上所有包含 "整人" 关键词文章的阅读 ...

  5. python爬取Instagram上偶像的帖子(包括图片和视频)

    python爬取Instagram上偶像的帖子(包括图片和视频) 声明:仅供技术交流,请勿用于非法用途,如有其它非法用途造成损失,和本博客无关 目录 python爬取Instagram上偶像的帖子(包 ...

  6. python爬取贝壳找房之北京二手房源信息

    所用库 requests xpath解析库 multiprocessing多进程 pandas库用于保存csv文件 实战背景 本文首发于:python爬取贝壳找房之北京二手房源信息 主要是为了做北京二 ...

  7. steam夏日促销用Python爬取排行榜上的游戏打折信息

    不知不觉,一年一度如火如荼的 steam 夏日促销悄然开始了.每年通过大大小小的促销,我的游戏库里已经堆积满还未下载过的游戏.但所谓"买到就是赚到,G胖一定大亏"的想法日渐流行,指 ...

  8. steam夏日促销悄然开始,用Python爬取排行榜上的游戏打折信息

    前言 很多人学习python,不知道从何学起. 很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手. 很多已经做案例的人,却不知道如何去学习更加高深的知识. 那么针对这三类人,我给大 ...

  9. steam夏日促销悄然开始,用Python爬取排行榜上的游戏打折信息!

    前言 本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理. 不知不觉,一年一度如火如荼的steam夏日促销悄然开始了.每年通过大大小小 ...

最新文章

  1. Solr -- Solr Facet 2
  2. 在android工程中,res目录下又有anim、drawable、layout、menu、raw、values和xml文件夹,分别用来保存?...
  3. HBase HFile与Prefix Compression内部实现全解–KeyValue格式
  4. hive 语法检查_升级Hive3处理语义和语法变更
  5. time、random以及序列化模块
  6. 2.2线性表的顺序表示和实现
  7. Python enumerate() 函数
  8. 主窗体的常用属性 c# 1615011872
  9. 7-34 点赞 (20 分)
  10. MySql索引分析及查询优化
  11. python编程(python和c相互调用)
  12. spring全家桶的技术体系介绍
  13. 原来大家最拼命的时候是这样子的
  14. windows中如何让chrome信任自签名证书?
  15. HTML中的空格、Tab、书名号大于号以及常用特殊符号
  16. 面试:设计一个电商平台积分兑换系统
  17. Matlab+cpp矩量法代码演示
  18. Leetcode994腐烂的橘子(广度搜索法)
  19. 招投标过程---投标之述标 大杂烩
  20. pandas常用命令

热门文章

  1. [集合]解决system权限3389无法添加的用户情况
  2. java-php-python-ssm信息工程学院办公经费管理系统服务端计算机毕业设计
  3. 瑞数动态安全 - 零补丁、零规则 主动抵御未知零日攻击
  4. 100行Python代码实现自动抢火车票
  5. Java官方SDK进行QQ接入
  6. python——保留字
  7. html页面整体变灰,CSS + JS 网站变灰(变黑白),兼容所有浏览器。
  8. UGUI Button在点击后停留在Highlighted状态的Bug
  9. 西门子PLC S1500新能源pack线程序(含触摸屏程序)
  10. xxx is not recognized as an internal