各个搜索引擎的User-Agent
百度搜索User-Agent:
百度 PC UA
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
百度移动 UA
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
百度图片UA
Baiduspider-image+(+http://www.baidu.com/search/spider.htm)
神马搜索User-Agent:
神马搜索 PC UA
Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36
神马搜索移动 UA
Mozilla/5.0 (iPhone; CPU iPhone OS 10_3 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) CriOS/56.0.2924.75 Mobile/14E5239e YisouSpider/5.0 Safari/602.1
谷歌User-Agent:
谷歌 PC UA
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
谷歌移动UA
AdsBot-Google-Mobile (+http://www.google.com/mobile/adsbot.html) Mozilla (iPhone; U; CPU iPhone OS 3 0 like Mac OS X) AppleWebKit (KHTML, like Gecko) Mobile Safari
谷歌图片UA
Mozilla/5.0 (compatible; Googlebot-Image/1.0; +http://www.google.com/bot.html)
搜狗User-Agent:
搜索 PC UA
Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)
搜狗图片 UA
Sogou Pic Spider/3.0(+http://www.sogou.com/docs/help/webmasters.htm#07)
搜狗新闻UA
Sogou News Spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)
搜狗视频UA
Sogou Video Spider/3.0(+http://www.sogou.com/docs/help/webmasters.htm#07)
360搜索User-Agent:
360搜索UA
Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0);
360移动UA
Mozilla/5.0 (Linux; U; Android 4.0.2; en-us; Galaxy Nexus Build/ICL53F) AppleWebKit/534.30 (KHTML, like Gecko)Version/4.0 Mobile Safari/534.30; 360Spider
Mozilla/5.0 (Linux; U; Android 4.0.2; en-us; Galaxy Nexus Build/ICL53F) AppleWebKit/534.30 (KHTML, like Gecko) Version/4.0 Mobile Safari/534.30; HaosouSpider
360安全UA
360spider (http://webscan.360.cn)
必应User-Agent:
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
搜搜User-Agent:
搜搜UA:
Sosospider+(+http://help.soso.com/webspider.htm)
搜搜图片UA:
Sosoimagespider+(+http://help.soso.com/soso-image-spider.htm)
雅虎User-Agent:
雅虎中文UA:
Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)
雅虎英文UA:
Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)
各个搜索引擎的User-Agent相关推荐
- 神马搜索php,php判断神马搜索引擎蜘蛛的方法
今天无事查看了一下网站的访问日志,发现日志中有不少神马搜索引擎的来访记录.就写了一段php代码,用来统计一下神马搜索访问的数据,以便做出合理的优化方案. 神马搜索来源记录以及User Agent 以下 ...
- Discuz! Q的搜索引擎优化(SEO)攻略
Discuz! Q目前版本对搜索引擎的内容索引还不是很好,前后端分离的单页程序在没有针对搜索引擎优化时(可行的优化包括服务端渲染或静态化),搜索引擎目前只能抓取到一个默认的前端模版,所以你会看到你的页 ...
- 一篇文章带你详解 HTTP 协议(下)
文章目录,方便阅读: 一.概述(已讲) 二.HTTP 工作过程(已讲) 三.HTTP 协议基础(已讲) 四.HTTP 协议报文结构(已讲) 五.HTTP 报文首部之请求行.状态行(已讲) 六.HTTP ...
- Kali Linux Web 渗透测试秘籍 第二章 侦查
第二章 侦查 作者:Gilberto Najera-Gutierrez 译者:飞龙 协议:CC BY-NC-SA 4.0 简介 在每个渗透测试中,无论对于网络还是 Web 应用,都有一套流程.其中需要 ...
- 网络爬虫(网络蜘蛛,网络机器人)与Web安全
网络爬虫概述 网络爬虫(Web Crawler),又称网络蜘蛛(Web Spider)或网络机器人(Web Robot),是一种按照一定的规则自动抓取万维网资源的程序或者脚本,已被广泛应用于互联网领域 ...
- 网络协议(3) 详解 HTTP 协议(下)
七.HTTP 响应状态码(重点分析) 1. 状态码概述 HTTP 状态码负责表示客户端 HTTP 请求的返回结果.标记服务器端的处理是否正常.通知出现的错误等工作. HTTP 状态码如 200 OK ...
- 一篇文章带你详解 HTTP 协议
一篇文章带你详解 HTTP 协议 本篇文章篇幅比较长,先来个思维导图预览一下. 一张图带你看完本篇文章 一.概述 1.计算机网络体系结构分层 计算机网络体系结构分层 2.TCP/IP 通信传输流 利用 ...
- 带你了解 HTTP 协议
文章篇幅比较长,先来个思维导图预览一下. 一张图带你看完本篇文章 一.概述 1.计算机网络体系结构分层 计算机网络体系结构分层 2.TCP/IP 通信传输流 利用 TCP/IP 协议族进行网络通信时, ...
- 全网分析HTTP协议最全的一篇文章,程序员赶紧收藏
本篇文章篇幅比较长,先来个思维导图预览一下. 一张图带你看完本篇文章 一.概述 1.计算机网络体系结构分层 计算机网络体系结构分层 2.TCP/IP 通信传输流 利用 TCP/IP 协议族进行网络通信 ...
- 简书大佬的笔记:一篇文章带你详解 HTTP 协议(网络协议篇一)
一篇文章带你详解 HTTP 协议(网络协议篇一) 本篇文章篇幅比较长,先来个思维导图预览一下. 一张图带你看完本篇文章 一.概述 1.计算机网络体系结构分层 计算机网络体系结构分层 2.TCP/IP ...
最新文章
- 2022-2028中国空中互联网系统市场现状及未来发展趋势报告
- 数据库基础笔记(MySQL)5 —— 基础索引
- python中文名字叫什么-Python为什么取名为Python,很少人知道
- 为什么 Redis 默认 16 个库?90% 以上程序员不知道!
- 下载bilibli网站视频
- leetcode 830. 较大分组的位置
- 吃西瓜 最大子矩阵 三维的。 rqnoj93
- python threading_Python threading的使用方法解析
- django之同源策略
- 真正的帅哥没人说帅_“浩南哥”这话你敢信?郑伊健:在香港,没人夸我帅
- Oracle 左连接(+)加号用法及常用语法之间的关系
- win10分辨率不能调整_win10常规问题解决方案
- Java实现 LeetCode 480 滑动窗口中位数
- 容斥原理在C语言中的应用,容斥原理在排列问题中的应用实例
- 【系统分析师之路】系统分析师知识地图
- 如何把pdf转成图片jpg格式?俩个方法,1分钟搞定
- BTC多空互相蓄力 短期迎来激变
- 测向交叉定位matlab,一种三维多站测向交叉定位算法
- linux命令如何查看dns,详解Linux系统使用dig/nslookup命令查看dns解析的方法
- 支持向量机与支持向量回归(support vector machine and support vector regression)
热门文章
- c++ 函数返回数组
- Android系统中TextView默认行间距调整
- 土耳其商人2顶红帽子和3顶黑帽子问题的思考
- 老家见闻--一个程序员的成长史(8)
- 2018.12.23 周日--【绝代风华】《幸福2018》
- gRPC遭抛弃!Storj为何使用DRPC替代gRPC?
- 【NOI OJ】 2.6 动态规划-背包 4978 宠物小精灵之收服
- angularJS $watch $timeout 使用心得
- GitLab任意文件读取漏洞复现(CVE-2020-10977)
- xshell生成公钥私钥并实现登录