网站日志数据分析。南京seo优化

1、网站日志中数据量过大,所以我们一般需要借助网站日志分析工具来查看。常用的日志分析工具有:光年日志分析工具、web log exploer、WPS表格等

117.26.203.167 – – [02/May/2011:01:57:44 -0700] “GET/index.php HTTP/1.1″ 500 19967 “-” “Mozilla/4.0 (compatible; MSIE 8.0;Windows NT 5.1; Trident/4.0; AskTbCS-ST/5.11.3.15590; .NET CLR 2.0.50727; Alexa Toolbar)”

分析:

117.26.203.167访问ip;

02/May/2011:01:57:44 -0700访问日期 -时区;

GET/index.php HTTP/1.1根据HTTP/1.1协议抓取(域名下)/index.php这个页面(GET表示服务器动作);

500服务器响应状态码;

服务器响应状态码通常状态码有以下几种:200,301,302,304,404,500等。200代表用户成功的获取到了所请求的文件,如果是搜索引擎,则证明蜘蛛在这次爬行中顺利的发现了一些新的内容。而301则代表用户所访问的某个页面url已经做了301重定向(永久性)处理,302则是暂时性重定向。404则代表所访问的页面已经不存在了,或者说访问的url根本就是个错误的。500则是服务器的错误。

19967表示抓取了19967个字节;

Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; AskTbCS-ST/5.11.3.15590; .NET CLR 2.0.50727; Alexa Toolbar表示访问者使用火狐浏览器及Alexa Toolbar等访问端信息;

2、如果你的日志里格式不是如此,则代表日志格式设置不同。

3、很多日志里可以看到 200 0 0和200 0 64则都代表正常抓取。

4、抓取频率是通过查看每日的日志里百度蜘蛛抓取次数来获知。抓取频率并没有一个规范的时间表或频率数字,我们一般通过多日的日志对比来判断,当然,我们希望百度蜘蛛每日抓取的次数越多越好。

5、有时候我们的路径不统一出现带斜杠和不带斜杠的问题,蜘蛛会自动识别为301跳转到带斜杠的页面,这里我们就发现了搜索引擎是可以判断我们的目录的,所以我们要对我们的目录进行统一。

6、我们分析日志分析时间长了,我们能够看出蜘蛛的抓取规律,同一目录下面的单个文件的抓取频率间隔和不同目录的抓取频率间隔都可以看出来,这些抓取频率间隔时间是蜘蛛根据网站权重和网站更新频率来自动确定的。

7、蜘蛛对于我们的页面的抓取是分等级的,是根据权重依次递减的,一般顺序为首页、目录页、内页。

(Visited 43 times, 38 visits today)

php 网站日志分析,网站日志数据分析相关推荐

  1. ESXi日志分析网站第五版v5.4

    ESXi日志分析网站第五版v5.4 https://mp.weixin.qq.com/s/mz3OVG7vw_wjUtSzFApBpQ 第5.4版更新 支持ESXI7.0版本及以上日志分析 常规性安全 ...

  2. 运维人必备:日志分析工具日志易之银行业解决方案

    运维人必备:日志分析工具日志易之银行业解决方案 银行和金融服务行业面临着因为技术革新带来的许多挑战和机遇.系统每天产生数以 TB 计的交易.支付.渠道等各种日志数据.银行机构必须为迅速增长的海量数据建 ...

  3. 网站流量分析,网站流量统计,不用插入代码直接在线免费查询网站流量

    网站流量分析,网站流量统计,不用插入代码直接在线免费查询网站流量 http://www.jaeer.com/site/ 示例:

  4. 服务器网站访问日志分析,服务器日志分析与流量统计_直观快捷分析每个网站的日志...

    本帖最后由 软程科技 于 2019-9-9 19:13 编辑 应用名称:日志分析与流量统计 价格:1元 作者:软程科技 版本: 2.1.9 提示(使用前必读): 1. 此插件未在超大(超过1G)的日志 ...

  5. awstats linux日志分析,Linux 日志分析工具之AWStats详解

    一.前言 二.awstats 简介 三.awstats 特点 四.awstats 运行原理 五.awstats 安装与配置详解 六.awstats 执行日志分析 七.awstats 进行多站点日志分析 ...

  6. 网站诊断分析-网站诊断分析软件-网站SEO诊断分析软件

    网站诊断分析,要做好一个网站是离不开网站数据的,每一个SEO工程师必备的技能就是网站诊断分析,只有了解自己的网站,清楚自己网站的状况才能对症下药让网站快速收录以及关键词排名. 怎么做好网站所有的数据分 ...

  7. mysql.err日志分析_Mysql日志解析

    转载:https://www.cnblogs.com/Fly-Wind/p/5674382.html 修改Mysql配置 Mysql配置地址为: C:\Program Files (x86)\MySQ ...

  8. python nginx日志分析_Nginx日志分析及脚本编写

    在我们日常的运维中,当Nginx服务器正常运行后,我们会经常密切关注Nginx访问日志的相关情况,发现有异常的日志信息需要进行及时处理. 那今天我将跟大家一起来研究和分析Nginx日志,nginx默认 ...

  9. c oracle日志分析,oracle 日志分析

    1. 确定那个日志文件 2.日志分析[@more@] SQL> show parameter utl NAME TYPE VALUE ------------------------------ ...

最新文章

  1. python中接口测试垃圾数据如何清理_一个六年经验的python后端是怎么学习用java写API的(2)Extracter,微信文章抓取清洗入库...
  2. NSUserDefaults的一些用法
  3. JDK 8功能的可疑方面
  4. typescript vuex_Vue3+TypeScript完整项目上手教程
  5. IIS Server Farms入门
  6. ssm框架里面前端拿HTML写,ssm框架引入Vue,声明式渲染,标签的href拼接字符串
  7. rocketmq存储结构_rocketMq高性能存储设计
  8. 学会java基础能找工作吗?
  9. 全国各省市县统计年鉴/中国环境统计年鉴/中国工业企业数据库/中国专利数据库/污染排放数据库
  10. wxParse解析iframe播放视频
  11. 收藏!这10部关于数学的顶级纪录片,告诉孩子数学跟枯燥不沾边!
  12. SMT Kingdom v8.5 地震解释软件\
  13. win10换win7系统步骤操作详解分享
  14. RSS阅读服务上线啦
  15. 基于AD Event日志识别域用户密码攻击
  16. linux实验二文件与文件夹操作
  17. kdbp是什么文件_DVF文件扩展名 - 什么是.dvf以及如何打开? - ReviverSoft
  18. simkai.ttf 中文楷体文件
  19. 计算机故障诊断与失误,计算机系统故障诊断与维护常见故障及排除.ppt
  20. 《医疗器械唯一标识系统规则》解读

热门文章

  1. python汇率兑换程序。按照温度转换程序的设计思路,按照1美元=6人民币汇率编写一个美元和人民币的双向兑换程序。
  2. Html+Css+js实现计时器
  3. 过程控制系统中的模块技术MTP
  4. pandas 读取所有表头_Pandas 基础操作
  5. 知乎扎心高赞:30岁还没有走到管理岗的人,后来怎么样了?
  6. 读书会小程序开发制作功能介绍
  7. 三国佚事——巴蜀之危 2058
  8. PS基础教程:如何使用PS制作颜料溶解效果
  9. Armadillo11还提供统计函数并支持复数
  10. Unity 图片画线Shader