日志服务保留时间 内容精选

换一换

执行一个MapReduce应用会产生两种类型日志文件：作业日志和任务日志。作业日志由MRApplicationMaster产生，详细记录了作业启动时间、运行时间，每个任务启动时间、运行时间、Counter值等信息。此日志内容被HistoryServer解析以后用于查看作业执行的详细信息。任务日志记录了每个运行在Container中的任务输

华为云CLI自1.2.9及以后的版本新增日志记录和管理功能，华为云CLI会缓存API调用过程中产生的日志信息，日志文件保存目录如下：Windows系统： C:\Users\{您的Windows系统用户名}\.hcloud\log\Linux系统: /home/{当前用户名}/.hcloud/log/Mac系统：

日志服务保留时间 相关内容

弹出“新建”对话框，如图1所示。项目名称：日志异常检测项目的名称，示例“logdetect”。项目描述：日志异常检测项目的描述信息，示例“日志异常检测”。项目详情页面的上方会展示当前的订购信息、容量使用情况、最近一次更新时间和项目数据的默认保留时间周期，如下图中红框选中的内容。日志检测：该目录中可以查看该项目中所有日志检测任务的检测结果、

文档数据库服务支持审计功能，默认审计日志关闭，打开可能会有一定的性能影响。审计日志记录您对数据库或集合执行的操作，生成的日志文件将以文件的形式存储在对象存储服务。通过查看日志文件，您可以对数据库进行安全审计，故障根因分析等操作。文档数据库服务会去检测已生成的审计日志，若审计日志超过用户自定义的保留天数，则将其删除。审计策略修改后，文档数据

日志服务保留时间 更多内容

数据库审计日志在集群的安全配置页面中进行设置，仅可用和非均衡状态的集群才支持修改安全配置，同时集群的任务信息不能处于创建快照中、节点扩容、配置中和重启中。默认显示配置状态为已同步，表示页面显示的是数据库当前最新结果。详细信息如表1所示。表示开启状态。表示关闭状态。8.1.1.100及以上的版本支持更细粒度的审计项。各审计项的详细信息如表2

开启系统日志记录，代码如下所示：当系统出现问题需要定位且当前的日志无法满足要求时，可以通过修改日志的级别来获取更多的信息。其中OBSDDLogLevelVerbose日志信息最丰富，OBSDDLogLevelError日志信息最少。默认为OBSDDLogLevelInfo。

MRS的审计日志长期保留在系统中，可能引起数据目录的磁盘空间不足问题，故通过设置导出参数及时将审计日志自动导出到OBS服务器的指定目录下，便于管理审计日志信息。审计日志导出到OBS服务器的内容包含两部分，服务审计日志和管理审计日志。服务审计日志每天凌晨3点自动压缩存储到主管理节点“/var/log/Bigdata/audit/bk/”，保

YARN提供了Container日志聚合功能，可以将各节点Container产生的日志收集到HDFS，释放本地磁盘空间。日志收集的方式有两种：应用完成后将Container日志一次性收集到HDFS。应用运行过程中周期性收集Container输出的日志片段到HDFS。应用完成后将Container日志一次性收集到HDFS。应用运行过程中周期

集群的磁盘使用率很高。Manager管理页面下主机管理显示磁盘使用率过高。Yarn WebUI界面上显示只有少量任务在运行。登录到集群的Master节点执行hdfs dfs -du -h /命令发现如下文件占用大量磁盘空间。Yarn服务的汇聚日志配置如下客户提交任务的操作过于频繁，且聚合后的日志文件被删除的时间配置为1296000，即聚合

日志组(LogGroup)是云日志服务进行日志管理的基本单位，可以创建日志流以及设置日志存储时间，每个帐号下可以创建100个日志组。已注册华为云，并且通过了实名认证。日志组的创建类型分为用户创建(主动)和云服务创建(被动)，云服务创建指华为云其他云服务与云日志服务进行系统对接后，系统自动在云日志服务控制台创建的日志组，本操作中日志组的创建

主机和云服务的日志数据上报至云日志服务后，默认存储时间为7天，可以在1-30天之间进行设置。超出存储时间的日志数据将会被自动删除。对于需要长期存储的日志数据(日志持久化)，云日志服务提供转储功能，可以将日志转储至对象存储服务(OBS)或者数据接入服务(DIS)中长期保存。日志转储详情请参见：日志转储。

ICAgent安装完成后，需要将主机待采集日志的路径配置到日志流中，ICAgent将多条日志进行打包，以日志流为单位发往云日志服务。已创建日志组和日志流。已完成ICAgent安装。在云日志服务管理控制台，单击“日志管理”，在日志组列表中，单击已创建的日志组名称。在日志流列表中，单击已创建的日志流名称。在左侧导航栏单击“日志接入-主机接入”

云日志服务提供实时日志采集功能，采集到的日志数据可以在云日志控制台以简单有序的方式展示、方便快捷的方式进行查询，并且可以长期存储。采集到日志数据按照结构化和非结构化进行分析。结构化日志是通过规则将日志流中的日志进行处理，提取出来有固定格式或者相似度高的日志内容做结构化的分类。这样就可以采用SQL的语法进行日志的查询。对采集的日志数据，可以

当面对大量日志时，运维人员很难快速了解系统在目标时间段发生了什么，应用是否健康，也无法使用“搜索关键字”来应对未知问题。日志聚类，是指将结构相似度高的日志聚合成一组，提取共同的日志模式(log pattern)，使用 =* 替换该事件类型中所有日志行中不同的部分(例如变量部分)，将大量日志快速聚合成较少的日志模式，帮助运维人员快速掌握应用

在WAF管理控制台，您可以免费查看最近30天的防护日志、下载5天内的所有防护域名的防护日志数据。您可以将WAF的防护日志记录到单独收费的云日志服务(Log Tank Service，简称LTS)，LTS默认存储日志的时间为7天，存储时间可以在1～30天之间进行设置，超出存储时间的日志数据将会被自动删除，对于需要长期存储的日志数据(日志持久