日志保存天数默认是31天 。# 解决方案## sysstat工具安装 sysstat 工具包后会自动每10分钟采集一次,脚本在/etc/cron.d/sysstat 目录下。要保留更长时间要修改配置文件```bash/etc/sysconfig/sysstat/u... 历史数据存放在 /var/log/sa 目录下![image.png](https://lf6-volc-editor.volccdn.com/obj/volcfe/sop-public/upload_de3af031185294a0d40493749c5310d2)## 使用示例### 1. 查询当月3号的CPU使用情况```...
# **场景介绍**如果您需要从 AWS Aurora for MySQL 迁移到火山引擎 RDS MySQL,建议您提前查看此 [[使用限制(源库为 MySQL)]](https://www.volcengine.com/docs/6390/79140),其中提到,如果您需要实现增量复制,需要开启 binlog 日志,并建议 binlog 至少保留 24 小时。由于 AWS Aurora for MySQL 有其特殊性,这里着重介绍以下两点:* 如何开启 binlog 日志* 如何设置 binlog 保留期# **操作步骤**## 如何开启 binlog 日志在...
一般的复制使用 STATEMENT 模式保存 binlog ,对于一些函数,STATEMENT 模式无法复制的操作使用 ROW 模式保存 binlog。 基于这三种模式需要注意的是:1)使用 row 格式的 binlog 时,在进行数据同步或恢复的时候... 称为**重做日志** ,当 MySQL 服务器意外崩溃或者宕机后,**保证已经提交的事务**持久化到磁盘中(**持久性**)。它能保证对于已经 COMMIT 的事务产生的数据变更,即使是系统宕机崩溃也可以通过它来进行数据重做,达到...
事件日志包含太多冗余信息,长时间运行的应用程序可能会带来巨大的事件日志,这可能需要大量维护并且需要很长时间才能重构 UI 数据从而提供服务。在大规模生产中,作业的数量可能很大,会给历史服务器带来沉重的负担。... 可以看到 UIMeta 较 event log 在存储量上有数量级的减少。目前字节内部 7 天的 event log 占用存储空间 3.2 PB,改用 UIMeta 后,空间占用只有 350 TB。凭借 UIService 的存储优势,我们可以保留更长时间的日志信息,...
CLB实例的访问日志将存入指定的存储桶中。 对象/文件 七层CLB实例会定时上传一段时间内的日志文件到指定的存储桶中,每个文件以对象的形式存入。 服务关联角色 平台IAM中的服务关联角色,用户将此角色赋予负载均衡服务后,负载均衡可访问对象存储服务中的部分资源。 基本信息日志文件基本信息如下表所示。 参数 说明 生成周期 5分钟。 文件大小 文件大小由访问量决定。 是否压缩 是,系统默认对日志文件进行压缩后上传。 保存路径 负...
标准存储的数据在标准存储保存一段时间之后自动转化为低频存储类型。低频存储类型的成本更低,适用于数据使用频率较低的业务场景。开启低频存储后,需要设置数据在标准存储的保留时长,该时长应不短于 7 天,默认为 30 天。超过该时长后,数据会自动沉降至低频存储进行后续保存,直到日志采集到服务端的总时长达到日志存储时长时,被后端服务自动清理。 说明 低频存储为邀测功能,若有相关业务需求,可联系客户经理开通白名单。 日志分区...
日志服务已为该字段创建索引。 __source__ 原始日志所在服务器的 IP 地址。日志服务已为该字段创建索引。 日志样例常见的单行日志样例如下: Plain 10: URL_REQUEST https://clientservices.googleapis.com/chrome-variations/seed?osname=win&channel=stable&milestone=86 Start Time: 2020-10-19 12:27:35.822通过单行全文模式采集以上单行日志时,日志服务会对日志全文进行字段封装,最终保存在日志服务中的日志数据为: Plai...
云防火墙详细记录了网络流量日志和访问控制日志。日志中包含多个字段,您可以根据需要选取相应的日志字段进行查询分析。 日志字段 取值样例 含义及说明 timestamp 1678293146 日志产生时间戳 log_type sessi... 表示来自互联网的其他资源或内网中的其他ECS访问您的ECS服务器。 out:出向,表示您的ECS服务器主动访问互联网上的其他资源或内网中的其他ECS。 in_pkts 5 入向包数量 in_bytes 300 入向包大小,单位:Byte out...
注意事项开启日志分析功能后,日志服务会自动创建日志项目及主题存放 TOS 的相关日志。 计费说明如果 TOS 日志存储时间不超过 7 天,且当天写入流量(压缩后)或索引流量不超过 900GiB,则日志服务不收取日志存储、索... CostTime 12 TOS 服务器处理本次请求所花的时间,单位:毫秒。 UserAgent curl/7.15.5 HTTP 的 User-Agent 头。 Referer *.example.com 请求的 HTTP Referer。 OwnerId 200000**** TOS Bucket 拥有者的...
LogCollector 根据采集配置采集服务器上的文本日志,并支持以分隔符模式解析日志。在分隔符模式下,LogCollector 根据指定的分隔符将每条日志统一进行结构化处理。本文档介绍创建分隔符模式采集配置的操作步骤。 背景... 并提取日志字段。请为不同的日志字段指定不同的 key。 说明 key 不可重复。 未指定 key 的字段,不会被采集并存储到日志服务中。 选择是否使用采集时间。 开启:将采集日志时 LogCollector 所在服务器的系统时间...
binlog 的保留时间是否可以手动修改?不支持手动修改。binlog 的保留时间(binlog_expire_logs_seconds)默认为 432000 秒(5 天)。若您需要修改该参数,您可以提交工单联系技术支持。 veDB MySQL 只读节点上有 binlog 日志吗?有的,您可以连接只读终端,执行 show binary logs; 命令查询当前二进制日志文件列表及大小。
不支持跨日志项目进行消费。 限制说明Kafka 协议消费功能支持的 Kafka Client 版本为 0.11.x~2.0.x。 Kafka 协议消费功能为开启状态时,您可以消费 Kafka Consumer 运行期间采集到服务端的日志数据。Consumer 首次启动前采集的日志数据不支持消费。 Consumer 短暂重启期间的日志数据可被消费,但消费中断 2 小时以后采集的日志数据不支持消费。 供 Kafka 消费的日志数据在服务端的数据保留时间为 2 小时,2 小时后或关闭 Kafka 协议...
展示当前集群历史操作日志,以及配置修改详情记录。 集群操作日志分为历史记录,以及正在执行的未完成的任务。 查询操作日志可以按照操作分类、时间、操作名称及操作人搜索。 点击操作名称,展示操作详情。 对于集群端的操作,如服务或组件的启动、停止、重启等,点击操作名称,在弹出的面板中展示操作执行详情。按照步骤,分别展示具体的执行状态以及日志详情。 对于控制台的配置变更操作,如保存服务配置参数,修改告警规则等,点击操作名...