新功能发布记录

统计图表

新增文本图、散点图和漏斗图。

2024-04-18

全部地域

• 文本图
• 散点图
• 漏斗图

可视化开发

兼容更高版本的 Grafana，支持更丰富的图表类型。

2024-04-18

全部地域

对接 Grafana

数据加工

新增 lst_make、lst_append、lst_delete_at 加工函数。

2024-04-18

全部地域

列表函数

检索分析

• 开启全文索引后，支持键值检索。
• 新增 LAG、LEAD、TYPEOF 等 20 个 SQL 函数。

2024-04-18

全部地域

• 配置索引
• 聚合函数
• 字符串函数
• 正则式函数
• 类型转换函数
• 窗口函数

告警

• 通过飞书、钉钉和企业微信渠道发送告警通知时，支持提醒群成员。
• 支持左联和右联集合操作。

2024-04-18

全部地域

• 创建通知组
• 多集合操作

统计图表

• 新增雷达图，用于展示不同数据在相同维度下的对比情况。
• 折线图支持设置双 Y 轴。
• 统计图表交互优化。

2024-03-28

全部地域

• 雷达图
• 折线图
• 统计图表概述

告警

支持同时设置多级别告警触发条件。

2024-03-28

全部地域

创建告警策略

可视化开发

支持将日志服务仪表盘页面外嵌到第三方系统，进行免密登录操作。

2024-03-28

全部地域

• 控制台内嵌
• 设置控制台内嵌参数

日志资源

支持跨地域、跨日志项目批量导入指定的日志主题、索引配置以及采集配置。

2024-03-28

全部地域

• 导入日志主题
• 导入采集配置

告警

• 新增 Webhook 集成配置，用于管理钉钉、飞书、企业微信、自定义 Webhook 等Webhook 告警通知渠道。
• 所有告警通知渠道均支持绑定告警内容模板。
• 告警策略功能交互优化。

2024-03-01

全部地域

• 创建 Webhook 集成配置
• 创建内容模板
• 创建告警策略

从 TOS 导入日志

• 支持提取 CSV 文件的行首作为日志字段。
• 支持预览结构化后的日志。
• 支持导入其他日志主题中的索引。

2024-03-01

全部地域

从 TOS 导入日志

索引配置

日志服务支持自动为 JSON 字段中所有值为文本的子字段创建索引。

2024-03-01

全部地域

索引数据类型

SQL 语句

新增 HAVING 子句，用于过滤出符合特定条件的分组结果。

2024-03-01

全部地域

HAVING 子句

从 Kafka 导入数据

支持导入 Kafka 数据，即将 Kafka 集群的消息数据导入到指定日志主题。

2024-01-18

全部地域

从 Kafka 导入数据

仪表盘

支持通过变量过滤仪表盘中的图表数据。

2024-01-18

全部地域

添加仪表盘过滤器和变量

统计图表

• 新增流图。
• 支持将图表保存为 PNG 图片或 CSV 表格。

2024-01-18

全部地域

• 流图
• 仪表盘常见操作

从 TOS 导入日志

TOS 导入任务新增时区配置项。

2024-01-18

全部地域

从 TOS 导入日志

告警

• 支持通过 Cron 表达式设置告警执行周期。
• 支持跨地域、跨日志项目复制告警策略。

2024-01-18

全部地域

• 创建告警策略
• 管理告警策略

数据投递

支持历史数据投递到 TOS。

2023-12-19

全部地域

• 以 JSON 格式投递
• 以 CSV 格式投递

告警功能优化

• 自定义回调渠道支持设置内容模板，并提供默认模板。
• 支持设置告警组通知对象为指定 IAM 用户组。

2023-12-19

全部地域

• 创建通知组
• 创建内容模板

重建索引

支持重建索引，以当前最新的索引配置为指定时间范围的历史数据修改索引规则。

2023-12-19

全部地域

重建索引

统计图表

新增直方图、热力图、进度条、矩形树图、计量图、统计图和时间轴。

2023-12-06

全部地域

• 直方图
• 热力图
• 进度条
• 矩形树图
• 计量图
• 统计图
• 时间轴

仪表盘交互事件

仪表盘中图表支持设置交互事件，用于数据下钻分析。

2023-12-06

全部地域

交互事件

告警变量

告警策略支持 SignInUrl 等内容变量，用于免登录查看告警详情等场景。

2023-12-06

全部地域

• 内容变量
• 免登录访问告警详情页面

告警功能优化

• 告警测试支持短信、语音和邮件渠道。
• 告警策略中支持预览告警查询结果。
• 支持临时关闭告警策略。
• 支持仪表盘形式查看告警事件运行信息。

2023-12-06

全部地域

• 告警测试
• 创建告警策略
• 临时关闭告警策略
• 查看执行信息

服务日志

新增告警功能的服务日志及对应仪表盘。

2023-12-06

全部地域

告警策略执行日志
tls-service-alarm-dashboard

数据加工函数

数据加工功能支持结构化处理函数等函数。

2023-11-24

全部地域

• 结构化处理函数
• 编码解码函数

低频存储（白名单）

日志标准存储 7 天之后，可沉降为更低成本的低频存储。

2023-11-15

全部地域

日志主题

关联 MySQL 数据源（白名单）

支持关联 MySQL 外部数据源，实现日志主题和 MySQL 数据库的联合查询分析。

2023-11-15

全部地域

• 关联 MySQL 数据源
• MySQL 联合查询分析

UNION 和 JOIN 子句（白名单）

检索分析语法新增 UNION 和 JOIN 子句。

2023-11-15

全部地域

• JOIN 子句
• UNION 子句

LogCollector 插件执行条件

LogCollector 插件支持设置执行条件，只有在日志内容满足已设置的执行条件时，日志服务才会执行该插件。

2023-11-02

全部地域

插件执行条件

原始日志字段

开启上传原始日志后，支持自定义原始日志字段的名称。

2023-11-02

全部地域

配置采集规则

手动分裂分区

创建日志主题后可以手动分裂分区，提高整个日志主题的数据读写能力。

2023-11-02

全部地域

管理分区

统计图表

提供丰富的统计图表属性，除了图表全局的基本配置以外，还支持针对指定列进行个性化的样式配置。

2023-11-02

全部地域

统计图表概述

告警测试

创建告警策略时支持发送测试消息，验证告警策略和通知渠道的可用性。

2023-11-02

全部地域

告警测试

仪表盘订阅

支持订阅仪表盘，订阅后日志服务将定期推送报表到指定群组。

2023-11-02

全部地域

订阅仪表盘

Kafka 协议上传日志

配置 Kafka 协议上传日志前，可以通过控制台自动生成相关参数配置示例。

2023-11-02

全部地域

使用 Kafka 协议上传日志

LogCollector CRD

通过 LogCollector 采集容器日志时，支持通过 LogCollector CRD 创建采集配置。

2023-10-13

全部地域

• 安装 LogCollector CRD
• 采集原理
• DaemonSet-CRD 方式采集容器日志
• Sidecar-CRD 方式采集容器日志

消费组

提供消费组相关的 OpenAPI，可通过 SDK 方式创建消费组并消费日志。

2023-09-27

全部地域

通过消费组消费数据

投递数据到 Kafka

支持将采集到服务端的日志数据投递到火山引擎消息队列 Kafka版。

2023-09-27

全部地域

投递日志到 Kafka

数据加工

增加富化映射函数、事件检查函数、解析函数等多个函数。

2023-09-27

全部地域

• 流程控制函数
• 事件检查函数
• 富化映射函数
• IP 解析函数
• 解析函数

定时 SQL 分析

根据预设的时间窗口和调度周期对指定范围的日志数据进行检索分析，并将检索分析的结果保存到指定的日志主题中。

2023-08-22

全部地域

定时 SQL 分析

数据加工

数据加工增加编解码函数。

2023-08-22

全部地域

编码解码函数

资源管理

日志项目、日志主题等资源名称支持中文。

2023-08-22

全部地域

日志项目

LogCollector 插件

LogCollector 插件增加字符串替换和数据脱敏插件。

2023-08-22

全部地域

• 数据脱敏插件
• 字符串替换插件

标签和项目分账

支持标签分账和 IAM 项目分账。

2023-08-22

全部地域

标签概述

数据加工

数据加工功能支持函数 ext_json、dict_make 和 dict_update。

2023-07-31

全部地域

• 键值提取函数
• 字典函数

记录外网IP

为日志主题开启该功能后，日志服务会自动在日志内容中添加日志源外网IP地址等信息作为元数据字段。

2023-07-31

全部地域

日志主题

Trace 数据对接 Grafana

Trace 数据接入日志服务后，可以通过简单的配置将 Trace 数据通过 Jaeger 数据源接入 Grafana。

2023-07-19

全部地域

使用 Grafana 查看 Trace 数据

日志数据对接 Grafana

日志服务提供 Grafana 插件，可以将采集到的日志数据在 Grafana 中实现可视化展示与分析。

2023-07-19

全部地域

对接 Grafana

分隔符采集模式

通过分隔符模式采集日志时支持设置引用符，适用于日志内容中包含分隔符的场景。

2023-07-19

全部地域

分隔符日志

LogCollector 插件更新

delimiter 插件和 kv 插件支持设置引用符。

2023-07-19

全部地域

字段提取插件

LogCollector 版本更新

支持 PCRE 的正则表达式。

2023-07-19

全部地域

版本列表

配额管理

支持在配额中心申请调整仪表盘、机器组的配额。

2023-06-26

全部地域

申请资源配额

SDK 版本更新

推荐使用最新版本的日志服务 SDK，通过 SearchLogsV2 接口体验升级后的检索分析能力。请求 header 中 X-Tls-Apiversion 固定为 0.3.0，可以使用估算函数等检索功能升级后支持的新 SQL 函数与语法。

2023-06-26

全部地域

SDK 概述

复制告警策略

需要快速创建多个相似的告警策略时，可以通过复制方式快速创建告警策略。

2023-06-26

全部地域

复制告警策略

从 TOS 导入数据

从 TOS 导入数据时支持 Gzip 压缩和 lz4 压缩格式的数据。

2023-06-26

全部地域

从 TOS 导入日志

自动清除异常机器

机器标识类型的机器组中，后台会自动删除心跳异常的机器。

2023-06-26

全部地域

查看机器组

Trace 服务

日志服务通过 Trace 服务提供基于 OpenTelemetry 标准协议的分布式链路追踪能力。

2023-05-30

全部地域

Trace 服务

服务日志仪表盘

日志服务提供预置的服务日志仪表盘，可查看数据加工任务的进度等信息。

2023-05-30

全部地域

服务日志仪表盘

告警分级

告警策略支持设置告警级别，用于标识告警的严重程度。

2023-05-30

全部地域

创建告警策略

导入 SLS 采集配置

支持将 SLS 中已创建的采集配置批量导入到火山引擎日志服务中。

2023-05-30

全部地域

导入 SLS 采集配置

数据加工支持历史数据

支持对日志主题中已采集的历史数据进行数据加工。

2023-05-30

全部地域

创建数据加工任务

对接云监控

日志数据计费项对接云监控，支持通过云监控查看指定日志主题各个计费项对应的数据使用量。

2023-04-27

全部地域

日志服务监控项

Android SDK

提供 Android 日志采集 Demo 以供参考，可快速采集 Android 应用服务的日志数据并上传到日志服务中。

2023-04-23

全部地域

Android SDK 概述

从 ElasticSearch 导入数据

支持从 ElasticSearch 集群导入数据到日志服务中，以便后续的查询分析、多平台消费处理。

2023-04-23

全部地域

从 ElasticSearch 导入数据

iOS SDK

提供 iOS SDK 供客户端集成，用于快速采集 iOS 应用服务的日志数据并上传到日志服务中。

2023-04-23

全部地域

TLS iOS SDK 参考

仪表盘过滤器

仪表盘过滤器支持对各个图表数据进行键值对（key:value）过滤筛选操作，可快速查看关键字段的统计分析数据。

2023-04-23

全部地域

添加仪表盘过滤器

标签管理

标签用于云资源的标识与分类。日志服务支持为日志项目和日志主题添加标签，您可以通过标签对云资源进行归类，便于资源的搜索聚合。

2023-04-23

全部地域

标签管理

项目管理

支持将日志项目、日志主题、机器组和告警组添加到指定的 IAM 项目中，便于云资源的统一管理。

2023-04-23

全部地域

日志项目

IP 地址获取策略

日志服务支持调整 LogCollector 获取宿主机或容器 IP 地址的策略。

2023-04-23

全部地域

如何设置 LogCollector 获取 IP 地址的策略

地图

图表类型支持中国地图和世界地图。

2023-04-23

全部地域

中国地图
世界地图

告警通知频率

创建告警策略时，支持对不同渠道设置不同的发送告警周期。

2023-04-23

全部地域

创建告警策略

配额管理

支持调整仪表盘、告警、数据加工任务等资源的配额。

2023-03-14

全部地域

使用限制

服务日志

服务日志功能更新，支持消费延迟日志、数据投递到 TOS 的任务状态日志。

2023-03-14

全部地域

服务日志字段

SQL 函数

新增 url_extract_path、time_series 和 from_iso8601_timestamp 函数。

2023-02-22

全部地域

日期和时间函数
URL 函数

告警组支持自定义接口回调

支持设置告警渠道的通知方式为自定义接口回调，可通过该方式配置飞书、企业微信或钉钉群机器人告警通知。

2023-02-22

全部地域

配置告警接收渠道

数据加工

日志服务提供灵活便捷的数据加工功能，支持对采集到的日志数据进行清洗过滤、内容脱敏、数据分裂和数据分发。数据加工功能提供四十余种 TLS DSL 语法，适用于大数据、流式计算等场景。

2023-02-15

全部地域

数据加工概述

从 TOS 导入数据

支持 TOS 数据导入功能，即可以将 TOS 中存储的数据进行结构化，并保存在日志服务中。

2023-02-15

全部地域

从 TOS 导入日志

服务日志

服务日志功能以日志方式记录日志服务各个功能运行过程中的状态信息、业务运行的行为数据等信息。

2023-02-15

全部地域

服务日志概述

SQL 函数

支持 URL 函数、字符串函数和正则式函数。

2023-02-15

全部地域

• URL 函数
• 字符串函数
• 正则式函数

LogCollector 插件

支持通过 add_kvs 插件添加指定日志字段。

2023-02-15

全部地域

添加字段插件

容器日志采集

通过 DaemonSet 方式采集日志时，支持添加 K8s Annotation 日志标签。

2023-02-15

全部地域

• 采集容器文本日志（DaemonSet 方式）
• 采集容器标准输出（DaemonSet 方式）

通过 Logstash 上传日志

在通过 ELK 搭建日志采集分析系统的场景下，只需修改 Logstash 配置文件，即可实现通过 Kafka 协议上传日志数据到日志服务。

2023-02-15

全部地域

使用 Kafka 协议上传日志

通过 Spark Streaming 和Flink 消费日志

日志服务支持通过 Spark Streaming 和 Flink 消费日志。

2023-02-15

全部地域

• 通过 Spark Streaming 消费日志
• 通过 Flink 消费日志

快速分析

通过快速分析功能，可以查看指定字段在一段时间内的 Top5 值相关信息。

2023-01-10

全部地域

快速分析

一键清理机器组

对于机器标识类型的机器组，可以批量删除其中心跳失败的机器。

2023-01-10

全部地域

查看机器组

LIMIT 语法扩展

通过 LIMIT 语法，可以跳过某些行，仅查看指定行数的数据。

2023-01-10

全部地域

LIMIT 语法

检索分析页面重构

检索分析页面 UI 交互体验全面升级，例如支持自定义展示字段顺序等。

2023-01-10

全部地域

检索日志

支持消费日志到 ByteHouse

支持通过 Kafka 协议，在 ByteHouse 中消费日志数据。

2023-01-10

全部地域

通过 ByteHouse 消费日志

SQL 函数

日志 SQL 分析功能支持日期和时间函数。

2022-12-08

全部地域

日期和时间函数

Kafka 协议采集 JSON 日志

通过 Kafka 协议采集日志时，支持解析 JSON 格式日志。

2022-12-08

全部地域

使用 Kafka 协议上传日志

Topic 时间字段解析

支持为 Topic 指定日志时间字段与时间解析格式，配置后，采集到该 Topic 的所有日志都将以此字段作为日志时间。

2022-12-08

全部地域

日志主题

API 上传和消费日志支持 zlib 压缩

通过 API 和 SDK 方式上传或消费日志时，支持 zlib 压缩格式。

2022-12-08

全部地域

• PutLogs
• ConsumeLogs

告警优化

日志告警的通知内容支持类 Python 语法、内容变量及函数，可实现丰富的告警内容与多样化的自定义格式。

2022-12-08

全部地域

告警通知内容

嵌套子查询

支持将一个 SELECT 语句嵌套在另一个 SELECT 语句中。

2022-12-08

全部地域

嵌套子查询

控制台内嵌

支持将查询分析等页面嵌入到外部系统的自建 Web 页面中，用户可以在外部系统中免密登录日志服务控制台的部分页面。

2022-12-08

全部地域

控制台内嵌

从 SLS 导入日志

支持从阿里云日志服务 SLS 实时消费日志，导出结构化的日志数据，写入火山引擎日志服务。

2022-11-17

全部地域

从 SLS 导入日志

键值索引支持 JSON 数据类型

配置键值索引时，字段类型支持设置为 JSON。

2022-11-17

全部地域

索引数据类型

投递日志到对象存储 TOS

支持将采集到服务端的日志数据定期投递到 TOS 进行长期存储。

2022-11-08

全部地域

投递日志到 TOS

LogCollector 服务日志

日志服务提供日志采集工具 LogCollector 服务日志功能，记录 LogCollector 客户端的运行状态与日志采集行为数据。

2022-11-08

全部地域

LogCollector 服务日志

采集配置支持增量采集模式

采集配置支持设置采集策略，指定 LogCollector 采集全量日志或增量日志。

2022-11-08

全部地域

采集文本日志
采集容器日志

索引配置优化

• 格式为__tag__xxx__的字段支持配置索引。
• Sidecar 方式采集容器日志时，元数据字段默认创建索引。

2022-11-08

全部地域

配置索引

Kafka 协议上传日志

支持使用 Kafka Producer SDK 来采集日志数据，并通过 Kafka 协议上传到日志服务。

2022-10-13

全部

使用 Kafka 协议上传日志

LogCollector 插件

通过 LogCollector 采集文本日志时，如果业务日志结构复杂、格式不固定，可以通过 LogCollector 插件进行采集后处理。

2022-10-13

全部

LogCollector 插件概述

采集时支持扩展配置

采集配置的高级配置中增加扩展配置选项，支持设置释放文件句柄的时机。

2022-10-13

全部

采集文本日志
采集容器日志

LogCollector 升级

发布 1.0.9 正式版本及 1.0.10 Beta 版本。

2022-10-13

全部

LogCollector 版本说明

多语言 SDK 发布

发布以下 SDK：

• 浏览器 JavaScript SDK
• Java SDK
• Python SDK

2022-09-22

全部

• 浏览器JavaScript SDK
• Java SDK
• Python SDK

日志分区自动分裂

开启自动分裂功能后，日志服务会根据写入流量及数据量自动分裂分区。

2022-09-14

全部

管理分区

Web Tracking

支持通过 Web Tracking 采集终端用户浏览器日志。

2022-09-14

全部

使用 Web Tracking 采集日志

Kafka 协议消费日志

提供 Kafka 协议消费功能，即将一个日志主题当作一个 Kafka Topic 来消费。

2022-09-14

全部

通过Kafka协议消费日志

下载日志

可以将原始日志数据或检索分析结果下载到本地，进行数据查看或进一步分析。

2022-09-14

全部

下载日志

日志分布直方图

日志直方图用于展示符合查询条件的日志在不同时间段的分布情况。

2022-09-14

全部

检索日志

告警通知支持飞书和电话

告警通知的接收渠道可设置为电话和飞书，即支持通过电话和飞书机器人发送告警通知。

2022-09-14

全部

创建告警组

Sidecar 方式采集容器日志

支持 Sidecar 方式在日志服务控制台中采集容器文本日志。

2022-08-12

全部

• Kubernetes 集群安装 LogCollector
• 采集容器日志（Sidecar方式）

日志采集功能优化

• 支持 Nginx 模式采集日志
• 支持自动提取正则表达式
• 支持上传原始日志

2022-08-12

全部

• 单行全文模式
• JSON 模式
• 分隔符模式
• 多行全文模式
• 单行完整正则模式
• 多行完整正则模式
• Nginx 配置模式

机器组功能更新

支持针对机器组中所有宿主机设置 LogCollector 自动升级功能，可批量设置多个机器组。

2022-08-12

全部

• 创建机器组
• 查看机器组

可视化功能更新

• 表格格式的分析图表支持设置隐藏字段
• 所有分析图表支持在图表分析设置中编辑图表名称

2022-08-12

全部

表格

LogCollector 版本更新

• 支持宿主机 LogCollector 自动升级
• 采集功能更新与优化

2022-08-14

全部

• 安装LogCollector
• 升级 LogCollector

上下文查询

支持在检索日志时查看指定日志在日志源文件中的上下文信息。

2022-07-11

全部

• 上下文查询
• DescribeLogContext

HashKey 路由 Shard

通过 LogCollector 采集的日志数据也支持指定 HashKey，LogCollector 会将数据写入到包含该 Key 值的 Shard中。

2022-07-11

全部

• 单行全文模式
• CreateRule

时序图

日志服务折线图支持 X 轴时序模式，用于时序分析场景。

2022-07-11

全部

折线图

自定义字段配置

支持创建多个自定义的字段配置，指定在日志检索页面中显示和隐藏的字段。

2022-07-11

全部

字段配置

配额管理

日志项目、日志主题和日志分区数量支持通过配额平台申请更大配额。

2022-07-11

全部

使用限制

解析采集路径

支持根据正则式解析采集路径，并将解析出的采集路径字段记录在日志元数据中。

2022-06-07

全部

单行全文模式

预留字段支持 SQL 分析

__source__ 等预留字段支持 SQL 分析，存量日志主题需要关闭并重新开启索引以使用此功能。

2022-06-07

全部

使用限制

Go SDK 和 Node.js SDK 发布

正式发布火山引擎日志服务 Go SDK 和 Node.js SDK，欢迎体验。

2022-06-07

广州

• Go SDK
• Node.js SDK

产品正式发布

日志服务产品正式对外发布。

2022-05-12

全部

相关文档均首次发布。