查询相关## 充分利用缓存* **分片查询缓存(Shard Request Cache)**ES 层面的缓存实现,封装在 IndicesRequestCache 类中。缓存的 Key 是整个客户端请求,缓存内容为单个分片的查询结果。**主要作用是对聚合的缓... 避免使用 Wildcard 进行中缀模糊查询。**ES 官方文档并不推荐使用 Wildcard 来进行中缀模糊的查询,原因在于 ES 内部为了加速这种带有通配符查询,会将输入的字符串 Pattern 构建成一个 DFA (Deterministic Finit...
即不对日志内容进行结构化处理。本文介绍创建单行全文模式采集配置的操作步骤。 背景信息单行文本日志表示一行日志即为一条日志,换行符(\n)为一条日志结束的标识符。如果无需对日志内容进行结构化处理、无需提取日志字段进行精细化分析查询,建议使用单行全文模式。单行全文模式下,日志服务会在 LogCollector 采集到的日志数据中增加以下元数据字段。 预留字段 说明 __content__ 该字段封装了原始日志内容。该字段未预置索引,若...
查询日志字段,例如使用>等范围操作符语法进行检索。 double 适用于数值类型的字段,例如浮点型(64 bit)。字段类型设置为 double 之后,您可以通过数值范围查询日志字段,例如使用>等范围操作符语法进行检索。 json 适用于 JSON 类型的字段。日志服务支持对标准 JSON 类型字段建立索引,即字段类型设置为 json 后,可以设置其展开后每个子字段的数据类型。 text 类型text 类型适用于字符串类型的字段。 可以使用通配符(*或?)对该...
LogCollector 采集容器标准输出时,支持单行、多行等多种采集配置,除各种采集配置默认附加的预留字段之外,日志服务还会对 LogCollector 采集到的容器标准输出添加以下预留字段,并默认为其创建索引。 预留字段 说明... 采集类型 选择K8s 容器标准输出。 采集信息 按需选择采集的内容。支持以下采集方式: 仅采集标准输出 - stdout。 仅采集标准错误 - stderr。 同时采集标准输出 - stdout和标准错误 - stderr。 (可选)启用通用...
设置字段的索引数据类型为 double 之后,您可以通过数值范围查询日志字段,例如使用>等范围操作符语法进行检索。 json 适用于 JSON 类型的字段。日志服务支持对标准 JSON 类型字段建立索引,设置字段的索引数据类型为 json 后,您还可以设置其展开后每个子字段的索引数据类型。 text 类型text 类型适用于字符串类型的字段。 设置字段的索引数据类型为 text 后,支持使用通配符*或?对该字段进行模糊检索。 设置字段的索引数据类型为...
在左侧导航栏中单击日志接入。 在LogCollector日志采集区域选择日志采集的模式。 填写初始配置。选择日志主题。选择日志主题,采集到的日志数据会存储在指定主题中,以日志主题为维度进行查询和分析。 如果没有合适... 采集路径可以指定完整的目录和文件名,也可以通过通配符模糊匹配。 说明 默认情况下,一个日志文件只能被采集到一个日志主题中,且只能匹配一个采集配置,如果多个采集配置重复采集同一个文件,则以最新的采集配置规则为...
通配符,例如Describe*指代所有以Describe开头的 API。 云服务器 ECS功能 API 说明 实例 Describe* 获取实例信息。 获取云服务器提供的所有实例规格的信息。 获取云服务器提供的实例规格族信息。 查询可用区中... 日志主题管理 Describe* 查询日志主题信息。 CreateTopic 创建日志主题。 DeleteTopic 删除日志主题。 分区管理 Describe* 查询日志主题的分区列表。 索引管理 Describe* 查询索引配置信息。 Creat...
time_local 访问时间和时区,服务器本地时间。 request_method HTTP 请求方法。 request_uri 请求的访问地址。 protocol 协议。 request 请求的 URI 和 HTTP 协议。 request_time 整个请求的总时间,单... 采集路径可以指定完整的目录和文件名,也可以通过通配符模糊匹配。 说明 默认情况下,一个日志文件只能被采集到一个日志主题中,且只能匹配一个采集配置,如果多个采集配置重复采集同一个文件,则以最新的采集配置规则为...
opendistro-ngram-type 是云搜索服务的一个系统内置插件。在模糊搜索的场景中,推荐使用 Ngram 通配符查询,可以在字符串的任意位置查询到匹配项。本文介绍 NGram-Type 插件的简单使用方式。 前提条件opendistro-ngr... { "type": "ngram", "ignore_above":300, "null_value": "value1" } } }}Type:必填,设置字段类型为 ngram。 ignore_above:可选,字段的最大字符长度,超过该长度的字段将不会索引。示...
如果无需对多行日志内容进行结构化处理、无需提取日志字段进行精细化分析查询,建议使用多行全文模式。日志服务会在 LogCollector 采集到的日志数据中增加以下元数据字段。 预留字段 说明 __content__ 该字段封装了原始日志内容。该字段未预置索引,若需检索日志,需要手动开启全文索引。 __path__ 原始日志文件目录及文件名。 __source__ 原始日志文件所在服务器的 IP 地址。 前提条件已创建日志项目和日志主题。详细操作...