日志服务器地址
社区干货
云原生环境下的日志采集、存储、分析实践
火山引擎日志系统架构师谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括... 创建日志采集配置;4. LogCollector 定期请求 TLS Server,获取新的采集配置并进行热加载;5. LogCollector 根据采集配置采集各个容器上的标准输出或文本日志;6. LogCollector 将采集到的日志发送给 TLS Server。...
云原生环境下的日志采集、存储、分析实践
火山引擎日志系统架构师**谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包... 创建日志采集配置;4. LogCollector 定期请求 TLS Server,获取新的采集配置并进行热加载; 5. LogCollector 根据采集配置采集各个容器上的标准输出或文本日志;6. LogCollector 将采集到的日志发送给 TLS Server。...
云原生环境下的日志采集、存储、分析实践
谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业... 6. LogCollector 将采集到的日志发送给 TLS Server。#### 适合大规模、多租户场景的客户端2.浏览器输入地址访...
特惠活动
日志服务器地址-优选内容
日志服务器地址-相关内容
使用 Web Tracking 采集日志
日志服务通过 Web Tracking 功能提供轻量级的日志采集方案,通过 HTTP Get 请求将数据上传到日志服务的服务端,支持浏览器、JS、Image 等标签埋点,适用于各种无需任何验证的静态网页、广告投放、宣传资料和移动端数据采集。通过 WebTracking 接口写入日志数据时,日志服务默认在原始日志中增加以下预留字段: 预留字段 说明 clientAddr 通过 Webtracking 方式写入日志时,记录日志数据源端的 IP 地址及端口号。 User-Agent 访问终...
【产品变更】弹性容器日志键值索引字段变更说明
2023 年 3 月 28 日 14:00 开始升级 容器日志键值索引字段变更详情说明 VCI Pod 的容器日志键值索引字段,会按如下说明变更。VKE Pod 的容器日志键值索引字段详情,请参见 VKE【产品变更】。 容器日志键值索引字段 有无变化 字段说明 旧版本 新版本 __path__ __path__ 无 日志文件路径。 cluster_id cluster_id 无 Pod(容器组)所属集群 ID。 __source__ __source__ 无 日志源服务器的 IP 地址。 host_ip host_ip 无 Pod 所属主...
查看访问日志
访问日志字段说明字段名 数据类型 说明 client_ecs_ip String DNS 查询请求所包含的 ECS 协议信息中的客户端 IP 地址。如果 DNS 查询请求中不包含 ECS 协议信息,该字段是 client_ip 字段的值。 client_ecs_ip_info Object DNS 查询请求所包含的 ECS 协议信息中的客户端 IP 所在的线路。如果 DNS 查询请求中不包含 ECS 协议信息,该字段一般是 Local DNS 服务器的出口 IP 地址所在的线路。参见 client_ecs_ip_info 对象字段说明。...
【产品变更】容器日志键值索引字段变更说明
日志相关功能。 log-collector 组件升级记录,请参见 log-collector。 容器日志键值索引字段变更详情说明 VKE Pod 的容器日志键值索引字段,会按如下说明变更。VCI Pod 的容器日志键值索引字段详情,请参见 VCI【产品变更】。 容器日志键值索引字段 有无变化 字段说明 旧版本(v1.2.0 之前版本) 新版本(v1.2.0 以及后续版本) cluster_id cluster_id 无 Pod 所属集群 ID。 __source__ __source__ 无 日志源服务器的 IP 地址。 host_...
查询离线日志下载地址
日志数据按小时整点打包,打包后的日志大约在 30 分钟后可以被下载。但由于网络延时等原因,打包后日志包内数据可能会不断追加,一般在 24 小时左右趋于稳定。例如 2021/07/07 11:00:00-2021/07/07 11:59:59 的数据在 2021/07/07/ 12:00:00 打包,在 2021/07/07/ 12:30:00 后可提供下载。 请求说明接口名称:DescribeImageVolcCdnAccessLog 请求方式:POST 接口地址示例:https://imagex.volcengineapi.com/?Action=DescribeImageVolcC...
使用 LogCollector 插件处理日志
可以通过各种采集模式对原始日志的外层结构进行初次拆分和解析,再通过 LogCollector 插件指定字段进行再次拆分和解析。支持添加一个或多个插件,LogCollector 将按照填写插件配置的顺序依次执行。 前提条件已创建日志项目和日志主题。详细操作步骤请参考创建日志项目和创建日志主题。 已创建机器组,并确认机器组的服务器心跳状态正常。详细操作步骤请参考创建机器组(IP 地址)或创建机器组(机器标识)。 已在数据源服务器上安装了最...
基于 Flume 上传日志
日志服务所需要的参数和影响数据上传性能的参数,其他参数说明请参考 Kafka Sink。 说明 本文以 Flume 1.9.0 版本为例,不同 Flume 版本的配置参数可能不同,详细信息请参考Flume 官网文档。 参数名称 是否必选 示例值 描述 type 是 org.apache.flume.sink.kafka.KafkaSink。 必须配置为 org.apache.flume.sink.kafka.KafkaSink。 kafka.bootstrap.servers 是 tls-cn-beijing.volces.com:9094 初始连接的集群地址,格式为...
创建机器组(IP地址)
本文档为您介绍创建 IP 地址类型机器组的操作步骤。 前提条件已准备一台作为日志源的服务器。如果服务器是火山引擎 ECS,则必须和日志项目属于同一地域。 已在服务器上成功安装了最新版本的 LogCollector。详细说明请参考安装 LogCollector。 注意事项每个火山引擎主账号下,每个地域最多可以创建 200 个机器组,每个机器组中最多可添加 200 个 IP 地址。 目前仅支持 Linux 服务器。 机器组中不同服务器通过 IP 地址进行标识和区分...
读取日志服务 TLS 数据写入云搜索服务 ESCloud
实现读取 TLS 主题中的日志数据,然后写入到 ESCloud 索引中。 流程介绍 准备数据源 TLS 主题。您需要在日志服务控制台创建一个日志项目,然后创建一个日志主题,并开通 Kafka 协议消费。还需要获取项目的访问地址、项... 'properties.bootstrap.servers' = 'tls-cn-beijing.ivolces.com:9094', --TLS 日志项目接入点地址,作为消息接收端时端口固定为 9094。 'format' = 'json', 'properties.enable.idempotence' = 'false', -...
