日志服务器搭建及配置
社区干货
云原生环境下的日志采集、存储、分析实践
日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,就需要一套统一的日志系统,对日志进行采集、加工、存储、查询、分析、可视化、告警以及消费投递,将日志的生命周期进行闭环。## Kubernetes 下日志采集的开源自建方案### 开源自建火山引擎早期为了快速上线业务,各团队基于开源项目搭建了自己的日志系...
云原生环境下的日志采集、存储、分析实践
日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,就需要一套统一的日志系统,对日志进行采集、加工、存储、查询、分析、可视化、告警以及消费投递,将日志的生命周期进行闭环。## Kubernetes 下日志采集的开源自建方案### 开源自建火山引擎早期为了快速上线业务,各团队基于开源项目搭建了自己的日志系...
云原生环境下的日志采集、存储、分析实践
日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,就需要一套统一的日志系统,对日志进行采集、加工、存储、查询、分析、可视化、告警以及消费投递,将日志的生命周期进行闭环。 Kubernetes 下日志采集的开源自建方案 **开源自建**火山引擎早期为了快速上线业务,各团队基于开源项目搭建了自己的日志系统,以满足...
容器PHP程序标准输出到日志服务
# 问题描述日志采集模式是标准输出stdout,nginx日志配置输出stdout可以正常接收,容器中PHP程序输出日志到/dev/stdout,日志服务无法收到# 问题原因1. 在LNMP容器中,会只收集1号进程的标准输出,日志服务将1号进程的标准输出拉取日志中记录,2. 用户启动的php程序无法将日志写入到1号进程,fopen('/proc/self/fd/2', "w")动作会报错failed to open stream: Permission denied
特惠活动
日志服务器搭建及配置-优选内容
日志服务器搭建及配置-相关内容
日志配置(Java SDK)
会在以下位置打印日志。 计算请求的签名时,打印 canonical request 日志,日志级别为 DEBUG。 计算请求的签名时,打印 string to sign 日志,日志级别为 DEBUG。 请求成功时,打印 HTTP 状态码、requestId、请求总耗时等日志,日志级别为 INFO。 客户端请求失败时(非服务端返回 TosServerException),打印失败信息,日志级别为 INFO。 请求成功/失败时,打印请求链路耗时信息,包括 DNS 解析、连接建立、发送/接收请求等,日志级别为 DEBUG...
管理实时日志(Go SDK)
并已授权 TOS 访问火山引擎日志服务 TLS。 开启日志分析功能后,日志服务会自动创建日志项目及主题存放 TOS 的相关日志。 示例代码以下代码用于设置桶的实时日志配置规则。 go package mainimport ( "context" "fmt" "github.com/volcengine/ve-tos-golang-sdk/v2/tos")func checkErr(err error) { if err != nil { if serverErr, ok := err.(*tos.TosServerError); ok { fmt.Println("Error:", serverErr...
日志管理
API 网关基于火山引擎的 日志服务 TLS,为您提供持久化存储的用户访问日志,便于业务观测客户端、网关、后端服务的行为,满足排障、审计等需求。本文为您介绍如何投递、查询网关日志,以及日志的投递字段。 开启日志投递将网关日志投递至日志服务 TLS,以达到持久化存储的目的。 注意 2023年12月15日00:00:00 前创建的网关实例不支持自助开启日志投递。如有投递日志需求,请 提交工单申请。 开启日志投递前,请确认已开通火山引擎日志服...
配置索引
请参考日志服务架构升级通知。 前提条件已创建日志项目和日志主题。详细说明请参考日志项目和日志主题。 推荐先通过 LogCollector 或其他方式采集到日志数据,再配置索引。详细说明请参考采集日志数据。 注意事项分类 注意事项 开启索引 全文索引与键值索引至少开启一项,索引关闭时采集的日志数据将无法被检索。 分词 日志服务单词存在 32766 字符限制,对于全文或单词过长的日志,如果未设置分词符,可能导致日志被丢弃。 ...
配置索引
请参考日志服务架构升级通知。 前提条件已创建日志项目和日志主题。详细说明请参考日志项目和日志主题。 推荐先通过 LogCollector 或其他方式采集到日志数据,再配置索引。详细说明请参考采集日志数据。 注意事项分类 注意事项 开启索引 全文索引与键值索引至少开启一项,索引关闭时采集的日志数据将无法被检索。 分词 日志服务单词存在 32766 字符限制,对于全文或单词过长的日志,如果未设置分词符,可能导致日志被丢弃。 ...
配置索引
请参考日志服务架构升级通知。 前提条件已创建日志项目和日志主题。详细说明请参考日志项目和日志主题。 推荐先通过 LogCollector 或其他方式采集到日志数据,再配置索引。详细说明请参考采集日志数据。 注意事项分类 注意事项 开启索引 全文索引与键值索引至少开启一项,索引关闭时采集的日志数据将无法被检索。 分词 日志服务单词存在 32766 字符限制,对于全文或单词过长的日志,如果未设置分词符,可能导致日志被丢弃。 ...
什么是日志服务
日志服务提供全面的数据接入方式、稳定的数据存储能力、强大的数据检索分析能力、丰富的加工函数和统计图表、灵活的消费与投递机制以及一站式告警能力,能够实现数十种数据源的统一接入、低成本稳定存储、百亿级数据秒级查询、数据规整和脱敏、与大数据平台等下游系统无缝对接以及异常数据秒级告警。基于上述能力,日志服务主要适用于如下场景。 业务运维监控:企业基于日志服务搭建日志平台,实现业务监控、运维与运营。 数据统计分...
通过日志服务采集注册节点的日志
本文为您介绍如何将注册节点日志采集到日志服务。 说明 【邀测·申请试用】:云原生观测功能和注册节点日志采集组件目前处于邀测阶段,如需使用,请提交申请。 背景信息分布式云原生平台提供的注册节点服务是火山引擎打造的标准、成熟、稳定的全新升级节点形态,主要用于解决大量闲散计算资源无法高效利用和运维的痛点。用户仅需运维本地服务器,本地搭建/运维 Kubernetes 集群由注册节点服务统一运维管控,帮助用户解决分布式基础设施...
配置日志外发
在日志审计页面,支持将日志外发至 syslog 或者 elasticsearch 服务上进行存储。本文介绍如何配置日志外发。 操作步骤登录飞连管理后台。 在左侧导航栏,选择系统设置 > 日志审计。 在日志审计页面右上角,单击日志外发配置。 在日志外发配置界面,完成以下配置,并单击确定。配置项说明: 配置项 说明 外发协议类型 可选 syslog 或者 elasticsearch。 外发日志类型 在需要外发的日志类型前,选中复选框,然后配置外发信息。 如果...
