主要分享了火山引擎 TLS 日志服务的架构实现、设计优化以及实践案例。作者:刘卯银|火山引擎日志系统架构师谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,就需要一套统一的日志系统,对日志进行采集、...
> 本文整理自火山引擎开发者社区 Meetup 第八期演讲,主要分享了火山引擎 TLS 日志服务的架构实现、设计优化以及实践案例。**作者:刘卯银|火山引擎日志系统架构师**谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日...
作者:刘卯银|火山引擎日志系统架构师> 本文整理自火山引擎开发者社区 Meetup 第八期演讲,主要介绍了火山引擎 TLS 日志服务的架构实现、设计优化以及实践案例。谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,...
# 前言对于存储在云搜索中的日志类型,指标类型的数据有一个共同的特点:索引中的数据随着时间的流逝,索引大小不断增长,相反的,数据的价值逐渐降低,我们希望可以实现一种自动化的管理操作,定期关闭或删除索引,以此来减少空间占用,降低成本。从 ElasticSearch 6.6开始,Elasticsearch 提供索引生命周期管理功能,索引生命周期管理可以通过 API 或者 kibana 界面配置,从而实现自动的索引状态管理。# 如何使用### 1. 创建 ISM 策略...
App端监控最多保存90天监控数据,将崩溃日志和回捞日志接入日志服务,可以查询更长时间的日志,还可以与TLS日志服务中其他类型的日志进行串联和加工,做更深层次的日志分析。 前提条件开通日志服务,创建日志项目和日志主题。详情请参见日志项目和日志主题。 步骤一:新建账号并授权主账号和子账号都能查看云产品联动的入口,主账号或者子账号首次进入云产品联动时,界面会提示开通TLS服务,按照提示开通后该主账号或者子账号会拥有TLSFul...
主要分享了火山引擎 TLS 日志服务的架构实现、设计优化以及实践案例。作者:刘卯银|火山引擎日志系统架构师谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日志,就需要一套统一的日志系统,对日志进行采集、...
> 本文整理自火山引擎开发者社区 Meetup 第八期演讲,主要分享了火山引擎 TLS 日志服务的架构实现、设计优化以及实践案例。**作者:刘卯银|火山引擎日志系统架构师**谈到日志系统,首先要从日志说起,日志在 IT 系统里无处不在,也是 IT系统大数据的关键来源。日志的种类和样式非常多,以在线教育系统为例,日志包括客户端日志、服务端日志。服务端日志又包括业务的运行/运维日志以及业务使用的云产品产生的日志。要管理诸多类型的日...
日志主题的内网读流量、公网读流量、数据加工流量、数据投递流量等会正常计费,由日志服务单独收取。计费详情,请参见日志服务计费概述。 访问日志字段说明名称 示例 说明 LogType tos_access_log 日志类型,固... CostTime 12 TOS 服务器处理本次请求所花的时间,单位:毫秒。 UserAgent curl/7.15.5 HTTP 的 User-Agent 头。 Referer *.example.com 请求的 HTTP Referer。 OwnerId 200000**** TOS Bucket 拥有者的...
调用 DescribeLiveLogData 接口,查询指定时间范围内指定日志类型的离线日志文件及下载信息。 注意事项使用限制:支持查询指定域名(包含已删除域名)下产生的日志文件信息。 支持查询最近 31 天内产生的日志数据。 支... 服务端 SDK视频直播提供了配套的开发工具集 SDK,支持多种编程语言,帮助您更方便的调用 API。 SDK Link for Java SDK Link for Golang SDK Link for Python SDK Link for PHP
本文介绍如何配置日志外发。 操作步骤登录飞连管理后台。 在左侧导航栏,选择系统设置 > 日志审计。 在日志审计页面右上角,单击日志外发配置。 在日志外发配置界面,完成以下配置,并单击确定。配置项说明: 配置项 说明 外发协议类型 可选 syslog 或者 elasticsearch。 外发日志类型 在需要外发的日志类型前,选中复选框,然后配置外发信息。 如果外发协议选择 syslog,则需要配置地址,该地址是指向 syslog 程序所在服务器的 T...
高级网络威胁检测系统详细记录了网络流量日志和攻击告警日志。日志中包含多个字段,您可以根据需要选取相应的日志字段进行查询分析。 日志字段 含义及说明 取值样例 timestamp 日志上报时间 1678293146 log_type 日志类型,包含session(互联网边界流量日志) 、alert(互联网边界告警日志) 、vpc_alert(VPC间告警日志) session src_ip 访问源IP 1.1.1.1 src_port 访问源端口 35678 dst_ip 访问目的IP 1.1.1.2 dst_port 访问目的端口 ...
前提条件已创建日志项目和日志主题。详细操作步骤请参考创建日志项目和创建日志主题。 已创建机器组,并确认机器组的服务器心跳状态正常。详细操作步骤请参考创建机器组(IP 地址)或创建机器组(机器标识)。 已在数据... 在顶部导航栏中选择日志服务所在的地域。 在左侧导航栏中选择日志服务 > 日志项目管理,并单击指定的日志项目名称。 在左侧导航栏中单击日志接入。 在LogCollector日志采集区域,根据业务需求及日志类型、结构,选择...
自定义事件和自定义日志是APMPlus PC提供的埋点功能,支持多进程多实例调用。自定义事件记录数值型数据,如cpu使用率指标,启动耗时指标等等。自定义日志记录字符串型数据,一般用于记录用户行为,产品行为,用于单点追查... 可在日志查询中查看。 调用WriteXXX()方法记录Category、Metric、Extra数据。 数据 说明 示例 Category (optional)可枚举数据类型。 key:value中的value必须是字符串类型。 用于过滤metrics数据。主要用于指标...