跨平台日志服务器
社区干货
干货 | 提速 10 倍!源自字节跳动的新型云原生 Spark History Server正式发布
事件日志包含太多冗余信息,长时间运行的应用程序可能会带来巨大的事件日志,这可能需要大量维护并且需要很长时间才能重构 UI 数据从而提供服务。在大规模生产中,作业的数量可能很大,会给历史服务器带来沉重的负担。接下来,火山引擎 LAS 团队将向大家详细介绍字节跳动内部是怎么基于 UIMeta 实现海量数据业务的平稳和高效运转,让技术驱动业务不断发展。# **1. 业务背景**## 1.1 开源 Spark History Server 架构为了能够更好理...
干货 | 提速 10 倍!源自字节跳动的新型云原生 Spark History Server正式发布
事件日志包含太多冗余信息,长时间运行的应用程序可能会带来巨大的事件日志,这可能需要大量维护并且需要很长时间才能重构 UI 数据从而提供服务。在大规模生产中,作业的数量可能很大,会给历史服务器带来沉重的负担。接下来,火山引擎 LAS 团队将向大家详细介绍字节跳动内部是怎么基于 UIMeta 实现海量数据业务的平稳和高效运转,让技术驱动业务不断发展。 是指介于`web-app`、`native-app`这两者之间的app,兼具“`Native App`良好用户交互体验的优势”和“Web App跨平台开发的优势”。简单来说, `Hybrid App` 就是套壳 App,整个 App 还是原生的,也需要下载安装到手机,但是 App 里面打开的页面既可以是 Web 的,又可以是原生的。H5 页面会跑在 Native 的一个叫做 `We...
硬核干货!一文掌握 binlog 、redo log、undo log|社区征文
称为**重做日志** ,当 MySQL 服务器意外崩溃或者宕机后,**保证已经提交的事务**持久化到磁盘中(**持久性**)。它能保证对于已经 COMMIT 的事务产生的数据变更,即使是系统宕机崩溃也可以通过它来进行数据重做,达到数据的持久性,一旦事务成功提交后,不会因为异常、宕机而造成数据错误或丢失。### 2.2 redo log 数据格式redo log 包括两部分:- 内存中的**日志缓冲**(redo log buffer)- 内存层面,默认 16M,通过 innodb_l...
特惠活动
跨平台日志服务器-优选内容
跨平台日志服务器-相关内容
投递事件监控信息至日志服务
本文主要介绍如何将火山引擎账号下实例触发的事件信息投递至日志服务中,方便您使用日志服务进行分析。 什么是日志服务日志服务(TLS)是火山引擎提供的针对日志类数据的一站式服务,提供日志采集、海量存储、检索分析、监控告警、数据可视化等功能,适用于应用运维、服务监控、等保合规等场景,全方位提升研发与运维效率。 操作场景当您的火山引擎账号下拥有多台云服务器实例时,将实例运行时触发的事件(例如:系统故障导致实例重新部署...
【产品变更】弹性容器日志键值索引字段变更说明
2023 年 3 月 28 日 14:00 开始升级 容器日志键值索引字段变更详情说明 VCI Pod 的容器日志键值索引字段,会按如下说明变更。VKE Pod 的容器日志键值索引字段详情,请参见 VKE【产品变更】。 容器日志键值索引字段 有无变化 字段说明 旧版本 新版本 __path__ __path__ 无 日志文件路径。 cluster_id cluster_id 无 Pod(容器组)所属集群 ID。 __source__ __source__ 无 日志源服务器的 IP 地址。 host_ip host_ip 无 Pod 所属主...
使用 Kafka 协议上传日志
日志服务支持通过 Kafka 协议上传日志数据到服务端,即可以使用 Kafka Producer SDK 来采集日志数据,并通过 Kafka 协议上传到日志服务。本文介绍通过 Kafka 协议将日志上传到日志服务的操作步骤。 背景信息Kafka 作为高吞吐量的消息中间件,在多种自建场景的日志采集方案中被用于消息管道。例如在日志源服务器中的开源采集工具采集日志,或通过 Producer 直接写入日志数据,再通过消费管道供下游应用进行消费。日志服务支持通过 Kafk...
通过访问日志定位异常后端服务器
本文将介绍如何通过七层监听器的访问日志功能定位异常的后端服务器。 使用场景通过为七层监听器配置访问日志功能,可查看访问该七层监听器的详细日志。通过分析日志文件中的响应状态码,可快速定位异常的后端服务器。 前提条件已完成七层负载均衡clb-test的配置,详细操作可参见配置七层负载均衡。 已开启对象存储服务(存储桶名称为bucket-test),详细操作可参见开始使用对象存储。 已完成负载均衡服务关联角色ServiceRoleForClbLogD...
云产品日志采集
日志服务支持采集容器服务、对象存储等多种云产品的日志数据,例如容器日志、访问日志等。您可以在日志服务中查看采集到的日志数据,通过查询分析功能进行实时的日志检索与数据统计,通过仪表盘功能构建实时数据大盘,... 日志 视频云 veImageX 分发日志 veImageX 分发日志 研发中台 函数服务 veFaaS 函数运行日志 veFaaS 函数运行日志 服务网格 AMS 服务网格访问日志 AMS 访问日志 弹性计算 云服务器 ECS 全量日志 相关...
访问日志投递TLS
ALB 支持将访问日志投递 TLS 功能。相比于投递 TOS,访问日志投递 TLS 实时性更高,无需您解压日志包,可直接查看分析日志条目。本文介绍如何在 ALB 控制台开启访问日志投递TLS 功能,查看或分析 ALB 实例的访问日志。... 代理服务器1-IP, 代理服务器2-IP, ... [192.168.11.1] request_length 表示请求本身的字节数。 [19] ssl_protocol 表示请求使用的 SSL 协议的版本。如果是 HTTP 请求,则不包含该字段。 [TLSv1.2] ssl_cip...
【产品变更】容器日志键值索引字段变更说明
日志相关功能。 log-collector 组件升级记录,请参见 log-collector。 容器日志键值索引字段变更详情说明 VKE Pod 的容器日志键值索引字段,会按如下说明变更。VCI Pod 的容器日志键值索引字段详情,请参见 VCI【产品变更】。 容器日志键值索引字段 有无变化 字段说明 旧版本(v1.2.0 之前版本) 新版本(v1.2.0 以及后续版本) cluster_id cluster_id 无 Pod 所属集群 ID。 __source__ __source__ 无 日志源服务器的 IP 地址。 host_...
上下文查询
限制说明仅 1.0.6 及后续版本的 LogCollector 采集到的日志支持上下文查询,通过 SDK 调用 PutLogs 接口等其他方式上传的日志数据不支持上下文查询。通过 LogCollector 采集日志的操作步骤请参考采集文本日志。 使用上下文查询功能之前,需要先为日志配置索引。配置索引的操作步骤请参考配置索引。 背景信息通过日志服务检索功能查询日志时,往往需要查看指定服务器、指定文件中某条日志的上下文信息。例如在访问失败、异常事件等...
配置日志外发
本文介绍如何配置日志外发。 操作步骤登录飞连管理后台。 在左侧导航栏,选择系统设置 > 日志审计。 在日志审计页面右上角,单击日志外发配置。 在日志外发配置界面,完成以下配置,并单击确定。配置项说明: 配置项 说明 外发协议类型 可选 syslog 或者 elasticsearch。 外发日志类型 在需要外发的日志类型前,选中复选框,然后配置外发信息。 如果外发协议选择 syslog,则需要配置地址,该地址是指向 syslog 程序所在服务器的 T...
