数据库并发队列缓存
社区干货
掘地三尺,搞定 Redis 与 MySQL 数据一致性问题 | 社区征文
Redis 拥有高性能的数据读写功能,被我们广泛用在缓存场景,一是能提高业务系统的性能,二是为数据库抵挡了高并发的流量请求,[点我 -> 解密 Redis 为什么这么快的秘密](https://mp.weixin.qq.com/s/z4VjDaDDbspFz1rIBwazIA)。把 Redis 作为缓存组件,需要防止出现以下的一些问题,否则可能会造成生产事故。- [Redis 缓存满了怎么办?](https://mp.weixin.qq.com/s/H7BN-gCvbJ2S2DT31XMzzQ)- [缓存穿透、缓存击穿、缓存雪崩如何解决...
MySQL "双1" 参数详解
# 前言MySQL 数据库中有两个非常重要的参数,一个是**innodb_flush_log_at_trx_commit**,另外一个是**sync_binlog**,这两个参数称之为双一参数,前者控制了redo log 的刷盘机制,后者控制了binlog 的刷盘机制。这... 1: 每次事务提交都会进行log buffer的写入log file(数据库),并且flush到磁盘中(系统)- 2:每次事务提交都会进行log buffer的写入到file system buffer(系统缓存),但是flush操作是每秒进行一次(系统) 如下图:...
MySQL "双1" 参数详解
# 前言MySQL 数据库中有两个非常重要的参数,一个是**innodb_flush_log_at_trx_commit**,另外一个是**sync_binlog**,这两个参数称之为双一参数,前者控制了redo log 的刷盘机制,后者控制了binlog 的刷盘机制。这两... * N:binlog 将在 N 次 sync 队列形成后进行 sync 刷盘。# innodb_flush_log_at_trx_commit* 0 :log buffer每秒写入log file一次(数据库),并且logfile的磁盘flush刷新同步进行(系统),这种情况下,log buffer仅仅...
火山引擎上云迁移指南(二):迁移实施
> **王志雷**,火山引擎存储&数据库解决方案架构师,专注于存储&数据库产品的解决方案规划、设计和拓展工作。 > **贾伟力**,火山引擎存储&数据库解决方案架构师,专注于存储&数据库产品的解决方案规划、设计和拓展... rsync迁移受限于单并发,导致在小文件场景迁移的带宽较小,下面介绍两款基于rsync拆分目录的开源软件(fpsync和msrsync)和rclone工具,能够提高迁移并发度,从而提高迁移的带宽。这几款工具适合在火山引擎VPC网络场景的...
特惠活动
数据库并发队列缓存-优选内容
数据库并发队列缓存-相关内容
MySQL "双1" 参数详解
# 前言MySQL 数据库中有两个非常重要的参数,一个是**innodb_flush_log_at_trx_commit**,另外一个是**sync_binlog**,这两个参数称之为双一参数,前者控制了redo log 的刷盘机制,后者控制了binlog 的刷盘机制。这... 1: 每次事务提交都会进行log buffer的写入log file(数据库),并且flush到磁盘中(系统)- 2:每次事务提交都会进行log buffer的写入到file system buffer(系统缓存),但是flush操作是每秒进行一次(系统) 如下图:...
性能白皮书
本文介绍以 Memtier-benchmark 工具测试缓存数据库 Redis 版实例性能的详细方法和测试结果,您可以按照本文介绍自行测试对比,快速了解数据库系统的性能。 测试环境测试所用的 ECS 实例和缓存数据库 Redis 版实例均在同一地域、同一可用区。本测试中为华北 2(北京)可用区 A。 网络类型均为私有网络 VPC。 说明 ECS 实例和 Redis 实例需保证在同一个 VPC中。 测试所用缓存数据库 Redis 版实例 数据库版本为 Redis 5.0。 实例类型...
火山引擎上云迁移指南(二):迁移实施
> **王志雷**,火山引擎存储&数据库解决方案架构师,专注于存储&数据库产品的解决方案规划、设计和拓展工作。 > **贾伟力**,火山引擎存储&数据库解决方案架构师,专注于存储&数据库产品的解决方案规划、设计和拓展... rsync迁移受限于单并发,导致在小文件场景迁移的带宽较小,下面介绍两款基于rsync拆分目录的开源软件(fpsync和msrsync)和rclone工具,能够提高迁移并发度,从而提高迁移的带宽。这几款工具适合在火山引擎VPC网络场景的...
业务代码开发建议
本文介绍在使用缓存数据库 Redis 版进行业务代码开发时,需要注意的使用建议。 建议级别 说明 强烈建议 将 Redis 仅作为缓存使用。原因在于 Redis 的持久化和主从复制都是异步进行的,不太适用于对数据可靠性和一致... 也受限于 Socket 缓冲区和 Redis 请求队列大小,命令越多越容易引起超时或阻塞,从而影响集群稳定性。 避免单个 Key 长度超过 128Byte,Value 超过 10KiB。 避免 SCAN、ISCAN、HSCAN、SSCAN、ZSCAN 等命令的限制 COUN...
查询慢日志
功能介绍缓存数据库 Redis 版会将执行时长超过指定阈值的请求记录在慢日志中,您可以在 Redis 控制台上中查看数据节点(即 Server 节点)和代理节点(即 Proxy 节点)的慢日志详情。其中: 数据节点慢日志 数据节点慢日志中展示的执行时长仅包含命令在数据节点中的执行时间。数据节点与代理或客户端的通信时间,以及命令在单线程队列上的排队延迟等时间均未包含在该执行时长中。 缓存数据库 Redis 版支持自定义数据节点的慢日志相关参数...
核心组件和产品架构
本文介绍缓存数据库 Redis 版的核心组件和产品架构。 核心组件数据节点数据节点是构建缓存数据库 Redis 版实例的最小单位,每个实例至少含有 1 个数据节点。若每个分片中仅包含 1 个节点,该实例无法提供数据持久化和... 产品架构缓存数据库 Redis 版当前支持如下启用和不启用分片集群两种架构。 启用分片集群启用分片集群的 Redis 实例可以通过分片化分区来增加缓存的容量和并发连接数,Redis 实例类型不同,架构部署和支持的能力也不...
消息队列选型之 Kafka vs RabbitMQ
消息队列可以作为一个缓冲层,将大量的请求消息存储在队列中,然后按照系统处理能力逐渐消费这些消息,平稳地处理高峰流量。