数据库第二单元思维导图
社区干货
一文了解数据库事务和隔离级别 | 社区征文
一个事务必须被视为一个不可分割的最小单元,整个事务中的所有操作要么全部提交成功,要么全部失败,对于一个事务来说,不能只执行其中的一部分操作。比如: A 给 B 转钱,A 扣除 500 元 ,B 增加 500 元整个事务的操作要么全部成功,要么全部失败,不能出现 A 扣钱,但是 B 不增加的情况。如果原子性不能保证,就会很自然的出现一致性问题。### 2.2 一致性一致性是指事务将数据库从一种一致性转换到另外一种一致性状态,在事务开始之...
mysql事物存储过程
MySQL 数据库中的事务和存储过程是两个不同的概念,我将会分别解释这两个概念,然后提供一个简单的存储过程示例。1. **事务(Transaction)**:数据库事务是指一个或一组SQL语句的逻辑单元,这个逻辑单元中的操作要么全部执行,要么全部不执行。如果在执行过程中出现错误,那么事务将会回滚(Rollback),即撤销已经执行的操作;如果所有操作都成功执行,那么事务就会被提交(Commit),数据会被永久保存在数据库中。事务的主要特点是可以保证在...
分布式数据库TiDB的设计和架构
[picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/125153dda2484d44bd7a1cba22f0c5e1~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1715012438&x-signature=C5J1sDZIRAg3GnPaDoXuUO12fUA%3D)第十二期技术夜校分享嘉宾是DBA大咖——Xiaoyu他拥有10年+互联网数据库运维经验、在游戏、电商、OTA行业从事过DBA运维工作、在大规模数据库自动化、平台化方面有较资深的落地经验。# 导...
分布式数据库在抖音春晚活动中的应用
## 分布式数据库架构简介相信对数据库感兴趣的同学对上面这张图也不会陌生。这... 第二个问题是围绕着 log 来发散的。我们现在知道了 Page 是怎么存储的,那么 Page 是怎么来的?其实很简单,我们构建这个分布式数据库,由始至终贯彻的一个非常重要的理念是:log is the database。我们最终落地的数据是...
特惠活动
数据库第二单元思维导图-优选内容
数据库第二单元思维导图-相关内容
数据库顶会 VLDB 2023 论文解读 - Krypton: 字节跳动实时服务分析 SQL 引擎设
是数据读写的基本单元,整个文件分成了 Data、Index、Meta 三部分,每一部分都是按照 Column 进行分区。处理 Query 时,先利用 Index 来过滤出需要读的 Data Page,然后再访问 Data Page。## Encoding and Index AlgorithmsKrypton 使用了多种 Data Encoding 和 Index 来加速 Scan 与点查。为了快速定位数据的物理位置,用户可以在 DDL 中选择合适的 Index,Krypton 支持的 Index 如下:1. Ordinal Index:根据行号快速查找目标的...
火山引擎ByteHouse:分析型数据库如何设计并发控制?
提高数据库的利用率和响应速度,为用户提供更好的数据分析服务。 ## 事务和并发控制### 事务概览在ByteHouse里,为了保证数据质量,我们提供了事务语义的支持。每条SQL 语句都会转换为一个事务去执行,事务提供了原子性、一致性、隔离性和持久性 (ACID) 属性的保证,旨在在并发读写,软件异常,硬件异常等各种情况下仍然可以保证数据的正确性和完整性。原子性(Atomicity)保证每一个事物被视为一个单元,事物要么完全成功要么...
数据库顶会 VLDB 2023 论文解读:Krypton: 字节跳动实时服务分析 SQL 引擎设计
是数据读写的基本单元,整个文件分成了 Data、Index、Meta 三部分,每一部分都是按照 Column 进行分区。处理 Query 时,先利用 Index 来过滤出需要读的 Data Page,然后再访问 Data Page。 **Encoding and Inde... 数据库领域专家 & HBase Committer。北京邮电大学硕士,曾就职于 Nebula Graph、蚂蚁金服、猿辅导等公司,一直从事数据库相关研发工作。 ■ 推荐阅读 [,实现企业级智能交互式问答系统进行介绍。通过本文,您将学习了解到:交互式问答系统原理、PostgreSQL 向量化存储和检索技术,... 存储于云数据库 PostgreSQL 版向量数据库中,详细流程如下图所示: 问答阶段 首先问答系统接收用户的提问,同样转换为 Embedding 数据,通过与向量化的问题进行相似性检索,获取最相关的 TOP N 的知识单元。并通过 Pro...
分布式数据库在抖音春晚活动中的应用
分布式数据库架构简介  数据所在的地理位置。HBase 已开通服务的地域请参见服务地址。 可用区(Availability Zones) 简称 AZ。每个地域都有... HRegion 是 HBase 中分布式存储和负载均衡的最小单元,不同的 HRegion 可以分布在不同的 HRegionServer 上。 ZK 连接地址(ZK Address) 表格数据库 HBase 版实例默认提供 ZK 连接地址。使用 Java API 可直接通过 Z...
Hive SQL 底层执行过程 | 社区征文
METASTORE:元数据库。存储 Hive 中各种表和分区的所有结构信息。5. EXECUTION ENGINE:执行引擎。负责提交 COMPILER 阶段编译好的执行计划到不同的平台上。上图的基本流程是:**步骤1**:UI 调用 DRIVER 的接口... 抽象出查询的基本组成单元 QueryBlock;3. **生成逻辑执行计划**: 遍历 QueryBlock,翻译为执行操作树 OperatorTree;4. **优化逻辑执行计划**: 逻辑层优化器进行 OperatorTree 变换,合并 Operator,达到减少 MapR...
OLAP引擎也能实现高性能向量检索,据说QPS高于milvus!
> 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群随着LLM技术应用及落地,数据库需要提高向量分析以及AI支持能力,向量数据库及向量检索等能力“异军突起”,迎来业界持续不断关注。简单来说,向量检索技术以及向量数据库能为 LLM 提供外置的记忆单元,通过提供与问题及历史答案相关联的内容,协助 LLM 返回更准确的答案。不仅仅是LLM,向量检索也早已在OLAP引擎中应用,用来提升非结构化数据的...
ByteHouse高性能向量检索技术指南 | 火山引擎
白皮书下载 下载《ByteHouse高性能向量检索技术指南V1.0》 白皮书简介 随着LLM(Large Language Models 大语言模型)技术应用及落地,数据库需要提高向量分析以及AI支持能力,向量数据库及向量检索等能力“异军突起”,迎来业界持续不断关注。简单来说,向量检索技术以及向量数据库能为 LLM 提供外置的记忆单元,通过提供与问题及历史答案相关联的内容,协助 LLM 返回更准确的答案。 不仅仅是LLM,向量检索与OLAP引擎也早有渊源。作为一种...
