数据库的应用和云技术-优选内容
基于云数据库 PostgreSQL 版构建智能交互式问答系统
本文就如何利用云数据库 PostgreSQL 版和大语言模型技术(Large Language Model,简称 LLM),实现企业级智能交互式问答系统进行介绍。通过本文,您将学习了解到:交互式问答系统原理、PostgreSQL 向量化存储和检索技术,... 来演示将云数据库 PostgreSQL 版作为向量数据库的使用方法。 核心概念及原理核心概念:嵌入向量(Embedding Vectors)向量 Embedding 是在自然语言处理和机器学习中广泛使用的概念。各种文本、图片或其他信号,均可通过...
字节跳动数据库的过去、现状与未来
数据库技术一直是信息技术中极其重要的一环,在步入云原生时代后,云基础设施和数据库进一步整合,弥补了传统数据库的痛点,带来了高可扩展性、全面自动化、快速部署、节约成本、管理便捷等优势。从 2018 到 2021 年,伴随业务和数据的迅猛增长,字节跳动的分布式数据库系统取得了令人振奋的发展。如下图所示,在这 4 年间,公司应用侧容器数量从 5 万个增长到了 750 万个,截至目前已经突破 1000 万。这 1000 万个容器筑成了字节跳动坚...
什么是云数据库 veDB MySQL 版
云数据库 veDB MySQL 版是火山引擎自研新一代云原生关系型数据库。云数据库 veDB MySQL 版 100% 兼容 MySQL,适用于企业多样化的数据库应用场景。 产品介绍 云数据库 veDB MySQL 版采用计算存储分离架构,最多支持 1... 便可将应用程序迁移至云数据库 veDB MySQL 版数据库上,实例地址默认支持自动读写分离功能。 SQL 计算解析层:基于自研分布式技术实现计算存储分离,其中写请求仅由主节点处理,读请求将自动分摊到所有节点处理。支持...
分布式数据库在抖音春晚活动中的应用
相信对数据库感兴趣的同学对上面这张图也不会陌生。这张图是 DB Engines 的数据库排名,准确来说是一个关系型数据库的排名。在 2021 年 4 月份的榜单上,MySQL 和 PG 都是关系型数据库的 Top5。这就意味着,如果我们想... 我们为什么还需要去开发分布式数据库?这个问题的答案其实也比较显而易见,就是原有的架构不能很好地满足我们内部应用的需求,所以我们才会去寻找第二条路。同步至火山引擎专有网络 PostgreSQL
自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上VPC与云下多数据中心网络互通。 在需要使用专线实现数据同步时,您需要搭建云上单私有网络和云下单数据中心网络连通的专线连接。详细操作,请参见配置专线连接。 已创建火山引擎版 ECS 自建 PostgreSQL 实例、数据库和账号。 在源端部署在火山引擎的 ECS 中通过私网连接,且开启了访问限制时,您需要在 ECS 的安全组规则中添加 DTS 服务器的 IP 地...
(邀测)同步至火山引擎专有网络 MySQL
数据库传输服务 DTS 会以 Session 级别暂时禁用约束检查和外键级联操作。当任务运行时源端存在级联更新、删除操作时,可能会导致数据不一致。 ETL 功能当前处于邀测阶段,如需使用请提交工单联系技术支持。 在创建火山引擎专有网络数据同步任务的过程中,系统会默认在您选择的私有网络内创建数张网卡,网卡会默认选择剩余可用 IP 最多的子网去挂载。网卡的名称格式为 dts_shuttle_********。 限制说明应用限制类型 说明 源端限制 ...
同步至火山引擎版 veDB MySQL
数据库传输服务 DTS 会以 Session 级别暂时禁用约束检查和外键级联操作。当任务运行时源库存在级联更新、删除操作时,可能会导致数据不一致。 ETL 功能当前处于邀测阶段,如需使用请提交工单联系技术支持。 在创建火山引擎专有网络数据同步任务的过程中,系统会默认在您选择的私有网络内创建数张网卡,网卡会默认选择剩余可用 IP 最多的子网去挂载。网卡的名称格式为 dts_shuttle_********。 限制说明应用限制类型 说明 源端限制 ...
同步至火山引擎版 ElasticSearch
自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上 VPC 与云下多数据中心网络互通。 在需要使用专线实现数据迁移时,您需要搭建云上单私有网络和云下单数据中心网络连通的专线连接。... 可能会导致数据库的负载上升。 当源库为 MySQL 8.0 版本时,在配置同步任务时,您需要手动对以下账号直接授予数据同步的相关权限: 源库的账号是通过 Role 进行相关权限授权的。 需要进行用户同步的账号是通过 Role...