> 本文出自字节跳动基础架构流式计算方向的工程师李本超同学专访。李本超从2022年3月开始参与 Apache Calcite 社区贡献,主要贡献了包括子查询优化、Join 优化、JSON 函数优化、JDBC Adapter、通用的表达式优化等。于2023年1月正式受邀成为 Apache Calcite PMC。 # 十个月,由初识到热爱 在过去几年,我主要是负责 Flink SQL 相关的工作。在不断深入参与到 Flink 的开发贡献的过程中,也逐步的了解到了背后的 Calcite。因...
# 前言这篇文章旨在提供 RDS for PostgreSQL 的一些开发和运维建议,以助您提升数据库使用的标准化和稳定性。# 性能与稳定性* 慎用子事务,避免事务中使用过多的子事务。* 游标使用后及时关闭。* 对于在线业务... 提高查询效率。同时可以避免频繁的结构变更。### 监控告警* RDS for PostgreSQL 提供了丰富的监控与事件通知,强烈建议进行配置,提前发现潜在风险* 建议根据业务实际情况,合理配置监控阈值。* 配置站内信通知...
# 前言PostgreSQL 在 9.1 中推出了一种特殊的表:unlogged table,使用 unlogged table 最大的特点是涉及到表的更新,删除等操作不会记录 WAL 日志,这样可以大大的提高性能。不过需要特别注意的是,在数据库异常宕机时... integer | | | | plain | | ````### 场景1:重启实例在控制台上点击重启按钮,然后连接到实例上进行查询,发现表中数据丢失,而表结构是存在的:````undefinedserv...
# 前言PostgreSQL 在 9.1 中推出了一种特殊的表:unlogged table,使用 unlogged table 最大的特点是涉及到表的更新,删除等操作不会记录 WAL 日志,这样可以大大的提高性能。不过需要特别注意的是,在数据库异常宕机... integer | | | | plain | | ``` ### 场景1:重启实例 在控制台上点击重启按钮,然后连接到实例上进行查询,发现表中数据丢失,而表结构是存在的: ```server ...
进行样例 SQL 执行。 3.1 创建用户通过下面的命令创建一个普通用户: CREATE USER 'test_user' IDENTIFIED BY 'test_user_passwd';后续登录时即可通过如下连接命令登录: mysql -h 127.0.0.1 -P9030 -u test_user -ptest_user_passwd新创建的普通用户默认没有任何权限。 3.2 创建数据库初始可通过 root用户创建数据库,命令如下: CREATE DATABASE test_db;数据库创建完成后,可以通过 SHOW DATABASES; 查看数据库信息。 MySQL> SHOW...
本文介绍一些常用的的 SQL 语法,以帮助您更方便的使用 SQL 查询分析。 连接数据库服务在本地命令行工具中,执行以下命令,连接数据库服务。 Bash mysql -h{HOST} -P{PORT} -uadmin -p{PASSWORD}HOST:SQL 分析节点的访问地址域名,按需选择私网访问地址或公网访问地址。 PORT:SQL 分析节点的访问端口。 PASSWORD:admin 用户的登录密码。如果您忘记了登录密码,您可以选择重置密码,具体操作请参见重置登录密码。 创建数据库SQL CREATE...
1. 概述 DataWind 的 SQL 查询模块提供了结果可视化和例行查询的功能,支持用户将查询结果保存至可视化查询页面进行查询,并为当前的查询设置例行,定期查询数据。(本功能为增值模块,目前仅限私有化部署可使用,自V2.58.0及以上版本支持。如您需要使用,请联系贵公司的商务人员或客户成功经理咨询购买事宜)。 2. 快速入门 2.1 SQL查询结果保存至可视化在 SQL 执行完毕后,点击页面右下角的新建图表按钮,稍等一会儿后,会自动跳转至可视...
本文介绍如何查看和下载日志的操作步骤。 操作步骤登录云数据库 PostgreSQL 版控制台。 在顶部菜单栏的左上角,选择实例所属的项目和地域。 说明 如未设置实例的所属项目,本操作应选择项目为账号全部资源。 在实例列表页面,单击目标实例名称。 在页面上方,单击日志管理页签。 说明 单击主备切换日志、慢日志和错误日志子页签,即可查看日志列表。 在慢日志子页签,可查看慢日志的日志采集时间、SQL 语句、客户端 IP、数据库和执...
云搜索服务可以与 MySQL 生态和应用无缝衔接,支持使用 MySQL 命令行与各种 GUI、BI 工具等大数据生态结合,实现更复杂多样化的数据处理分析需求。 分析能力强:SQL 语言已经成为数据库和大数据分析的事实标准,它具有强大的表达能力和功能,支持聚合、多表 JOIN、子查询等多种数据分析能力。 在日志分析场景中,常见的几种查询如下: 场景 SQL 语句 查看最新的 10 条数据 SQL SELECT * FROM log_table ORDER BY ts DESC LIMIT 10; 查...
1. 可视化查询 1.1 报错信息报错子查询涉及的数据集没有读取权限怎么办原因 可视化查询中使用了子查询筛选,且子查询的图表没有权限 解决 申请子查询图表对应数据集的查看权限 报错点数量超出限制怎么办原因 图表渲... 即集群存在异常情况 解决方案 联系产品项目经理处理问题 可视化查询报错 query size is too big可能原因 可视化查询组装的 SQL 语句过长,可能是存在查询字段表达式过长,如超长的 case when表达式等 解决方案 检查字...
1. 概述 DataWind 的 SQL 查询模块提供了自定义变量功能,增强了 SQL 脚本的灵活性和易用性。用户可以在 SQL 脚本中定义变量,以便在查询中动态使用。(本功能为增值模块,目前仅限私有化部署可使用,自V2.58.0及以上版本支持。如您需要使用,请联系贵公司的商务人员或客户成功经理咨询购买事宜)。 2. 功能介绍 2.1 创建自定义变量在 SQL 脚本中,如果您遇到需要使用自定义变量的地方,可以按照以下格式输入自定义变量:{{自定义变量名}}...
### **云原生数据仓库ByteHouse****【查询优化器】** ByteHouse 从零开始自研的了查询优化器,在实现了完善的优化器之后可以直接运行全部 TPC-DS 原始 SQL,并且效率也得到了很大的提升,相对在没优化器的情况下手动改写的 SQL ,性能提升 6 倍以上。在内部的一些业务场景中性能也有近 10 倍的提升。查询优化器具备以下方面的能力:- **RBO:** 支持列裁剪、分区裁剪、表达式简化、子查询解关联、谓词下推、冗余算子消除、Oute...
1. 概述 DataWind 的 SQL 查询模块允许用户下载查询结果并进行分析。(本功能为增值模块,目前仅限私有化部署可使用,自V2.58.0及以上版本支持。如您需要使用,请联系贵公司的商务人员或客户成功经理咨询购买事宜)。 2. 功能介绍 2.1 下载行数限制目前支持的下载格式:CSVCSV 格式下载行数限制如下:行数<=100W 且 文件大小 <=5G 2.2 如何查询超过100万行的数据SQL 查询结果最多显示100万条,如需跑超过100万行的全量数据,可在语句后添...