You need to enable JavaScript to run this app.
导航

V2.58.0

最近更新时间2023.12.27 16:45:17

首次发布时间2023.11.17 15:36:32

1. 新版本概述

版本号:V2.58.0
版本适配产品:SaaS 、私有化
版本发布时间:SaaS 预计12月12日、私有化 12月1日

2. 新功能介绍

2.1 数据准备相关

2.1.1 数据连接新功能

【新增】数据连接支持直连 Hologres

在数据连接的 Hologres 数据库中新增直连作为连接方式。用户使用 Hologres 数据库的直连连接方式,可以实现支持实时数据功能,可以直接连接用户的数据库,满足用户对数据实时性的要求。

【新增】数据连接支持 PostgreSQL

在数据连接模块中,支持直连 PostgreSQL 数据库,目前Postgres SQL 同时支持直连和抽取两种连接方式。 PostgreSQL 数据库的直连方式,可以满足用户对数据实时性的要求。

【新增】LAS 连接新增抽取新链路

在数据连接的 LAS 连接中新增抽取新链路, LAS 抽取链路不经过JDBC,改成直接传输数据到 hdfs。如下图所示:alt

【优化】更多技术细节优化

(1)在数据连接的 Redshift 数据源抽取中新增支持 text, super类型的字段接入。
(2)文件上传支持解析百分数

2.1.2 可视化建模新功能

【新增】自定义SQL算子新增常见函数库

可视化建模中自定义SQL算子,新增常见函数库,包括函数用途说明、命令格式、示例,升级用户使用体验。详情可查看《数据输入》。

【新增】字段设置算子提供高级配置功能

可视化建模中的字段设置算子,提供高级配置功能,支持一键进行目标字段名格式修改,如一键转大写、一键转小写、一键修复非法字符一键修正不规范数据,支持字段快捷排序,提高数据处理效率。

【新增】输出节点支持字段修正

可视化建模的输出节点,支持字段修正,当上游节点字段格式同目标存储的字段格式存在兼容性问题,可点击一键修正,点击后会在当前节点前增加【字段设置】算子并一键修正。


【新增】算子支持增加文字描述

可视化建模算子支持增加文字描述,帮助用户更清晰地了解当前算子使用备注。


【新增】预览增加数据清洗建议与即时设置能力

可视化建模预览页面,增加数据清洗建议与即时设置能力,用户点击可一键完成清洗,提高数据清洗的效率。
(1)采纳数据清洗建议:

(2)进行即时设置:
打开数据预览时,在预览界面左下方,可针对预览进行即时编辑或设置。用户可以配置参与预览计算的数据量(默认不超过1000000行),支持自定义行数或选择全量数据。配置后,预览将进行实时刷新。如下图所示:

【新增】任务创建体验升级

(1)可视化建模任务创建页面,新增移除数据连接按钮,提高操作效率。

(2)可视化建模任务创建页面,支持自由布局与网格布局切换,灵活调整任务各节点的布局。

(3)可视化建模任务创建页面,支持通过点击Back或Delete键执行算子删除操作,提高数据清洗效率。

【优化】数据源支持“且”“或”的筛选嵌套逻辑

可视化建模新建任务时,选择数据源后,非分区字段筛选支持“且”“或”的筛选嵌套逻辑,可以进一步自由过滤数据。详情可查看《数据输入》。

【优化】计算列算子的配置流程优化

可视化建模中,计算列算子的配置流程优化,以表格形式展示新增的字段,优化使用体验,配置流程更清晰。


【优化】新建任务支持展示任务异常节点

可视化建模新建任务页面,支持统一展示任务异常节点,辅助排查任务问题,提高数据清洗体验。


【优化】离线算子细节优化与相关技术优化

(1)在数据准备的可视化建模模块更新表结构视图,各列自左向右依次为:源字段名、源字段类型、源字段描述(新增)、目标字段类型;
(2)可视化建模实时离线任务的字段名、描述的校验规则统一;
(3)可视化建模添加按钮位置调整;
(4)可视化建模连接算子在缺字段时进行提示;
(5)可视化建模支持字段去重存储(Unique 表);
(6)可视化建模前端页面适配,支持输出LAS(公有云);
(7)可视化建模支持创建 UniqueMergeTree 表,支持底表层面按“唯一键”对数据做更新。

2.1.3 数据集新功能

【新增】上线主题数据集功能

支持接入VeCDP、GMP两款火山引擎数智平台的增长营销系列产品的数据,构建营销主题数据集,让用户能够在业务营销场景中,实现快捷的数据使用与分析,缩短数据获取路径。此模块为增值模块,目前仅支持私有化部署版本,如需使用,请咨询商务人员。

VeCDP主题数据集包含群体数据集和标签数据集两类。GMP 主题数据集包含用户触达类型,作为业务策略分析链路中的重要部分,已经支持消息触达、流程画布和资源位三类数据集。详细操作可查看《主题数据集 》。

【新增】支持数据集查询搜索

数据准备中的数据集模块新增数据集查询服务,适配 antlr 解析,使用新的语法规则,便于用户方便快捷的查询数据集。

【新增】数据集所有者转移支持告警同步转移

当数据集所有者(owner)转移时,基于该数据集创建的告警所有者(owner),也会进行同步转移。

【新增】数据集新增个人数据集与公共数据集

在新版中,数据集模块新增个人数据集与公共数据集两种数据集的分类。个人数据集的价值主要在于,用户不需要申请项目的编辑权限即可创建个人数据集用于分析。个人数据集与个人仪表盘类似,仅支持向其他用户授权查看和查看以下权限。

【新增】数据集删除恢复

新版中完善了数据集删除的恢复功能,从而避免误删带来的负面影响。对于删除的数据集,15天内可以在回收站 中直接恢复;超过15天后,能够通过查询数据模型,进而完成数据集的重建,具体可见如下回收站功能:

  • 在回收站中的数据集界面下,有两个TAB:回收站_恢复、查询数据模型_重建,新版中新增了「查询数据模型_重建」选项,支持查询删除超过15天(彻底删除)的数据集的模型信息,便于用户进行重建。

【新增】字段表达式支持快速格式化

操作项位于“字段表达式”右侧的小格式刷按钮。

【优化】聚合加速配置优化

新版中优化了数据集编辑页面中聚合加速配置功能,将聚合加速配置能力从数据集编辑中剥离出来,从而实现聚合加速配置不影响数据集的编辑保存。

【优化】Hive自定义SQL抽取支持配置查询参数

数据准备中的数据集模块优化了Hive自定义SQL抽取功能,支持配置查询参数。

【优化】数据集操作项统一

针对数据集主页面的左侧列表和右侧列表的操作项,以及数据集详情页的操作项进行了统一的优化,将各个地方的操作进行补充。将操作分类如下:

  • 数据集的消费:可视化查询

  • 数据集的管理:编辑、删除、基础信息、转移所有者、设置标签、授权

    • 根据访问数据,基础信息、授权在前,更多最后;

    • 删除:即删除数据集,放置在操作项的最后

  • 数据集的整体操作:移动、复制

    • 次高频操作,位置在删除之前
  • 数据集的消费配置:可视化查询配置、归因分析配置、跨项目配置

  • 数据集的同步配置:切换优先级、切换资源组、切换队列

数据集主页面的左侧列表操作项

数据集主页面的右侧列表操作项
数据集详情页的操作项

2.1.4 SQL查询相关

DataWind全新上线SQL查询模块,支持用户使用SQL查询语句对数据表(如hive/clickhouse表)进行数据查询,并对结果进行可视化分析和分享。(本功能为增值模块,目前仅限私有化部署可使用,自V2.58.0及以上版本支持。如您需要使用,请联系贵公司的商务人员或客户成功经理咨询购买事宜)。

如下图所示,工作栏可以查看SQL查询工作簿、模板库、查询历史记录、函数列表、库表等;SQL编辑区可选择数据源、资源并编写、运行查询语句;查询结果区可查看当前工作簿查询历史、查询结果和查询日志。详情可查看《SQL查询》。
image.png

【优化】数据集相关细节优化

(1)聚合加速类型支持全枚举;
(2)数据集编辑保存队列校验优化;
(3)数据集的实时抽取(kafka)支持创建 UniqueMergeTree 表,支持底表层面按“唯一键”对数据做更新;
(4)数据集中的维度表模块支持集群迁移,更新后可支持带维度的数据集的迁移;
(5)数据集和可视化建模两个模块均支持 decimal 数据格式。

2.2 可视化查询相关

【新增】指标趋势图优化

  • 指标趋势图支持添加行维度,基本格式新增树形展示。

  • 指标趋势图中的迷你图支持调整标记点和线条样式

  • 指标趋势图的时间粒度支持选择是否展示快捷定位,开启时选中日期粒度后,图表会高亮展示对应粒度的数据

  • 指标趋势图支持移动端适配

【新增】分析功能中新增二次表计算功能

在可视化查询的分析功能中,提供了表计算的能力,新版本中对于「表计算」能力新增二次表计算功能。用户可以在第一次配置的基础上,对当前表计算的结果再次配置表计算。具体配置包含:计算类型、相对于、单位计算区域和寻址方向等。

【新增】透视表优化

(1)「透视表」在使用「表计算」功能中的「差异」或「差异百分比」时,支持勾选「隐藏为0或null的行列」

(2)透视表基本格式支持设置为紧凑模式,同时支持调整紧凑模式的排列方式。

【新增】可视化查询页面体验优化

当鼠标放置在字段配置区域的字段灰色字段胶囊上时,会提示该字段为灰色的原因。

【新增】个人字段能力增强

在可视化查询界面中的数据集字段列表区域,支持查看其他用户个人字段的表达式,并支持一键另存为自己的个人字段。

【优化】交互分析优化

(1)下钻功能优化:当用户点击进行下钻后,一方面下钻的层级路径上会展示该维度名称;另一方面,鼠标悬浮到对应维度上,下钻的层级路径上的维度即可显示维度值。如下图所示:

(2)跳转功能优化:支持适配字段多语言功能。
(3)跳转功能优化:跳转网页支持隐藏字段传值。

【优化】4 类图表新增自定义字段配置

在表格支持自定义字段的基础上,现在柱状图、条形图、折线图、面积图也支持自定义字段能力,在这4类图表的配置区的下方,可以打开“自定义字段”,满足用户诉求,且图表够简单,仪表盘使用者学习成本较低。温馨提示:仅支持选择指标字段。
配置自定义字段入口:

查看自定义字段:

【优化】指标字段配置优化

当日期字段放在指标上时,指标字段配置中增加“条件格式”的配置入口,“条件格式”具体支持:单色、图标集、色阶、数据条、清除规则等。

【优化】筛选功能相关细节优化

(1)如果使用的数据集已经配置了做可视化查询时候的“最大查询天数”的限制条件,那么在可视化查询中基于该数据集进行查询和筛选器配置时,筛选器也会同步生效。当用户给数据集设置的最大查询天数 <= 仅展示最近N天抽样数据的时候,则“仅展示最近N天抽样数据”。本优化有利于提升查询性能,带来更好的用户体验。
(2)条件筛选支持 Arrayhas 操作符。

【优化】图表配置相关细节优化

(1)手动排序支持回车添加排序项
(2)可视化标注支持临时隐藏
(3)图表标签可配置多行多列
(4)支持缩略轴适配

2.3 仪表盘相关

【新增】仪表盘素材新增3个组件

在仪表盘的左侧组件栏中,新增素材类型组件。在图片的基础上,新增加了头图、标题图、分割线等素材,帮助用户更易搭建有层次感的仪表盘。

【新增】仪表盘主题新增“经典”主题

在仪表盘的右侧的页面配置区域中,仪表盘主题新增“经典”主题。用户点击该主题,即可一键应用至当前仪表盘中,实现简约效果。

【新增】文本组件支持三级标题样式

在仪表盘的左侧组件栏中,选择文本组件,在文本组件的编辑区,用户可以选中文字,设置文字为一/二/三级标题样式,让标题文字更有层次感。


【优化】自定义主题优化

当容器背景颜色变化时,其中的控件(比如下拉选择控件、翻页控件)不会再保持白色,控件背景色及文本色支持自适应容器背景颜色。具体而言,在仪表盘的右侧页面配置区,仪表盘主题中点击选择个人仪表盘,然后点击“编辑”。那么在个人仪表盘主题的右侧配置栏中,增加了一个「外观-控件颜色自适应」的配置。

【优化】仪表盘管理类操作项调整

为了方便用户操作,DataWind仪表盘列表中more和详情页more进行了操作项的调整。在新版中,

  • 仪表盘列表中more:增加“设为默认仪表盘”操作项。

  • 仪表盘详情页more:增加“基础信息、转移所有者、移动、复制仪表盘、删除”等操作项。



【优化】替换数据集字段创建优化

仪表盘支持替换数据集功能,在新版中,产品针对替换数据集时,根据替换人的权限差异,进行如下不同的操作,以规避数据集的使用者对数据集的改动行为,避免影响到该数据集的其他使用者。
具体而言,当操作人替换数据集时,若需要在新数据集中创建计算字段,则根据用户的权限差异,进行如下不同操作:
(1)若用户有新数据集的编辑权限,则对于不存在的计算字段,自动在新数据集中创建数据集字段(即目前线上的流程)。
(2)若用户只有新数据集的查看权限,则对于不存在的计算字段,自动在新数据集中创建个人字段
特殊情况说明:若操作人在新数据集中已有同名的个人字段,则不继续新建,直接使用已有的同名个人字段。
进入替换数据集:

仅有新数据集查看权限时:

【优化】全屏配置优化

针对仪表盘的“**图片”、“网页”组件,支持设置“**查看态图标显示”。在仪表盘编辑界面中,选择了这两个组件时,右侧的配置区可以看到该操作项。并且,对于仪表盘页面配置,在查看态显示工具条生效的情况下,如果没有选择全屏,全屏按钮将隐藏。

【优化】移动端图例展示优化

移动端饼图的图例展示默认图例开关是打开状态,不跟随图表而变化,并且实现了图例与饼图的面积比例的优化,提供更好的视觉体验。


2.4 数字大屏相关

【新增】上线默认首页设置功能

数字大屏模块新增「设为访问大屏首页」功能,对于有多页面的数字大屏,可以选择其中一个页面设为访问大屏的首页。

【新增】图表样式添加氛围效果

数字大屏图表组件在样式设置中,新增“氛围效果”功能开关,氛围效果功能支持用户设置图例的样式与位置等细节,帮助用户实现精细化的展示效果。

【新增】场景组件新增 3D 地球

场景组件中新增 3D 地球新场景,3D 地球场景主要以三维地球形式动态展示相对宏观的地理位置数据,能够为用户清晰直观的展示地球上的各类数据。

【新增】事件系统支持「数据更新完成」事件

事件系统模块新增「数据更新完成」事件,对于所有具有分析能力的组件均新增了「数据更新完成」事件,从而实现当数据变化达到某个阈值时预警,或者根据数值动态设置参考线等。

【优化】所有图表支持图元点击事件

数字大屏的不同图表可支持图元粒度不同,数字大屏模块所有图表支持图元点击事件功能,优化后满足不同图表在不同图元粒度均能实现图元点击事件功能。

【优化】默认组件优化

触发事件中的“每页轮播完成时”是指变更轮播状态每页轮播完成时抛出的事件,本次优化后,标签页、轮播器支持在交互配置面板中可以选择触发事件「每页轮播完成时」。

【优化】表达式功能升级

数字大屏更新后支持 VFormula 语言,表达式功能升级,简化了使用方式。VFormula 语言是指数字大屏产品中的可嵌入表达式文本功能,通过使用形如 text {{ expression }} 的形式进行内容书写,从而提升功能灵活度,降低用户的使用成本,详细操作可查看《数字大屏 VFormula 语言定义》。

2.5 分享与协同相关

【新增】订阅消息支持撤回

针对部分特殊或重要的仪表盘,为了避免数据在并未刷新或有其他数据异常的情况下进行订阅消息的推送,现在支持订阅消息撤回的能力。目前撤回的方式通过提供接口的方式解决,用户可以在需要撤回的时候输入参数进行接口的调用来撤回相关的飞书消息。本能力仅仪表盘管理员、订阅创建者、项目管理员可使用。如需获得该能力,请您联系贵公司的客户成功经理。

2.6 管理与运维相关

【新增】项目支持多语言功能配置

在项目中心里,管理员可以针对数据集、图表和仪表盘分别进行多语言的设置,让多语办公的同事们能够直观了解相关信息。

  • 首先,管理员可以在项目中心的项目设置中,点击开启配置多语言展示,目前支持中文和英文两种。

  • 接着,在项目中心的左侧栏最下面,就会出现「多语言」的操作项,管理员可以通过查看所有者或搜索关键词的方式找到对应资源,然后针对性地进行设置。详情可查看《多语言》。


【优化】资源迁移支持参数、主题、关系图、全局指标/维度等

(1)在资源迁移所支持的数据集类型上进行了优化,目前不支持导入的数据集类型亦不支持导出;

(2)在仪表盘模块的“新增/覆盖”导入导出功能上进行了优化,具体细节包含如下:

  • 支持全局指标/维度,全局指标/维度与导入的仪表盘配置保持一致。

  • 支持关系图。关系图与导入的仪表盘配置保持一致,关系图所配置的指标卡作为仪表盘图表同等处理。

  • 支持 sheet 页顺序保持不变,sheet 页顺序与导入的仪表盘配置保持一致。

  • 支持导入导出时将全局筛选器所应用的子查询内容同步导入导出,实现将子查询来源图表当成类似于当前仪表盘的图表处理。

  • 支持仪表盘主题。对于新增的情况:在主题列表里面同名则替换,不同名则在同类型下新增,若当前操作者无该类型权限,则在个人类型下面新增。对于覆盖的情况:保留被覆盖数据集的主题不变。

  • 支持参数。对于新增的情况:遇到公共参数同名则替换,若没有参数则跟随新增项目全数据集参数,如果已经存在部分数据集参数则无法导入成功。对于覆盖的情况:不处理参数。


(3)资源迁移模块支持从当前项目中同类型(个人或公共)资源判断是否有同名资源,若有同名则使用新环境中已有的参数,不同名则在该类型下新增。
(4)导出的仪表盘中有针对不勾选的数据集,导出时不做校验(针对镜像数据集等不支持导出的数据集不支持勾选)。
(5)此外还针对“引用字段”的导出进行了优化,当 A 引用数据集字段 B,即使 B 在图表中没有使用或出现,B 也能正常导出,A也能正常使用。
详情可查看《资源迁移》。

3. 技术优化介绍
更新类型更新说明·
性能优化对接权限v3接口,大幅提高鉴权性能。
性能优化支持聚合加速功能,提高超大表的查询性能。