版本号:V2.58.0
版本适配产品:SaaS 、私有化
版本发布时间:SaaS 预计12月12日、私有化 12月1日
在数据连接的 Hologres 数据库中新增直连作为连接方式。用户使用 Hologres 数据库的直连连接方式,可以实现支持实时数据功能,可以直接连接用户的数据库,满足用户对数据实时性的要求。
在数据连接模块中,支持直连 PostgreSQL 数据库,目前Postgres SQL 同时支持直连和抽取两种连接方式。 PostgreSQL 数据库的直连方式,可以满足用户对数据实时性的要求。
在数据连接的 LAS 连接中新增抽取新链路, LAS 抽取链路不经过JDBC,改成直接传输数据到 hdfs。如下图所示:
(1)在数据连接的 Redshift 数据源抽取中新增支持 text, super类型的字段接入。
(2)文件上传支持解析百分数
可视化建模中自定义SQL算子,新增常见函数库,包括函数用途说明、命令格式、示例,升级用户使用体验。详情可查看《数据输入》。
可视化建模中的字段设置算子,提供高级配置功能,支持一键进行目标字段名格式修改,如一键转大写、一键转小写、一键修复非法字符一键修正不规范数据,支持字段快捷排序,提高数据处理效率。
可视化建模的输出节点,支持字段修正,当上游节点字段格式同目标存储的字段格式存在兼容性问题,可点击一键修正,点击后会在当前节点前增加【字段设置】算子并一键修正。
可视化建模算子支持增加文字描述,帮助用户更清晰地了解当前算子使用备注。
可视化建模预览页面,增加数据清洗建议与即时设置能力,用户点击可一键完成清洗,提高数据清洗的效率。
(1)采纳数据清洗建议:
(2)进行即时设置:
打开数据预览时,在预览界面左下方,可针对预览进行即时编辑或设置。用户可以配置参与预览计算的数据量(默认不超过1000000行),支持自定义行数或选择全量数据。配置后,预览将进行实时刷新。如下图所示:
(1)可视化建模任务创建页面,新增移除数据连接按钮,提高操作效率。
(2)可视化建模任务创建页面,支持自由布局与网格布局切换,灵活调整任务各节点的布局。
(3)可视化建模任务创建页面,支持通过点击Back或Delete键执行算子删除操作,提高数据清洗效率。
可视化建模新建任务时,选择数据源后,非分区字段筛选支持“且”“或”的筛选嵌套逻辑,可以进一步自由过滤数据。详情可查看《数据输入》。
可视化建模中,计算列算子的配置流程优化,以表格形式展示新增的字段,优化使用体验,配置流程更清晰。
可视化建模新建任务页面,支持统一展示任务异常节点,辅助排查任务问题,提高数据清洗体验。
(1)在数据准备的可视化建模模块更新表结构视图,各列自左向右依次为:源字段名、源字段类型、源字段描述(新增)、目标字段类型;
(2)可视化建模实时离线任务的字段名、描述的校验规则统一;
(3)可视化建模添加按钮位置调整;
(4)可视化建模连接算子在缺字段时进行提示;
(5)可视化建模支持字段去重存储(Unique 表);
(6)可视化建模前端页面适配,支持输出LAS(公有云);
(7)可视化建模支持创建 UniqueMergeTree 表,支持底表层面按“唯一键”对数据做更新。
支持接入VeCDP、GMP两款火山引擎数智平台的增长营销系列产品的数据,构建营销主题数据集,让用户能够在业务营销场景中,实现快捷的数据使用与分析,缩短数据获取路径。此模块为增值模块,目前仅支持私有化部署版本,如需使用,请咨询商务人员。
VeCDP主题数据集包含群体数据集和标签数据集两类。GMP 主题数据集包含用户触达类型,作为业务策略分析链路中的重要部分,已经支持消息触达、流程画布和资源位三类数据集。详细操作可查看《主题数据集 》。
数据准备中的数据集模块新增数据集查询服务,适配 antlr 解析,使用新的语法规则,便于用户方便快捷的查询数据集。
当数据集所有者(owner)转移时,基于该数据集创建的告警所有者(owner),也会进行同步转移。
在新版中,数据集模块新增个人数据集与公共数据集两种数据集的分类。个人数据集的价值主要在于,用户不需要申请项目的编辑权限即可创建个人数据集用于分析。个人数据集与个人仪表盘类似,仅支持向其他用户授权查看和查看以下权限。
新版中完善了数据集删除的恢复功能,从而避免误删带来的负面影响。对于删除的数据集,15天内可以在回收站 中直接恢复;超过15天后,能够通过查询数据模型,进而完成数据集的重建,具体可见如下回收站功能:
操作项位于“字段表达式”右侧的小格式刷按钮。
新版中优化了数据集编辑页面中聚合加速配置功能,将聚合加速配置能力从数据集编辑中剥离出来,从而实现聚合加速配置不影响数据集的编辑保存。
数据准备中的数据集模块优化了Hive自定义SQL抽取功能,支持配置查询参数。
针对数据集主页面的左侧列表和右侧列表的操作项,以及数据集详情页的操作项进行了统一的优化,将各个地方的操作进行补充。将操作分类如下:
数据集的消费:可视化查询
数据集的管理:编辑、删除、基础信息、转移所有者、设置标签、授权
根据访问数据,基础信息、授权在前,更多最后;
删除:即删除数据集,放置在操作项的最后
数据集的整体操作:移动、复制
数据集的消费配置:可视化查询配置、归因分析配置、跨项目配置
数据集的同步配置:切换优先级、切换资源组、切换队列
数据集主页面的左侧列表操作项
数据集主页面的右侧列表操作项
数据集详情页的操作项
DataWind全新上线SQL查询模块,支持用户使用SQL查询语句对数据表(如hive/clickhouse表)进行数据查询,并对结果进行可视化分析和分享。(本功能为增值模块,目前仅限私有化部署可使用,自V2.58.0及以上版本支持。如您需要使用,请联系贵公司的商务人员或客户成功经理咨询购买事宜)。
如下图所示,工作栏可以查看SQL查询工作簿、模板库、查询历史记录、函数列表、库表等;SQL编辑区可选择数据源、资源并编写、运行查询语句;查询结果区可查看当前工作簿查询历史、查询结果和查询日志。详情可查看《SQL查询》。
(1)聚合加速类型支持全枚举;
(2)数据集编辑保存队列校验优化;
(3)数据集的实时抽取(kafka)支持创建 UniqueMergeTree 表,支持底表层面按“唯一键”对数据做更新;
(4)数据集中的维度表模块支持集群迁移,更新后可支持带维度的数据集的迁移;
(5)数据集和可视化建模两个模块均支持 decimal 数据格式。
在可视化查询的分析功能中,提供了表计算的能力,新版本中对于「表计算」能力新增二次表计算功能。用户可以在第一次配置的基础上,对当前表计算的结果再次配置表计算。具体配置包含:计算类型、相对于、单位计算区域和寻址方向等。
(1)「透视表」在使用「表计算」功能中的「差异」或「差异百分比」时,支持勾选「隐藏为0或null的行列」
(2)透视表基本格式支持设置为紧凑模式,同时支持调整紧凑模式的排列方式。
当鼠标放置在字段配置区域的字段灰色字段胶囊上时,会提示该字段为灰色的原因。
在可视化查询界面中的数据集字段列表区域,支持查看其他用户个人字段的表达式,并支持一键另存为自己的个人字段。
(1)下钻功能优化:当用户点击进行下钻后,一方面下钻的层级路径上会展示该维度名称;另一方面,鼠标悬浮到对应维度上,下钻的层级路径上的维度即可显示维度值。如下图所示:
(2)跳转功能优化:支持适配字段多语言功能。
(3)跳转功能优化:跳转网页支持隐藏字段传值。
在表格支持自定义字段的基础上,现在柱状图、条形图、折线图、面积图也支持自定义字段能力,在这4类图表的配置区的下方,可以打开“自定义字段”,满足用户诉求,且图表够简单,仪表盘使用者学习成本较低。温馨提示:仅支持选择指标字段。
配置自定义字段入口:
查看自定义字段:
当日期字段放在指标上时,指标字段配置中增加“条件格式”的配置入口,“条件格式”具体支持:单色、图标集、色阶、数据条、清除规则等。
(1)如果使用的数据集已经配置了做可视化查询时候的“最大查询天数”的限制条件,那么在可视化查询中基于该数据集进行查询和筛选器配置时,筛选器也会同步生效。当用户给数据集设置的最大查询天数 <= 仅展示最近N天抽样数据的时候,则“仅展示最近N天抽样数据”。本优化有利于提升查询性能,带来更好的用户体验。
(2)条件筛选支持 Arrayhas 操作符。
(1)手动排序支持回车添加排序项
(2)可视化标注支持临时隐藏
(3)图表标签可配置多行多列
(4)支持缩略轴适配
在仪表盘的左侧组件栏中,新增素材类型组件。在图片的基础上,新增加了头图、标题图、分割线等素材,帮助用户更易搭建有层次感的仪表盘。
在仪表盘的右侧的页面配置区域中,仪表盘主题新增“经典”主题。用户点击该主题,即可一键应用至当前仪表盘中,实现简约效果。
在仪表盘的左侧组件栏中,选择文本组件,在文本组件的编辑区,用户可以选中文字,设置文字为一/二/三级标题样式,让标题文字更有层次感。
当容器背景颜色变化时,其中的控件(比如下拉选择控件、翻页控件)不会再保持白色,控件背景色及文本色支持自适应容器背景颜色。具体而言,在仪表盘的右侧页面配置区,仪表盘主题中点击选择个人仪表盘,然后点击“编辑”。那么在个人仪表盘主题的右侧配置栏中,增加了一个「外观-控件颜色自适应」的配置。
为了方便用户操作,DataWind仪表盘列表中more和详情页more进行了操作项的调整。在新版中,
仪表盘支持替换数据集功能,在新版中,产品针对替换数据集时,根据替换人的权限差异,进行如下不同的操作,以规避数据集的使用者对数据集的改动行为,避免影响到该数据集的其他使用者。
具体而言,当操作人替换数据集时,若需要在新数据集中创建计算字段,则根据用户的权限差异,进行如下不同操作:
(1)若用户有新数据集的编辑权限,则对于不存在的计算字段,自动在新数据集中创建数据集字段(即目前线上的流程)。
(2)若用户只有新数据集的查看权限,则对于不存在的计算字段,自动在新数据集中创建个人字段。
特殊情况说明:若操作人在新数据集中已有同名的个人字段,则不继续新建,直接使用已有的同名个人字段。
进入替换数据集:
仅有新数据集查看权限时:
针对仪表盘的“**图片”、“网页”组件,支持设置“**查看态图标显示”。在仪表盘编辑界面中,选择了这两个组件时,右侧的配置区可以看到该操作项。并且,对于仪表盘页面配置,在查看态显示工具条生效的情况下,如果没有选择全屏,全屏按钮将隐藏。
移动端饼图的图例展示默认图例开关是打开状态,不跟随图表而变化,并且实现了图例与饼图的面积比例的优化,提供更好的视觉体验。
数字大屏模块新增「设为访问大屏首页」功能,对于有多页面的数字大屏,可以选择其中一个页面设为访问大屏的首页。
数字大屏图表组件在样式设置中,新增“氛围效果”功能开关,氛围效果功能支持用户设置图例的样式与位置等细节,帮助用户实现精细化的展示效果。
场景组件中新增 3D 地球新场景,3D 地球场景主要以三维地球形式动态展示相对宏观的地理位置数据,能够为用户清晰直观的展示地球上的各类数据。
事件系统模块新增「数据更新完成」事件,对于所有具有分析能力的组件均新增了「数据更新完成」事件,从而实现当数据变化达到某个阈值时预警,或者根据数值动态设置参考线等。
数字大屏的不同图表可支持图元粒度不同,数字大屏模块所有图表支持图元点击事件功能,优化后满足不同图表在不同图元粒度均能实现图元点击事件功能。
触发事件中的“每页轮播完成时”是指变更轮播状态每页轮播完成时抛出的事件,本次优化后,标签页、轮播器支持在交互配置面板中可以选择触发事件「每页轮播完成时」。
数字大屏更新后支持 VFormula 语言,表达式功能升级,简化了使用方式。VFormula 语言是指数字大屏产品中的可嵌入表达式文本功能,通过使用形如 text {{ expression }} 的形式进行内容书写,从而提升功能灵活度,降低用户的使用成本,详细操作可查看《数字大屏 VFormula 语言定义》。
针对部分特殊或重要的仪表盘,为了避免数据在并未刷新或有其他数据异常的情况下进行订阅消息的推送,现在支持订阅消息撤回的能力。目前撤回的方式通过提供接口的方式解决,用户可以在需要撤回的时候输入参数进行接口的调用来撤回相关的飞书消息。本能力仅仪表盘管理员、订阅创建者、项目管理员可使用。如需获得该能力,请您联系贵公司的客户成功经理。
在项目中心里,管理员可以针对数据集、图表和仪表盘分别进行多语言的设置,让多语办公的同事们能够直观了解相关信息。
首先,管理员可以在项目中心的项目设置中,点击开启配置多语言展示,目前支持中文和英文两种。
接着,在项目中心的左侧栏最下面,就会出现「多语言」的操作项,管理员可以通过查看所有者或搜索关键词的方式找到对应资源,然后针对性地进行设置。详情可查看《多语言》。
(1)在资源迁移所支持的数据集类型上进行了优化,目前不支持导入的数据集类型亦不支持导出;
(2)在仪表盘模块的“新增/覆盖”导入导出功能上进行了优化,具体细节包含如下:
(3)资源迁移模块支持从当前项目中同类型(个人或公共)资源判断是否有同名资源,若有同名则使用新环境中已有的参数,不同名则在该类型下新增。
(4)导出的仪表盘中有针对不勾选的数据集,导出时不做校验(针对镜像数据集等不支持导出的数据集不支持勾选)。
(5)此外还针对“引用字段”的导出进行了优化,当 A 引用数据集字段 B,即使 B 在图表中没有使用或出现,B 也能正常导出,A也能正常使用。
详情可查看《资源迁移》。
更新类型 | 更新说明· |
---|---|
性能优化 | 对接权限v3接口,大幅提高鉴权性能。 |
性能优化 | 支持聚合加速功能,提高超大表的查询性能。 |