AnyFabric1.0.0.2版本发布通知
AnyFabric1.0.0.2版本作为智能数据运营的先驱版本,展示了在AGI时代,智能能力驱动数据搜索的初步尝试;AnyFabric逐渐完善指标体系,以满足企业智能化运营所需;强化数据虚拟化引擎的基础能力,帮助数据质量的探查。
【重大价值】
一、指标体系
不同部门对相同业务指标的定义、计算方法或者优先级理解可能不同,业务部门和考核部门之间也存在着矛盾。业务部门更关注于日常运营和具体项目的执行,而考核部门则主要负责评估业务部门的表现和达成目标的情况。这种角色差异可能导致双方在指标设定、业绩评价出现分歧。
AnyFabric提供维度模型创建的能力,基于模型构建完整的指标体系,包含原子指标、衍生指标、复合指标。保证指标口径的一致,降低指标沟通成本。
1.1数据建模:维度模型可视化设计
图1 数据建模功能展示
1.2指标管理:统一的管理视图
图2 指标管理功能展示
二、认知搜索
组织人员在利用数据时面临诸多困境,例如数据资源内容不清晰,数据关联难匹配、搜索结果不敢信等。AnyFabric1.0.0.2版本提供自然语言分词搜索,支持多关键词关联搜索,生成动态搜索维度,同时每个搜索结果都可查看推荐理由,确保了搜索结果的可信度。
2.1自然语言分词搜索,多维度结果筛选
图3 搜索结果展示
2.2探查数据记录,结果详情可溯源
图4 推荐详情
三、数据虚拟化引擎
数据虚拟化引擎是AnyFabric重要的技术能力支持,在版本迭代中数据虚拟化引擎的能力也在不断升级。
3.1支持多种的数据源适配
完成8种类型的数据源适配,包含:mysql、maria、hive、postgresql、clickhouse、doris、oracle、sqlserver。
3.2 支持对虚拟视图的增删改查操作并使用SQL查询
虚拟化引擎支持虚拟视图、数据表视图管理,屏蔽底层相关数据源,实现视图增删改查操作并支撑AnyFabric上层查询业务。
3.3 支持实时探查和异步探查两种模式探查数据内容
3.4 通过数据探查,检测数据质量
图5 质量检测作业配置
图6 数据质量报告
【功能优化】
一、场景分析
1.场景分析算子将原本引用业务表转为引用数据资源目录。简化了繁琐的数据开发加工流程,有效解决当前场景分析实施失败难以追溯的问题。
二、业务梳理
1.为满足不同组织的业务梳理需求,支持自定义业务域层级。
图7 配置层级
2.调整业务建模任务,将原有的主干业务任务、业务建模任务、业务表标准化任务,业务指标梳理任务合并为【业务建模任务】。
三、标准管理
1.优化了现有页面风格和交互逻辑,提高了用户友好度。
2.新增对“标准文件”的管理,便于追踪每个数据标准的源头。
四、数据开发管理
1.支持PostgreSQL进行数据同步和数据加工
五、资产全景
1. 本次更新支持在数据资产全景直观展示整个目录架构图
图8 数据资产架构