00:00
数据中台全链路数据处理能力演示3、AI数据支持多种数据库类型,将业务数据完美注册到系统中。这里火电业务下的数据表都全部注册到系统中,每个表收集的都是原始数据。接入后这里就可以通过自然语言或填写SQL语句,对需要及时核实查询,还可以先看清再用,避免盲目入仓。当需要目标库持续跟圆库保持一致,而不是搬一次就完事。同时圆库是正在跑业务的生产库,又不能被拖慢时,就通过数据资产平台进行同步,点击启动后在日志中查看同步情况,成功后返回目标端看出数据是否见表并同步数据。
01:00
同时还支持多种数据源之间的数据同步,覆盖日常业务常用的数据源。当企业需要大批量跨库按计划要班准的同步,就用数据集成平台,平台提供一键设置,方便快捷。支持自动建表,无需手动创建,完成后在批量构建中触发构建,进行同步并显示成功后完成本次同步,目标端已成功建表并同步数据。这两个同步怎么配合使用存量历使用数据集成,一次性搬进来之后增量变化用数据库同步CDC持续追平。两者配合既解决历史数据怎么办,又解决新数据怎么及时来。数据同步后用标准管理定规则,统一命名和口径。
02:00
在数据管理中编辑数据标准规则,然后在数据关系中将创建的规则套到真实数据上,在标准任务中心进行实际对照执行,在数据门户中把物理上存在的数据登记成业务上可见、可查、可用的数据资产,在这里编辑数据口径信息,统一口径和数据规则后,在数据质量平台中进行校验准确性与完整性,这里可以根据规则精细到字段及校验,设置定时和关联告警规则,不用每次手动执行前面,这里解决数据干净口径统一在数据模型管理,解决数据成型用可复用,这里设置模型字段信息,创建完模型后就可以在数据管理中添加新数据。在数据目录平台中把。
03:00
人平台的库表、字段、源数据统一采集管理起来,实现找得到、看得懂、追得清、管得住。业务中并不是每个角色都能看一样的数据内容,这里需要通过数据权限划分,对权限设置可以精细下分到字段级,如销售的利润信息不会给销售层的业务员查看,权限设置完成后下发到各功能模块,由统一的健全服务在各模块中强制生效。完成治理后的数据,在数据资产瓶中可以看这些资产长什么样,还可以直接查询,这里可以快速查询数据,还可以查看数据血缘的上游数据流入与下游数据流出,在数据血缘这里可以看到。
04:00
更详细的血缘关系。当需要跨系统、跨库拉通数据做专题分析时,用数据中枢平台做多元关联整合分析。这里通过拖拽组件编辑工作流程,设个每个节点的运行规则,这里设置读取什么数据,做怎样的聚合计算,这里设置输出到哪里,完成后点击发布会自动执行分析,并在列表中可以查看同步状态,打开目标表,查看已经写入分析数据。当需要按日按月稳定产出大批量指标报表时,用离线开发平台做周期性指标生产分析,通过拖拽组件编辑流程并设置节点规则,用SQL语句设置节点运行规则,完成后启动分析,在任务实例中查看运行状态。
05:00
在设置的目标表中看到已经写入分析结果。日常业务中如需每天清空上次数据表后在同步新数据,可用离线开发做自动流程,并设置每天下班后自动执行,第二天上班即可看到清空并同步后的新数据。业务中需要秒级监控设备运行状态,及时发现异常时,就用实时开发IDE进行分析,运行成功后在运维中心查看数据表分析关系,这里给出分析的数据表工作流程,也可以查看字段的血缘关系,为数据分析提供可靠性背书。在设置的实时分析目标表中查看分析数据已成功写入这里。三种分析方式在业务中一天一次就够用,中枢必须准时可靠,用离线一秒都不能等,就用实时开发IDE,三者配合全面覆盖企业业务。
06:00
分析需求数据平台是整个中台的机房加发动机,是数据流的中转站和作业的执行场,根据运行的分析需求分配服务组件来运行。数据平台负责提供存储、计算、调度和稳定运行,在数据分析时提供存储、算力与调度资源,在后续数据智能应用中提供稳定的数据供给和秒级查询支撑,是整个数据体系的共同底座。分析后的数据需要跨部门、跨系统获取数据时,通过数据共享平台做数据申请、审批、授权和接口订阅,实现按需共享,安全可控。申请方获得密钥后按授权范围调用,实现数据不出域能力可对外的安全共享模式。需要将数据转变成可视化的图表投屏并分析时用BI可视化分析。
07:00
可以用多表进行管理分析,数据视图更具有分析价值。从数据表中选择维度和指标数据后完成设置,选择数据视图类型。数据视图还可以导出成PDF或文档格式,还可以通过链接分享将数据落实应用。当业务要自己能查,数据的口径要统一,指标要附用时,通过数据指标平台把数据从表变成可用的指标,把指标组成场景数据集并发布业务即可检索、下钻、查树、追源使用,然后创建智能助理,用自然语言提问,系统自动完成意图解析、字段映射等返回查询结果。在业务中的图片以及视频文档等非结构化数据,通过多模态存储底座进行一站式存储和管理。
08:00
通过存储密钥为每个调用方发放和管理谁能访问哪块数据的钥匙,实现数据安全访问。在AI应用开发底座,这里可以将以上传到多模态数据存储底座的图片做目标识别、模型训练或大模型微调。这里通过选择左边的节点拖拽到画布中,并按顺序连接对每个节点进行设置规则。在这里可以设置从多模态数据存储底座中读取哪个存储文件夹中数据,将非结构化数据也活用起来。数据完成分析后,在AI多模态分析中,通过连接数据库以及补充知识库业务内容,创建模型后,通过自然语言描述分析需求,AI就会自动加载分析技能,系统会自动。
09:00
拆分步骤,并选择关联的数据进行分析,整个分析过程清晰明了,分析完成后会生产完整的分析文档,支持下载,灵活使用。在大模型应用平台中,通过添加智能模型并关联数据集和知识库,在构建里创建的是可上线、可版本化、可编排技能与工作流的大模型应用,创建后在绘画里被使用,到这里已经完成了数据注册到分析,然后到数据智能应用的全链路演示,体验了数据从注册系统后到转变成可靠的高质量数据到活用数据分析以及应用实现数据价值。平台还提供了数据后台管理,作为统一的用户权限管控与底层数据源监控,为全链路数据流转提供安全稳定的基础运维保障。以微前端加可插拔架构为核心,向下兼容国产软硬件和主流数。
10:00
据库向上提供统一的集成与治理入口。奥林信创一体化版本国产全站环境下的自主可控数据基座,以OS+CPU+DB国产全站为基础,采取向下屏蔽底层差异,向上提供统一环境的方式,打通从硬件到软件的自主可控数据链路。
我来说两句