• 系统概述
  • 行业痛点
  • 产品特点
  • 产品优势
  • 整体架构
  • 应用场景
  • 相关案例
 
系统概述

六合上甲融合了数据治理、数据建模、数据安全、数据资产运营、数据交换、数据服务六大系统,基于DataOps数据开发能力,集成数据调研、数据标准、数据质量、元数据、数据服务等一系列数据开发与治理能力,形成一种可拆可合的灵活应用模式,适用于各类不同的应用场景。

可帮助企业治理内部不断上涨的“数据悬河”,在数据迁移、构建和应用的过程中实现降本增效,让数据价值最大化。

行业痛点
  • 开发低效:烟囱式开发周期长,响应速度慢。
  • 治理成本高:数据质量参差不齐,缺乏标准化流程。
  • 资产复用难:数据价值挖掘不足,缺乏敏捷服务能力。
  • 数据孤岛:多系统、多厂商工具导致数据分散,难以统一管理。
产品特点
  • 激活数据商业价值,赋能企业运营与决策。
  • 打破数据孤岛,形成对数据的闭环管理。
  • 升级企业数据架构,改善企业开发流程。
  • 降低数据建设成本,提高数据治理效率。
产品优势
  • 融入多种咨询和交付方法论,包括仓库及湖仓交
  • 融入AIGC技术,加强脚本自动生成与自动测试
  • 真正实现数据一体化开发的DataOps理念
  • 支持场景式一体化开发理念:融合Project管理概念
  • 融入多种咨询和交付方法论,包括仓库及湖仓交付、数据资产盘点和运营、数据治理交付、数据安全咨询等
整体架构
  • 公共管理
    公共管理模块是用户单点登录和进入项目空间后,进行数据调研、脚本编写、集成任务、任务调度、数据服务等数据开发工作的统一入口,主要包括用户管理、角色管理、权限分配、项目管理、数据源定义等功能。
  • 数据集成
    数据集成模块是承载平台的基础能力,包括离线批量数据采集、实时数据采集、元数据查询和血缘分析、统一作业调度等
  • 离线集成和实时集成
    基于封装的离线批量和实时数据的读写组件,通过托拉拽向导配置的方式对输入组件、输出组件进行集成任务开发,通过可视化的方式对任务的执行参数、任务参数、调度参数进行配置,满足表对表、文件对表、表对文件、文件对文件即一对一、一对多的数据复制和数据分发的场景,且支持数据的转换、清洗、脱敏、数据压缩、多线程传输加速、缓存和并行读写、同步和传输速率控制(限制字节级别)等功能。
  • 元数据
    对接行内数据管控平台,定期同步业务系统和数据仓库等表/字段信息,实现元数据的浏览和血缘图形化展示。
  • 统一调度
    支持数据开发和数据采集以调用接口的方式发布调度任务,以DAG图的方式将任务组装起来顺序执行,可实时监控任务的运行状态和查看当前和历史运行日志,同时支持重跑、从指定节点恢复失败、暂停及取消运行任务、任务统计等功能。
  • 数据管控与开发
    项目组内开发人员的脚本开发和模型设计的工作入口,根据数据需求,接收指派的开发任务,基于封装的实时集成、离线集成、表输入/表输出、计算、脚本等组件,通过拖取输入表,输出表和算子,系统配置模板等可生成格式统一的SQL任务,支持设置调度参数设置、Shell、Python等脚本开发。
  • 数据服务
    项目组内开发人员基于向导式配置化开发,进行单表、SQL模式、组合服务和指令服务等多种类型的数据服务的开发,形成数据服务定义、开发、测试、发布、下线的全生命周期的API管理模式,发布至API网关,并通过渠道认证授权,供下游系统进行调用。
  • 运维管理
    运维管理模块主要是行内运维人员的工作台,主要有服务器资源、调度作业、实时/离线集成任务、实时计算任务和API服务的监控和统计分析,设置告警、查看应用日志、以及临时提数脚本开发等功能。
应用场景
  • 数仓搭建方法论
    依托成熟的数仓搭建方法论,快速实现数据采集、数据处理、数据管理和支撑下游应用。
  • 满足多种场景
    面对各类数据迁移的复杂过程,六合上甲运用强大的数据集成功能,满足多种场景的历史数据迁移需求任务。
  • 融合多系统于一体化
    融合多系统于一体化,可快速帮助企业构建全链路各类数据集市,提升数据服务和运营能力。
  • 形成企业可用资产
    可在复杂的网络环境下对实时数据进行采集与开发,同时支持同源数据与异构数据的集成,最终形成企业可用资产。
  • 支持离线单任务或多任务
    支持离线单任务或多任务集成开发,通过丰富的算法组件加工数据,最终通过数据服务对下游系统输出价值数据。
相关案例
河北农信、农信银资金清算中心、绍兴银行、宜宾商行、鄂尔多斯银行、内蒙农信、成都农商行、北部湾银行、浦发硅谷银行
其他产品推荐