产品概述

THE BDG 大数据治理平台

THE BDG大数据治理平台是通过质量评价、清洗加工、融合计算、数据脱敏等各类数据治理服务对数据资 源的可用性、可靠性和安全性提供总体管理的平台。平台主要包含数据源管理、治理任务配置与调度、治理组件 (评价、清洗、融合、脱敏等)管理、治理资源(标准、规则、脚本等)管理和元数据管理等功能。THE BDG大数据治理平台不仅能发现问题数据,且提供将问题数据转换为准确、可用、可靠数据的治理方法,为后续的数据流通、数据化运营、数据价值挖掘、数据创新等提供基础保障,以数据驱动企业升级。

技术优势

数据整合和转换

提供强大的ETL(Extract,Transform, Load)功能,可快速地从多个数据源中抽取、转换和加载数据。支持广泛的数据源和目标,包括关系型数据库、文本文件、Web服务等,以及各种数据转换和清洗操作,实现数据整合和规范化。

元数据管理

对数据集或数据集系列的定义、要素、内容、范围、质量、管理方式、数据所有者、提供方式等信息进行管理。支持一键元数据分析,快速理清数据资源的来龙去脉,构建数据地图,为数据标准建设和数据质量提供基础支撑。

数据质量管理

提供多种数据质量管理工具,自动检测和修复数据中的错误和不一致性。支持数据清洗、去重、标准化等操作,并提供数据质量分析和监控功能,提高数据的准确性和一致性。

数据标准管理

支持对国家、地方、行业数据标准及项目数据规范的统一管理,针对用户需求可自定义数据标准体系,为数据治理提供数据规则依据。

自动化和调度

根据用户定义的时间表和条件,自动执行数据整合、转换和加工任务。提供灵活的调度和监控功能,支持任务依赖关系、故障恢复等,提高工作效率和数据处理的稳定性。

工作流管理

THE BDG大数据治理平台集成批、微批、实时流等多种处理框架满足高吞吐、大数据量和低时延实时处理等多方面的数据计算要求。采用分布式集群架构,具有很高的容错性、稳定性和可用性,可支持TB、PB级以上结构化与非结构化数据存储与处理。

应用场景

场景一 能源监管与安全监测

大数据治理平台能够助力能源企业实时监控能源设备的运行状况,通过实时数据接入及治理及时发现潜在的安全风险并提供预警,从而确保能源供应的稳定性和安全性。

场景二 企业运营管理优化

通过数据治理确保ERP系统中的财务、人力资源、供应链和生产数据的一致性、准确性和可靠性。通过标准数据维护统一的客户视图,确保客户数据的准确性,并用于改进市场营销策略和客户服务。以数据驱动企业运营管理优化落地。

成功案例

点击下载