当前位置:首页 > 典型案例
山东海科数据整合项目案例
  • 发表时间:2022-12-27 点击数:1781
  • 来源:未知



     
 山东海科化工集团始建于1988年,经过三十年发展,已成为集石油化工、新能源材料、半导体化学、营养与消费化学、医药为一体的综合性化工企业集团。旗下公司主要分布在山东、江苏、安徽、韩国PCT公司等十余家下属公司,并在新加坡、香港、上海设立国际贸易公司。拥有员工4000余人,入选达沃斯论坛“全球成长型公司”,“中国企业500强”、中国制造业500强

随着集团信息化发展到一定程度时,数据管理的好坏很大程度的影响着企业信息化进程,决定这企业信息化最终的成效。目前信息化建设基本都是从独立的业务需去出发建设的信息系统,导致企业内部企业间的数据、资源不能共享,产业链、供应链信息难于贯通。通过山东中翰软件在数据治理方面的综合助力山东海科化工在ERP、电子采购、石化电商、新源电商、赫邦电商、石化物流、CRM、MDM、LIMS等系统间。将杂乱繁琐的数据进行整合,为集团公司信息系统集成、共享、业务系统提供了数据标准支撑。

图片1

 

1、项目建设原因

根据海科集团数字化转型需要,结合海科集团数据管理及应用现状和业务应用需求,通过对海科集团现有信息系统以及数据资源的梳理,搭建集团统一的数据共享平台,建立统一的数据资源中心和数据管理体系,实现数据的统一采集、统一存储、统一管理,满足数据一次源头采集,多次应用共享,为集团的数字化转型奠定数据基础。

2、项目建设目标

对海科集团信息系统、数据管理现状及相关业务流程、需求进行调研、梳理,形成海科集团数据管理现状报告及符合海科集团数据需求的管理体系规划,梳理和分析海科集团的数据管控需求。

依据调研情况,提供最佳实践,建立海科集团管理体系、数据管理组织,并建立符合海科集团业务需求的数据标准,包括元数据标准、ODS数据标准、采集标准、数据模型标准、指标数据标准等。

搭建海科集团数据资源管理平台,平台主要功能包括数据模型管理、元数据模型管理、数据采集管理、数据资产管理、元数据管理等。

完成数据从源系统(包括历史数据和增量数据)的抽取、清洗、标准化、存储、共享、发布工作,实现数据从新增、应用、变更、终止的全生命周期管控。

建立数据管理规范及制度,包含标准规范管理制度、运维制度、接口规范、应用规范、平台规范等。




1、项目启动、调研阶段

2020年4月山东海科化工集团数据整合项目建设正式启动,同时成了相关项目领导小组、项目实施小组和专业执行小组。充分调动公司相关资源对数据整合项目进行支持。为了让各部门充分重视并积极参与整合项目建设,2020年5月由海科集团卓越与智能部牵头并组织召开了项目启动会,集团公司领导及格部门负责人参与了会议。通过启动会各部门达成了相应共识,牵头部门对各业务部门提出了各项工作要求,明确了责任分工,为后期数据整合项目的工作开展奠定了扎实的基础。

会后对相应的实施组织进行了划分,集团财务部、集团采购部、石化事业部、赫邦公司、新源公司、润晶公司组织的调研工作进行相应规划。数据整合项目整体是一个统筹业务流程的整体过程,在调研期间是对公司各部门整体业务相关梳理。将公司繁杂的业务流程梳理完成,并将相应数据与相关业务流程进行关联。使底层数据与相关的业务紧密结合,使整体整合数据为相关业务作出相应支撑,对公司其他系统作出相应数据支撑。

2、标准制定、方案构建

数据整合的过程是一个循序渐进前进的过程,在制定过程中需要与各部门的相关业务紧密集合。制定更便于海科公司业务的相关标准,整合成为相应的方案为进一步的实施以及数据整合项目体系建设提供相应支持。根据海科相关调研形成《海科化工需求规格说明书》、《海科数据整合项目整体建设蓝图》、《海科数据整合项目数据标准》、《海科数据整合项目数据》、《海科数据整合项目采集标准》、《海科数据整合项目数据管理标准》。

3、方案实施、体系建设

依据《海科数据整合项目整体建设蓝图》对整体实施进行相应指导。

1)全量数据库建设

根据海科蓝图形成相应的数据模型建设相应的全量数据库建设
从相关业务系统将相应数据抽取到相应贴源层,贴源层相关数据为业务数据库全量数据。整合层建设是根据相应业务,对各系统中相关业务表中字段进行整合。对企业存在繁杂的业务逻辑进行分析,在其中增加相应标识字段将其分类。根据完成的整合层从而形成全量数据库。

 
     2)元数据建设

根据已形成的相应全量数据库使用普元相关元数据系统。通过相应元数据可对数据影响分析、血缘分析、全链分析、分析显示力度切换、表关联度分析、属性差值分析、ETL调度任务分析等功能。相应元数据可形成相应版本,通过版本管理功能可以了解元数据历史,掌握元数据生命周期。

3)数据资产目录

在相关全量数据库建设完成的基础上,对相应业务实体在中翰MDC系统中进行展示。可对相应的业务实体详情进行展示,对数据全生命周期进行管理,在系统内对相应数据进行血缘分析。

4)数据填报

因海科相关业务存在大量相应线下业务,无法进行数字采集因而在DMC系统中存在相应数据填报功能。数据采集填报可以满足灵活报送数据的需求,是能快速配置各类数据采集模型的标准功能。其通用性好、可扩展性好、简单易用。可以和贴源层紧密关联,动态配置,实现异构数据源之间的表关联,真正实现多源填报。并且相关数据可以对相应报表系统进行支持。

5)数据采集

海科数据资源整合项目将从10个业务系统中抽取数据(主数据平台、NC、电子采购、石化电商、新源电商、赫邦电商、LIMS、石化物流、CRM、合同管理系统)。涉及的数据库为MYSQL、ORACLE、SQLSERVER三种数据类型。通过普元DI,根据相应需求制定相应抽取以及转换,并对相应信息进行清洗。从而完成海科业务系统数据与海科全量数据库的数据互通。



1、海科全量数据库
 
2、海科数据元平台

3、海科数据抽取整合工程

4、海科数据管控平台

5、海科集团数据资源整合项目数据采集标准

6、海科化工集团数据管理制度