统一规范数据管理平台,全方位推进数据治理与分析决策——大华集团BI运营之路

楼主
学无止境,精益求精
文|帆软项目组 陶强兵

大华集团简介

大华集团初创于1988年,总部位于中国上海,是国内第一批拥有房地产开发国家一级资质的房地产开发企业,也是中国最早开始全国化布局的房地产企业之一。大华集团是一家以房地产开发为主,集房地产投资、开发、建设、物业管理等业务为一体的,兼及投资管理和商业运营等多元化经营的企业集团,业务发展遍布中国最具发展潜力的10余座城市以及澳洲的悉尼、墨尔本两大都市。

目前大华集团大数据体系建设正处于初级阶段,通过对业务数据的采集、整理,已经沉淀了营销、财务、成本、运营等主题的部分业务数据。在数据决策系统中按照业务部门的需要进行报表的展现,能够提供一些日常的工作中业务人员需要的报表,以及生成一些简单的能够帮助领导进行决策所需要的汇总数据。

随着管理要求的提升,现有的数据分析方式已渐渐不能满足集团管理层的决策需求,我们希望通过一个完善的管理体系来规范我们的数据统计口径,并能够将各业务部门产生的数据进行主题分类,通过这些主题数据生成一些固定的指标数据,最终呈现有决策管理价值的分析数据供管理层使用。



项目实施情况

 业务需求
本次BI运营平台项目主要针对跨系统数据分析问题,构建全面的指标数据仓库,整合大华集团各个业务条线,实现业务数据跨系统分析,推进数据共享的信息化建设目标。具体推进以下列三大步骤执行:

1、指标体系全面梳理
梳理指标体系,构建全量数据仓库指标底层,建立各指标输出口径:是否填报、填报维度与对象、填报周期,以及对应各业务系统底层表、字段以及分析维度。统计系统自动输出指标占比,衡量整体信息化建设水平的推进进度。

2、数据仓库全量搭建
基于指标体系明细指标清单,按照各条线指标分类,建立条线维度模型与事实模型,要求模型不带地产业务色彩,即不对任何条线的数据做业务场景的聚合与对比,以保证底层模型的可扩展性与主题区别。层级上要求数据仓库建设至少三层架构,包括ODS,EDW和DM,其中ODS只做轻度聚合,EDW层按照指标体系主题分集团、公司、项目三级建设,同时每日保存以提供数据回溯功能,DM抽取各决策主题对应分析模型。

3、分析看板主题输出
以梳理过的指标体系为基础,以各专题指标分析作为数据展示的突破口,逐层分析。以集团综合分析看板为源头,分设项目货值、销售管理、运营管理、财务管理、成本管理、投资管理、商业管理、物业管理共八个管理主题分析,同时,从主题管理看板中公司维度可继续下钻到各公司项目维度指标的明细分析表。以此三层分析分别支撑高层,管理层以及业务人员的业务需求。

 时间规划
项目整体时间规划分如下几个阶段:项目启动、需求调研、指标梳理、数仓开发、主题看板开发、试运行与上线七个阶段,具体时间以需求推进为基础,其中需求调研、指标梳理、数仓开发与主题开发、试运行可按主题分阶段迭代推进。


 技术&业务方案
系统整体技术架构如下图,以数据流向为基础。源数据来自于各个业务系统,经过抽取转换与清洗,拼接上主数据维度信息,进入到数据仓库,基层数据模型进入ODS,汇总结果数据模型进入EDW,整合形成数据集市DM,向前台数据分析提供底层数据支撑。前台以数据仓库为基础,整合分析各业务条线数据,以不同的展现方式与展现载体向管理人员传达系统数据以支撑日常管理决策。



整个BI运营平台设计分为三层架构:基础数据平台、业务分析平台与决策管理平台。从底层逐层聚合,到中层各条线主题分析,到顶层汇总监控,配备丰富的展现形式与分析模式,打造全方位、多元化产业数据分析监控平台。

针对以上蓝图设计详细分析如下:
1)基础数据平台
基础数据平台以大华集团已有业务系统为硬件基础,以指标梳理成果为理论支撑,划分系统输出模块与手工填报模块。现有业务系统提供部分数据支撑,配备帆软提供的手工填报系统,组合完善整个指标体系,形成数据底层基础。
2)业务分析平台
业务分析平台以指标主题为基础拆分,基于基础数据平台,输出各条线业务数据分析。包括运营管理、财务管理、成本管理、投资设计、采购管理、工程管理、营销管理、物业管理、商业管理9大条线。采用丰富的呈现方式与分析模式,呈现方式包括电子大屏、移动端、BI表单、汇总表、明细表;分析模式包括经营地图、仪表盘、红绿灯、走势图、组合图等。




3)决策管理平台
决策管理平台以业务分析平台为基础,聚焦高层管理场景,以更核心的指标,更直观的展现方式实现数据的分析与监控,帮助集团管理人员更及时、更准确的了解集团运营情况,以支撑下一步的管理决策。
决策管理平台主要包括经营会议、职能分析、项目货值、财务资金、投资管理、开发运营、销售管理、物业商业等场景。

  实施过程
项目主要完成以上指标体系、底层建模和看板三大块内容以外,综合接触各业务系统,并进行了各业务系统的数据排查工作,明确了营销、运营、货值、成本等条线的数据治理与数据口径准确性的问题。
截止结项时点,项目累计开发报表共计161张,数仓搭建共计360多张底表、视图,INFORMATICA数据抽取映射共计141条,数仓整体大小11.87G,数据量级约1346w,单表最大量级392w。

序号 内容 说明 完成情况
1 需求文档 包括原始需求、需求确认文档 完成
2 工程还原 系统及数据库还原文档 完成
3 方案与计划 系统蓝图设计方案及执行计划文档 完成
4 系统文档说明 包括系统开发清单、系统输出截图、INFO配置文件、数仓PD模型、数据库视图与数据字典、用户操作手册等文档完成
5 总结及验收报告 项目验收报告 完成
6 相关账号         记录报表系统及数据库相关管理员账号信息 完成
▲项目交付文档

业务突破点及项目亮点

本项目最大的亮点在于从底层至前端整合了地产的多条线业务,包括多条线业务数据的治理、采集、整合、分析以及基于数据治理反向推进的数据业务口径的规范化建设。具体阐述如下几点:

1)指标体系全方位梳理
针对大华集团的实际业务情况进行各条线指标需求以及业务系统数据情况摸底,输出整体指标体系体检结果,虽然结果不是很理想,但反馈出来客观的数据底层状况质量,对后续数仓以及数据展现打下坚实基础,以及对后续其他系统建设提供了指标参照系。



2)数据仓库平台统一出口
数仓初步对接了大华集团所有业务系统,创建数据前端输出统一出口。同时,整合确定了一套大华认定的数仓命名规范。



3)数据业务口径反哺
基于项目执行进程,通过数据核查发现很多日常管理中的缺陷、以及基于日常管理数据分析的不合理之处。以货值为例:集团初始化货值未建立统一的口径、各人理解的口径各不相同、统一口径后发现底层系统数据无法支撑、基于已有数据做补充或替代口径完善输出等情况层出不穷。货值模块全面覆盖,从无到有,从初始化口径到口径验证、到口径核错完善、到底层明细输出、到前端数据展示、到整个底层前端通道打通,完成了一块极为重要的管理场景。其中数据处理层面也采用分级整合,拆分建模,形成统一的数据输出通道,后续如需增加或调整口径只需要调整DW层视图或底层ODS即可,改进了数据分析效率。



4)前端数据输出
本期项目前端输出主要包括9张看板+4层下钻分析、以及6张移动分析看板+下钻明细、以及其他各种明细数据采集、分析表共计160+张。覆盖业务面包括营销、运营、财务、货值、投资、成本、商业、物业八大条线,对大华整体数据分析信息化建设打下一个良好的基础。

5)OA审批流集成
本期项目基于填报指标模块,结合大华OA审批流系统进行了二次开发,提交触发OA审批流,同时调用ESB接口执行流程状态监控,并形成插件,一定程度上可推广至其他类似需求客户。


项目落地效果一览

  定时填报,整体监控
系统填报入口首页,采用小图标的模式进入填报界面,每个客户绑定对应模块权限以及报表填报情况,动态反馈在入口图表的右上角小红点内,通过后台时间段配置对填报入口进行执行管控。


  综合看板、全方位下钻
集团综合看板,整合投资、运营、货值、财务、营销、成本、物业、商业八大条线数据集中展现,每个指标均可下钻查询明细分析。


▲营销主题看板


▲运营主体看板

▲成本主题看板

▲货值主题看板

▲财务主题看板

▲商业主题看板

  
▲移动看板



项目实施服务咨询:http://www.fanruan.com/project/
分享扩散:

沙发
发表于 2019-5-9 20:41:10
板凳
发表于 2019-5-10 11:17:14
地板
发表于 2019-5-10 12:04:59
5楼
发表于 2019-5-10 17:59:34
给你点个赞
6楼
发表于 2019-5-11 18:23:01
7楼
发表于 2019-5-14 09:38:10
8楼
发表于 2019-5-14 10:16:49
9楼
发表于 2019-5-14 11:14:10
10楼
发表于 2019-5-14 13:25:19
11楼
发表于 2019-5-15 08:48:27
12楼
发表于 2019-5-19 09:23:37
13楼
发表于 2019-6-5 09:20:59
做的真不错
14楼
发表于 2019-6-12 21:00:20
好厉害
15楼
发表于 2019-11-25 13:39:19

好厉害
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

14回帖数 6关注人数 10126浏览人数
最后回复于:2023-3-6 09:24

返回顶部 返回列表