大数据
轨道交通大数据综合实训
本课程以用友集团的真实客户案例——某大城市的地铁轨道交通决策支持系统为项目原型,帮助企业实现降本增效,解决财务数据指导经营决策、人工分析效率低等问题,采集了来自16条地铁线路、471个站点的数据,包括客票销售情况、电力消耗记录、财务报表数据及站点地理位置信息等时空数据。本项目通过整合多源且结构各异的数据,进行深度处理与治理,构建统一的大数据中心,借助业财一体化的管理思路,对业务经营数据、电耗数据、财务数据进行整合分析,搭建轨道交通行业的业务指标体系,并对人-财、电-财、人-电进行关联分析,从而实现业财联合、业财融合,辅助制定运营优化策略和管理措施。
本项目涉及多源异构的时空数据采集、数据治理、Hive数仓建模和分层开发、数据可视化等内容,时空数据集高达近200万条数据,是大数据、物联网和轨道交通业务知识的交叉融合应用,助力院校培养应用型、创新型的复合人才。
实训网址(点击文末“阅读原文”可直接跳转)
https://www.qingjiaoclass.com/market/detail/69642
用友集团帮助交通行业实现数智化转型的真实客户案例:
某大型城市地铁
《轨道交通决策支持分析系统》项目
国家政策和行业现状
随着国家深化推进“交通强国”、“数字中国”和“双碳”战略,轨道交通行业(包括地铁和轻轨等)正朝着智能化、绿色化和服务多元化的方向发展。
鉴于该行业前期建设需要较大投资,在运营阶段,业内普遍重视如何通过提高效率和降低成本来优化运营,以应对财务压力并实现可持续发展。
客户简介
某地铁运营有限公司属于市属大型国有独资公司,国内最早的城市轨道交通运营企业之一,项目建设期间共开通运营16条线路,运营车站471座。
企业业务
该企业有两大主业:一是轨道交通运营服务,二是轨道交通增值服务。
客户需求痛点
1.财务分析报告无法指导业务经营决策,希望将财务数据、业务运营数据、设备能耗数据等进行整合分析,借助业财一体化的管理思路,辅助业务经营决策。
2.如何通过大数据分析,辅助制定降低电耗成本的管理措施?
3.各条地铁线路票务数据、各部门业务指标等不统一,急需数据治理。
4.手工分析费时费力,希望搭建专门的分析平台提高分析效率。
项目建设内容
1.建立统一数据中心
建立统一标准的财务与业务数据分析平台,构建数据资产,具备良好扩展性,支持数据共享。
2.多源数据融合、多系统集成
汇聚与共享不同数据库的数据,实现用户中心集成,单点登录。
3.统一数据标准、建立数据仓库
建立数据仓库,统一管理和存储各财务及相关业务涉及的数据;实现标准的高效数据模型,加工各主题的分析数据建模。
4.财务/票务/电耗数据的整合分析
整合关联分析16条线路、471个站点的财务数据、地铁票务数据、电耗数据,借助业财一体化的管理思路,辅助经营决策。
5.管理层领导桌面
为不同板块各层级领导定制驾驶舱及分析看板,支持指标预警和辅助决策;通过向下层层钻取查看更详细的分析内容提升管理效率。
6.数据驱动、支撑决策
通过简单拖拉拽进行自动化分析,建立领先的数据分析能力,打造数据应用建设,提供数据洞察,支撑管理决策。
系统应用架构
技术架构设计
技术栈 | ||
Hadoop | ZooKeeper | MapReduce |
Sqoop | Hive | Python |
MySQL | FineBI | …… |
系统主界面
总体驾驶舱大屏
电耗主题分析大屏
客流主题分析大屏
财务主题分析大屏
国际CoMET指标及排名大屏
技能训练目标
1.理解轨道交通大数据项目的业务应用场景
2.掌握大数据离线数仓分析项目的开发流程
3.能根据应用场景完成技术选型及技术方案
4.能根据技术方案搭建Hadoop大数据平台
5.能根据业务需求实现多源异构数据的采集处理
6.能使用Hive数仓相关技术实现数仓建模及数据治理
7.能使用Hive数仓技术搭建并实现业务指标体系分析
8.能使用BI工具实现分析结果的大屏展示和指标预警
课程内容和实训平台
课程大纲
1.项目需求及技术方案设计
1.1 《轨道交通决策分析支持系统》项目需求
1.2 业务知识和业务流程
1.3 系统应用架构和技术方案设计
2.数据采集和数据治理
2.1采集高德地图的经纬度空间数据
2.2 采集地铁官网的线路站点数据
2.3 合并并清洗地铁官网和高德地图的数据
2.4 采集处理地铁刷卡数据并存入Hadoop集群
3.客流主题分析——数仓构建与分层开发
3.1 加载地铁刷卡数据到数仓ODS贴源层
3.2 开发实现数仓DIM维度层
3.3 开发实现数仓DWD明细层
3.4 开发数仓DWS汇总层各线路客流量指标
3.5 开发数仓DWS汇总层各站点客流量指标
3.6 开发数仓DWS汇总层各OD流向人数指标
3.7 开发实现数仓ADS数据应用层
4.电耗主题分析——数仓分层开发
4.1加载地铁电耗数据到数仓ODS贴源层
4.2开发电耗主题数仓DWD明细层
4.3开发电耗主题数仓DWS汇总层
5.指标分析结果展示与预警
5.1 实现总体驾驶舱大屏
5.2 实现全网客流分析大屏
5.3 实现全网电耗分析大屏
5.4 实现其他大屏及系统主界面
项目案例
助力院校打造:智慧交通的办学特色
针对交通行业企业B端的大数据+轨道交通应用场景真实项目,涵盖多源异构的数据类型(地铁财务、票务、设备能耗等),数据规模达百万级,助力院校发展智慧交通教育特色,培养符合国家战略的交通强国数智人才。
人才培养
培养工管结合、多学科交叉融合的复合型人才
契合高校新工科建设的人才培养思路,本项目属于“大数据+物联网+财务管理+轨道交通经营管理业务”的交叉融合应用,培养未来智慧交通领域产业端需要的应用型、创新型复合人才。
实训内容
采用用友集团真实的客户案例和工程项目实施流程
选择用友集团帮助交通行业数智化转型的真实客户典型项目,采用企业真实的软件工程项目实施,训练学生项目需求分析、技术方案设计、Hadoop环境搭建、大数据处理开发、数据可视化、系统测试的综合软件工程能力。
实践平台
支持快速部署大数据实训环境,自动批改学生项目
大数据项目实训平台基于K8s、Docker容器技术,方便教学时快速部署复杂的大数据实训环境,同时通过设置任务考核条件,支持各个实践任务的自动批改、自助生成实验报告,大幅提升备课教学效率。
关注“新道工科”公众号,“青椒课堂”平台内容全知道!
新道工科聚焦新IT与工业互联网,涵盖信息安全、工业互联网、大数据、人工智能、区块链、智能网联汽车、智能制造、工业智能等多个专业领域,基于用友集团和新道科技的产业基底与技术优势,不断深化和拓展数智化教学产品和内容,形成覆盖范围更广的课程体系及综合解决方案,为本科、高职、中职院校提供优质教学服务。
扫码关注
新道工科
微信号|hongyaa-2012