伴随着新一代信息技术的蓬勃发展,大数据应用与创新在国民经济各行业正快速推进体验式教育运用,数据规模越来越大,随之而来的是人才资源的巨大缺口难以满足产业发展需要。
青软集团结合高校及产业发展需求,引入真实产业级典型案例,研发转化为可用于高校「金课」设计、教学改革申报、学生实习实训、教学科研的内容——《基于Flink+Kylin+Druid的商业智能实时数仓决策平台项目》,为高校提供从实验环境到教学内容的一站式大数据实训室解决方案,与高校教师团队共探教学新思路,助力高质量应用型人才培养。
第三期「产业实战公开课」来袭,大数据方向典型产业案例《基于Flink+Kylin+Druid的商业智能实时数仓决策平台项目》即将与大家见面!
涵盖最新ETL处理数据技术→深入的Hive调优→OLAP工具整合→BI工具整合→最全的离线处理和实时处理的架构体系等主流实时数仓技术。
本次公开课结合前沿产业应用,分享技术要点与项目案例相结合的精彩内容,学习者可以与资深企业工程师交流行业发展,在实践中掌握产业级项目开发全流程。具体内容安排如下:
本项目源自某头部电商公司的真实系统,依托大数据实训室平台,将电商数据分析场景的产业转换成支撑教学环节的实训课程,通过30个子任务,实现对电商数据开发的实时大数据仓库系统的构建。
项目融合了数据采集、数据处理、分布式存储、资源管理、分布式计算、数据可视化等技术,将全部功能划分为离线数仓构建、实时数仓构建(包括用户行为实时指标分析、订单实时指标分析)、数据可视化等多个模块。其中,离线数仓涉及Kettle、Zookeeper、HDFS、DataX、Hive、Zeppelin和Kylin等技术,实时数仓涉及Canal、Flume、Kafka、Flink、HBase、Phoenix、Druid、Redis等技术,数据可视化涉及SpringBoot、JQuery等技术。
通过软硬结合、训战结合的特色化教学方式,进阶式的学习和实践,能够帮助老师们激发学生的学习兴趣,锻炼学生提高解决复杂工程问题的能力,逐步掌握智能化商业领域的大数据技术应用与项目开发,构建对电商数据开发的实时大数据数据仓库系统。
大数据实训室平台为本项目提供全面的开发环境、实验资源、教学资料,是教师快速开展专业课程实践教学、达成教学目标的得力助手。
覆盖全产业链的课程体系和实践教学资源,提供完善的教学课程资源、产业数据案例集、数据分析人员工作模板等内容。
支持项目运作中的考核,采用企业管理式运作模式,通过平台实时反馈学习成果,助推学生总结反思,同时也便于教师明晰学生实验预期效果,及时把控课程进度。
当环境不满足需求时,支持个性化定制来满足不同用户的使用诉求和习惯,提升用户的使用效率和体验。
平台涵盖上千个实践落地项目,精选行业级实验和项目实战应用场景,着重培养学生数据思维与解决业务问题的能力。
《基于Flink+Kylin+Druid的商业智能实时数仓决策平台项目》是商业BI领域的高典型性项目。青软集团结合专业特色与培养目标,在2022年、2023年,联合西北工业大学连续两年为软件工程专业的学生实施了该项目。
双方携手聚力,把人才培养的关注点聚焦于学生毕业时的工程实践能力,导入涵盖智慧金融、智慧农业、智能驾驶等众多领域的典型项目案例,寓教于练,寓教于战,快速提升学生综合能力,适配工程师创新与国际化要求。
杨震,大数据技术专家,15年IT行业从业经验,7年培训相关经验。擅长大数据应用、z6尊龙Java企业级应用、数据挖掘等,对Hadoop、Hive、Flume、Kafka、HBase、Spark等主流大数据框架有深入研究。
曾就职于华为、中科院、惠普等知名企业,参与过多个国家级、省市级项目、企业商业性项目,包括国家863项目Trustie、国家十一五重大专项核高基、华为全球电信CDN项目等。