【课程大纲】
| 学习阶段 |
课程内容 |
学习目标 |
| 第一阶段:数据库与 SQL 核心能力 |
1、RDS(MySQL)环境配置与 SQL 语言精讲2、掌握 DDL、DML 及复杂查询(连接、子查询、聚合函数)3、实战项目:用户行为日志存储与分析 |
掌握数据库核心操作与 SQL 编程能力,能够独立完成数据的存储、查询与基础分析,为大数据处理打下坚实的数据库根基。 |
| 第二阶段:云数据仓库与建模实战 |
1、阿里云 DataWorks 平台与 MaxCompute 数据仓库实战2、数据仓库核心概念、星型 / 雪花模型与缓慢变化维 (SCD) 处理3、企业级 ETL 流程实践(ODS→DWD→DWS→ADS)4、行业实战项目:电商数据仓库、车辆保险、金融审批 |
深入理解数据仓库架构与建模方法论,具备在云端(阿里云)从 0 到 1 构建企业级数据仓库的能力,并能处理保险、金融等复杂业务场景的数据需求。 |
| 第三阶段:大数据基础环境与国产数据库 |
1、Linux 操作系统核心命令、文本处理三剑客及 Shell 编程2、实战项目:基于 Linux 的银行反洗钱日志分析3、华为 GaussDB 数据库的 SQL、高级语法及 PL/SQL 开发4、实战项目:GaussDB 银行信贷交易系统开发 |
具备在生产服务器(Linux)环境下进行数据处理和任务调度的能力,同时掌握国产主流数据库 GaussDB 的开发技能,满足金融级应用开发需求。 |
| 第四阶段:大数据生态核心技术与开发 |
1、数据迁移与 ETL 工具:Kettle, Sqoop2、Hadoop 分布式存储与计算体系,Hive 数据仓库开发3、Spark 实时计算引擎:Scala 语言、Spark Core RDD 编程、SparkSQL4、AI 辅助编程:使用 Cursor+IDEA 进行代码生成与调试5、行业数仓实战:农商行信贷数仓、新能源汽车数仓、Spark 重构信贷指标 |
掌握 Hadoop+Spark 大数据核心技术栈,能够进行离线和实时数据开发,并运用 AI 工具提升开发效率。具备独立完成复杂行业数据仓库设计与开发的能力。 |
| 第五阶段:就业冲刺与实战赋能 |
1、简历优化与项目表述技巧2、AI 赋能求职:AI 简历优化、AI 辅助编程3、技术深度突破:Hive/Spark 数据倾斜八大解决方案4、高阶架构案例:大型银行数据中台架构设计实战 |
将技术能力转化为岗位胜任力,精通面试高频难点解决方案,通过企业级真题演练和 AI 工具赋能,完成从学员到专业大数据开发工程师的临门一脚。 |
【师资力量】
唐老师
校研副校长
大数据讲师
深耕技术与教育 20 + 年,在大数据、云平台运维系统具备非常丰富的实战经验
Cloudera 专家
技术专家
司老师
大数据就业部主任
大数据讲师
在大数据领域10+经验,主要集中于数据ETL,数据平台,运维方面等,证券资格从业证
交互设计
原型设计
【什么是大数据开发工程师】
大数据开发工程师是专注于设计、构建、维护和优化大规模数据处理系统的专业人员。他们负责处理海量、高增长率和多样化的数据资产,将原始数据转化为可供分析和使用的有价值信息。
【机构简介】
浙江省数字技术人才就业实训基地成立于 2020 年 10 月,是目前国内规模位居前沿的数字技术人才就业实训基地,获政府政策重点扶持,具备极高行业口碑。
基地以数字人才培育、就业服务、产教融合为核心定位,打造了综合数字人才就业服务平台,硬件设施完备,拥有独栋教学大楼与两栋配套宿舍,为学员提供一站式学习与生活支持。五年来,基地深耕数字技术领域人才培养,累计输送超 50000 名专业人才投身数字行业发展,在人才培养与就业输送领域成果显著。
秉持产教融合创新理念,基地深度对接行业需求与岗位标准,构建系统化人才培育体系,持续为数字经济发展输送高素质应用型人才,成为区域数字人才培养与就业服务的核心标杆。