离线数仓架构师
|
|
上海市 |
|
2024-04-25 |
Seniority level职位级别 | 中高级 |
Industry公司行业 | 互联网 |
Employment type职位性质 | 全职 |
Function工作职能 | |
Number招聘人数 | 1 |
Responsibilities(职位描述)
岗位职责:
1.参与大数据平台数据仓库规划、架构及研发,包括离线、实时的数据模型规划,建设PB级的数据集市和数据平台;
2.数据仓库模型的ETL实施,ETL性能优化、技术攻关等;
3.参与平台数据治理相关工作,负责数据质量、数据一致性及稳定性保障等建设;
4.参与平台标签体系、数据产品与应用的数据研发,发掘数据价值,以数据驱动业务不断发展。
Requirements(任职要求)
任职要求:
1. 本科及以上学历,计算机、软件工程、数据分析或相关专业出身, 5年以上数仓开发经验,极强的问题解决能力;
2. 精通数据仓库理论体系,对分层设计、维度建模等有深刻的认识和实战经验,熟悉不同建模方法的优劣;
3. .积极主动贴近业务,有良好的沟通协调能力,数据敏感度高,能够快速理解业务模型及数据模型;熟练掌握SQL/HQL/Spark SQL开发及优化技能,快速ETL实施能力,对SLA有较深刻的认识及强烈的责任心;
4. 熟悉大数据生态技术栈,具备较丰富的Hadoop,Hive,Spark,Flink等大数据工具应用和开发经验,对MR/SPARK有源码级经验是加分项;
5. 有互联网工作经验优先;有数据中台建设经验优先;有数据分析能力优先;勤奋,学习能力强,有强烈的自我驱动力。