大数据开发工程师
上海
本科及以上
不限专业
使用简历深度优化功能,快速提升简历质量
职位介绍
岗位职责:
1、负责大数据平台的数据开发与建设,包含离线/实时数据采集、清洗、加工、建模与数据服务输出。
2、参与数据治理体系落地:数据标准、数据质量、元数据、血缘关系、主数据/维表管理等能力建设与持续优化。
3、负责数据资产管理相关工作:数据资产盘点、资产目录建设、数据分级分类、标签体系建设与资产运营分析。
4、建设与维护数据仓库/数据湖(如 ODS/DWD/DWS/ADS 分层),编写并优化 ETL/ELT 作业,提升性能与稳定性。
5、与业务、产品、分析团队协作,梳理指标口径与数据需求,沉淀公共数据集与可复用数据模型。
6、监控数据任务运行与数据质量,定位并解决数据链路问题,保障数据时效性、准确性与可用性。
7、编写技术文档与开发规范,推进数据开发流程标准化、自动化与可观测性建设。
任职要求:
1、本科及以上学历,计算机/软件/数学/统计等相关专业,26届应届生。
2、熟练掌握 SQL,具备数仓建模能力,理解维度建模、指标体系与常见分层设计方法。
3、熟悉至少一种大数据计算/存储技术栈:Hadoop/Hive/Spark/Flink/Kafka/HBase/ClickHouse/Presto(Trino) 等。
4、熟悉至少一种编程语言:Java/Scala/Python,具备工程化开发能力与良好编码习惯。
5、具备良好的沟通协作能力与问题排查能力,能推动跨团队数据口径统一与资产沉淀。

