大数据平台开发工程师(非数仓开发)
北京
本科及以上
计算机类
使用简历深度优化功能,快速提升简历质量
职位介绍
职位名称: 大数据资产平台Java研发工程师
职位亮点:
1. 投身公司级核心数据资产平台建设,打造统一、智能、高效的数据资产服务中枢,直接赋能快手直播、电商、商业化、生活服务、海外等全业务线数百个应用。
2. 直面海量数据与超高并发挑战,主导设计并优化日均调用超6000亿的核心服务,在复杂业务场景中锤炼高可用、高扩展的系统架构能力。
3. 紧跟技术前沿,探索大数据与大模型的深度融合,通过智能化手段提升数据资产运营效率与价值洞察深度,驱动业务创新。
职位描述:
1. 负责公司级数据资产平台的核心服务体系建设,涵盖标签服务、判存服务、画像分析、策略运营等核心功能模块的研发与迭代。
2. 重点构建高可用、高并发、低延迟的数据服务层,优化“分群判存”、“标签查询”、“圈选分析”等核心服务的性能与稳定性,保障日均千亿级调用规模下的服务体验。
3. 深入理解业务,将快手海量的用户、设备、内容、商品等数据资产转化为标准化、服务化的数据能力,打破数据孤岛,为精准营销、个性化推荐、广告投放等核心业务场景提供稳定、可靠的数据支撑。
4. 探索并引入微服务、OLAP引擎、内存计算、流式计算等先进架构与技术,持续提升平台的技术先进性与系统效率。
5. 积极探索大模型(如Qwen、GPT、DeepSeek等)在数据资产领域的应用,包括但不限于:通过大模型增强自然语言交互式数据查询与分析、智能标签生成、自动化洞察报告、策略优化建议等,推动平台向智能化演进。
任职要求:
必备技能:
1. 精通Java及多线程编程,对JVM原理有深入理解。
2. 熟练掌握Redis、Kafka/RocketMQ等常用缓存、消息中间件。
3. 具备丰富的分布式系统设计与开发经验,深刻理解高可靠、高并发、高吞吐系统的设计原则。
4. 熟悉大数据生态技术,如Hive、Spark、Flink、ClickHouse等,并有实际项目应用经验。
5. 计算机相关专业本科及以上学历,具备***后端或大数据平台开发经验。
核心素质:
1. 对技术有热情,对代码质量、系统设计和开发规范有极高的自我要求。
2. 具备出色的逻辑思维能力、问题拆解与解决能力,能耐心应对复杂业务和系统挑战。
3. 善于沟通,具备良好的团队协作精神,能推动跨团队项目合作。
符合以下条件者优先:
1. 有大数据资产平台、用户画像系统、标签平台等相关系统研发经验者。
2. 有开源社区贡献经验,或对相关开源项目(如Flink、ClickHouse等)有深入研究。
3. 具备大模型应用项目实践经验,包括但不限于:Prompt工程、RAG应用开发、大模型微调、智能体(Agent)构建等,熟悉主流大模型技术栈。

