大数据工程师

岗位职责：1、参与制造大数据平台及数据基础设施的规划、建设与持续优化；2、参与业务系统的海量制造数据的采集、清洗、加工、存储和服务；3、参与离线及实时数据处理链路开发，建设稳定、高效的数据处理任务及数据服务；4、参与数据仓库、数据湖/湖仓、数据集及数据服务体系建设，为AI算法、数字员工及业务分析提供高质量数据；5、参与大数据平台性能优化、任务监控、数据质量管理及稳定性建设；6、配合AI算法及应用开发团队，完成AI场景所需数据的加工、特征构建及数据接口开发；7、探索大数据与AI技术融合，参与面向智能制造的数据平台及AI数据基础设施建设。任职要求：1、本科及以上学历， 计算机、软件工程、大数据、信息工程、自动化等相关专业；2、具备良好的计算机基础，熟悉数据结构、操作系统、计算机网络及数据库基本原理；3、熟练掌握SQL，具备Python、Java、Scala等至少一种编程语言基础；4、了解Hadoop、Spark、Flink、Kafka、Hive等一种或多种大数据技术；5、熟悉MySQL、Oracle、PostgreSQL等关系型数据库中的一种或多种；6、具备良好的数据分析及问题定位能力，对海量数据处理和系统性能优化有兴趣；7、具备良好的学习能力、团队协作意识及责任心。加分项• 有Spark、Flink、Kafka等相关课程设计、项目或实习经历；• 了解数据仓库、数据湖、Lakehouse、ETL/ELT等数据工程技术；• 了解ClickHouse、Doris、StarRocks、HBase等数据系统；• 熟悉Linux、Shell、Docker、Kubernetes等技术；• 有数据建模、数据治理、数据质量或数据平台项目经验；• 对半导体制造、工业大数据及AI数据基础设施有兴趣。