26实习转正-爬虫研发工程师-大模型项目部

招聘部门：技术体系 岗位职责 1. 负责数据采集方案的制定与应用落地，参与需求分析和梳理。 2. 研究各种网页、app、小程序端接口，提高抓取效率和质量； 3. 负责可视化采集模板的技术调研、设计及开发。 ## 岗位要求 1. 计算机相关专业本科或以上学历，26届应届毕业生 2. 熟练使用python、linux，掌握动态网页抓取、抓包工具、爬虫框架、数据处理解析技术 3. 熟悉常见反爬机制，各类验证码识别、压力测试控制等； 4. 熟悉MySQL、MongoDB等主流数据库，能熟练使用SQL语句； 5. 了解主流爬虫框架工具， js逆向、Android逆向，熟悉HTTP/TCP等网络协议。 6. 有搜索，大数据处理，内容质量等相关开发经验优先。