【工作内容】
- 负责网络爬虫系统的开发与维护,能够独立完成数据抓取、解析、存储等全流程工作。
- 根据项目需求,设计和实现高效稳定的爬虫系统,确保数据获取的质量与效率。
- 参与团队的技术讨论,持续优化现有爬虫技术方案,提升数据处理能力。
- 对爬虫系统进行性能调优,确保其在大规模数据采集场景下稳定运行。
- 协同其他部门,为业务发展提供数据支持和技术保障。
【任职要求】
- 计算机相关专业大专及以上学历,对编程有浓厚兴趣。
- 熟悉Python语言,具备良好的编程习惯和算法基础。
- 了解HTTP协议,熟悉正则表达式、XPath等数据提取技术。
- 掌握至少一种数据库技术(如MySQL、MongoDB),能熟练使用SQL进行数据操作。
- 具备良好的问题分析能力和逻辑思维能力,能够独立解决技术难题。
- 学习能力强,愿意接受新技术挑战,具有良好的团队合作精神和沟通能力。
- 有实际爬虫项目经验者优先考虑,但本岗位不限制工作经验。