岗位职责:
1、从事网页及APP数据采集的技术工作;
2、负责数据采集系统研发,如采集任务调度,页面解析和结构化抽取,数据存储和读取等;
3、负责设计爬虫策略及反爬规则,提升数据采集效率、完整度和稳定性;
任职资格:
1、1年以上爬虫开发经验;能够独立承担爬虫工作;
2、熟悉JAVA/Python/go任意语言,熟悉常用的数据结构和算法;熟悉分布式、缓存、消息、搜索等机制;
3、熟悉爬虫原理、分布式架构,精通一种开源爬虫框架,熟练scrapy、feapder等一个或多个爬虫框架及原理,熟悉主流爬取技术,如协议破解、模拟点击、AST解混淆、app逆向等,能够解决封账号、封IP、验证码等问题;
4、熟悉Mysql、ES 和 Redis等使用;
【福利待遇】
1、 工资结构:基本工资+绩效+午餐补贴+交通补贴+全勤奖
2、 年终奖/调薪:年底双薪和每年进行N次调薪
3、 灵活晋升体系:管理岗位和专业技能双向发展通道。
4、 社会保障:购买社会保险(养老、生育、工伤、失业、医疗保险)
5、试用期:3个月,我们给予新人莫大的认可与鼓励,以能力和结果为导向,帮助你提前达成目标,提前转正
6、 公司注重员工的健康,提倡劳逸结合,每周双休,每天中午1个半小时配折叠床午睡,下午悠扬的音乐声为工作注入新的力量源泉;
7、 假期福利:按国家法定节假日放假及带薪假:婚假、产假、生育津贴、丧假、带薪年假(3-7天)等。
8、 培训体系:公司为新员工提供入职培训及专业培训,入职引导人一对一帮带;不同级别及不同岗位均有相应专业及管理培训,不断提高员工的综合能力。
9、 吃吃喝喝:免费咖啡机,各式饮品,给您元气满满的一天;
丰盛下午茶歇、月度生日会,致力于养胖每一个你;
10、开放融洽的团队氛围:扁平组织,开放分享的企业价值观;
丰厚团队建设经费,助力快速融入部门;
【上班制】 五天八小时工作制,周末双休
【工作地址】广州市白云区石槎路新域商贸园A栋502室(石槎路口公交车站)
地铁八号线聚龙站D出口和石潭站D出口