工作职责
1、维护现有爬虫任务,确保现有采集任务的正常调度以及当网站改版能够及时修复采集程序。
2、新的数据采集网站需求开发,针对特定的网站能够自行进行抓包和破解,从而基于页面接口拿到需求指定数据。
任职资格
1、本科及以上学历。
2、熟悉Python编程语言。
3、熟悉linux系统的操作。
4、熟悉MySQL数据库。
5、熟悉爬虫的设计及实现流程,有过网站请求抓包的经验,了解正则表达式、HTML,JS,AJAX等网页信息抽取技术。
● 具备团队合作精神,能够与多个部门合作,共同完成项目和任务。
● 有良好的学习能力和自我驱动力,能够及时跟进新技术和行业动态。