岗位职责
1.负责数据采集与维护工作;
2.配合数据的清洗、提取、去重及入库等工作;
3.及时响应业务需求进行开发。
岗位要求
1.大专及以上学历,1~2年爬虫开发工作经验,优秀应届毕业生亦可;
2.有分布式爬虫开发经验或熟悉PHP和go语言,有一定的后端开发经验优先;
3.熟悉linux,了解Nginx、docker,熟悉scrapy、selenium、requests等常用模块;
4.熟悉MySQL、Redis等数据库;
5.熟悉HTTP协议,熟悉网页抓取原理,熟练掌握XPath、正则表达式、bs4等提取;
6.有良好的代码习惯,逻辑性强,命名规范,责任心强。
职位福利:五险一金、年底双薪、餐补、节日福利、员工旅游、带薪年假