(一)岗位职责
1.负责分析项目所需要的数据采集与处理需求;
2.负责网页信息、APP数据等采集、解析、处理和入库;
3.研究策略和防屏蔽机制,解决关键技术难点,提升数据抓取效率和质量。
(二)岗位要求
1.硕士以上学历,计算机信息系统及相关专业,3年以上工作经验;工作经验丰富者优先;
2.熟悉Java/Python等主流语言,熟悉反爬虫、验证码识别、自然语言处理等技术者优先;
3.对现有主流的网站、APP有一定数据采集经验;
4.具有外文数据采集、分析能力,有大规模数据采集与处理经验者优先;
5.拥有良好的发现、分析、解决问题的能力,学习能力强,有责任感,具有团队精神与服务意识;研究策略和防屏蔽机制,解决关键技术难点,提升数据抓取效率和质量;
6.面试提供自己编写的相关代码案例。