登录/注册
我要招人
400-885-9898
首页
城市频道
政企招聘
校园招聘
高端职位
海外招聘
测评及培训
职Q社区
更新于 12月30日
APP
举报
数据采集工程师
7千-9千
北京
丰台区
3-5年
大专
全职
招1人
收藏
立即投递
职位描述
数据爬虫
分布式爬虫
数据抽取
Python
Pyppeteer
PySpider
requests
Hadoop
Flask
岗位职责:
1.熟练使用Python高效、可靠的开发网络爬虫程序,在不同数据源抓取信息。
2.使用相关的库和工具,如Beautiful Soup、Scrapy等,解析和处理网页内容,从HTML结构中提取所需数据。
3.对抓取数据进行清洗、转换和整理,确保数据质量。
4.理解网站的反爬虫机制,开发应对策略,确保持续稳定地抓取数据。
5.实现自动化的爬取任务调度,定时触发爬虫程序,确保数据的及时更新和同步。
6.领导安排的其他工作。
任职资格:
1. 熟练应用python、Js,熟悉前端开发的相关领域知识,熟悉XPath、正则表达式。熟悉MySql/MongoDB/Redis/ES,对数据库有一定的了解。
2.熟悉相关的库和框架,如Requests、Beautiful Soup、Scrapy等,用于网络请求、网页解析和爬虫开发。
3.理解HTTP、HTTPS等网络协议,了解Cookie、Session、User-Agent等HTTP头的作用。
4.了解常见的反爬虫机制,能够应对IP封禁、验证码、User-Agent检测等问题。
5.熟悉服务器,能够在Linux环境下进行开发和部署,熟悉基本的命令行操作。
6.具有相关爬虫经验优先,本科及以上学历,懂php开发者优先。
工作地点
汉威国际广场1区东塔东二塔14-16
查看地图
完善一份简历
616万+企业在线搜索,780万+海量职位精准推荐
完善简历 涨薪36%
相似职位
数据采集工程师
1万-1.6万
北京
- 海淀
宸瑞股份
高级数据采集工程师
1.6万-3万
北京
- 朝阳
津税云(天津)共享经济有限公司
数据处理工程师
8千-1.5万
北京
- 海淀
北斗导航位置服务(北京)有限公司
信息道路采集工程师
1万-1.1万
北京
- 大兴
无锡同星人力资源有限公司
数据分析师
1万-1.8万
北京
- 昌平
北京中软环球信息技术有限公司
数据采集工程师
7千-9千
北京
- 丰台
中科伊诺(北京)国际医学研究院有限公司
查看更多相似职位
热门城市推荐
北京
上海
深圳
广州
天津
成都
杭州
武汉
大连
长春
南京
济南
青岛
苏州
沈阳
西安
郑州
长沙
重庆
哈尔滨
无锡
宁波
福州
厦门
石家庄
合肥
惠州
太原
南昌
昆明
热门职位推荐
包装工招聘
骑手招聘
保安招聘
技工招聘
车工招聘
叉车工招聘
中国银行招聘
电工招聘
安全员招聘
滴滴招聘
驾驶招聘
吊车司机招聘
保洁招聘
喷塑工招聘
酒店前台招聘
普工招聘
货运司机招聘
阿里招聘
木工招聘
博世招聘
品类运营
模具工程师
CNC/数控操作
网络推广
模具工
西餐厨师
物流/仓储项目经理
缝纫工
游戏数值策划
施工图设计
热门公司推荐
霸王茶姬招聘
肯德基招聘
顺丰招聘
美团招聘
京东招聘
饿了么招聘
比亚迪招聘
中国一汽招聘
北京汽车招聘
蔚来招聘
东风汽车招聘
长城汽车招聘
奇瑞汽车招聘
理想汽车招聘
长鑫存储招聘
天江药业招聘
蓝月亮招聘
安踏招聘
TCL招聘
海信招聘
联想招聘
海康威视招聘
宁德时代招聘
中兴招聘
新松招聘
京东方招聘
申通招聘
圆通招聘
中通招聘
百世物流招聘
德邦物流招聘
麦当劳招聘
星巴克招聘
海底捞招聘
蜜雪冰城招聘
瑞幸招聘
雀巢招聘
腾讯招聘
百度招聘
快手招聘
字节跳动招聘
新华网招聘
小米招聘
招商银行招聘
中信银行招聘
北京银行招聘
兴业银行招聘
交通银行招聘
建发集团招聘
中国移动招聘
中国联通招聘
中国电信招聘
中粮集团招聘
国药控股招聘
中广核招聘
中国船舶招聘
强生中国招聘
汇丰中国招聘
宜家招聘
立邦中国招聘
伊利招聘
青岛啤酒招聘
京港地铁招聘
宝马招聘
小鹏汽车招聘
华为招聘
特斯拉招聘
吉利招聘
奔驰招聘
海尔招聘
美的招聘
京东方招聘
施耐德电气招聘
德邦物流招聘
职位发布者
蔺茹/人事经理
刚刚活跃
立即沟通
蔺茹 / 人事经理
Hi~ 对职位感兴趣吗?快来下载智联APP和我聊聊吧,还能在线视频面试,方便又安心~
中科伊诺(北京)国际医学研究院有限公司
学术/科研,学术/科研,新闻/出版,咨询服务
100-299人
未融资
中科伊诺(北京)国际医学研究院是中科建兰旗下的中国临床医学研究智库(简称“中科伊诺”),以中国科学院生物物理研究所医学免疫诊断研究中心为支撑,围绕科学研究基础需求布局科研合作、国际出版、知识产权、国际人才交流与培养为主的科研促进平台,致力于打造科学研究与技术创新同步发展并相结合的创新性发展体系,为来自全全球的科研机构、医院、企业提供各类个性化科研服务和全链式整体解决方案,促进生命科学领域的国际化合作水平和技术创新。品牌优势:1、权威科研机构:中科伊诺源自中国科学院生物物理研究所的创新科技成果、由中国科学院生物物理研究所医学免疫诊断研究中心为支撑,联合国内外多家知名科研机构专家资源共同成立。2、完善的研发技术平台:围绕科学研究基础需求,布局科研合作、国际出版、知识产权、国际人才交流与培养为主的科研促进平台,加速全球前沿科技研究成果转移转化,建立科研协作运营机制。3、优质服务项目:中科伊诺拥有丰富的科研资源,整合医院、科研院所、国际科研团队,通过国际科研联合研究、创新成果转化与研究、国际人才交流与培养、临床研究基地建设为全球科研机构、医院、企业提供个性化科研服务和全链式整体解决方案。4、著名专家团队智库:中科伊诺汇集了来自伊朗、巴拿马、马来西亚、美国、荷兰等全球多国家具有丰富研究经验的科学团队以及来自中国科研机构、学院及大学的科研专家形成中科伊诺强大的专家智囊团。5、强大学术及专业支持:中科伊诺依托于中国科学院生物物理研究所免疫诊断研究中心的学术力量,有新加坡万仕WHIOCE出版社、伊诺科学出版社、澳大利亚百图科学出版社三大出版社为国际出版保驾护航;并有北京智客联合知识产权事务所提供知产专业支持,形成强有力的学术及专业支持。
公司主页