更新于 今天

大数据开发工程师

8千-1万
  • 重庆渝北区
  • 3-5年
  • 本科
  • 全职
  • 招2人

职位描述

Hadoop数据建模ETL数据仓库Python
1、数据采集与整合;数据收集:从各种数据源(如数据库、文件系统、网络接口、物联网设备等)收集数据。

2、数据存储与管理;数据库设计与维护:根据业务需求设计数据库架构。

3、数据转换与加工。编写 ETL 程序,从源数据中提取数据,按照业务规则进行转换(如数据聚合、计算、过滤等),然后将其加载到目标数据存储中。

4、数据产品开发与支持,数据接口开发:设计和开发数据接口,为其他系统(如内部业务系统、外部合作伙伴系统)提供数据访问服务。

5、数据质量保障与监控,数据质量评估:建立数据质量评估体系,确定数据质量的评估指标(如准确性、完整性、一致性、时效性等)。

任职资格

【任职要求】

1、计算机相关专业,3年以上数仓开发工作经验。

2、熟悉数据仓库维度建模方法论,熟悉数据仓库分层设计理论,有较强的ETL实施经验;

3、熟悉linux操作系统,精通sql开发;

4、熟悉常用的数据库( Mysql forbid Oracle forbid postgresql等)和常用的大数据技术(Hadoop,hdfd、hive、spark、flink、kafka等)

5、熟悉大数据离线、实时数据仓库开发。

6、责任心强,具有良好的团队合作精神和敬业精神

工作地点

重庆北站-北广场

职位发布者

于先生/HRD人力资源总监

当前在线
立即沟通
公司Logo重庆工尔科技有限公司
重庆工尔科技有限公司成立于2012年,注册资金1000万元人民币,公司本着诚信、务实、创新的经营理念稳步发展,获得26项软件著作权,2019年荣获国家高新技术企业认证。业务范畴:商业管理软件,企业应用软件,ERP系统,微信管理平台,移动互联网应用方面的开发。技术总监曾取得澳大利亚莫纳什计算机网络硕士学位,并有10年以上的海外软件开发经验,曾获国际PHP权威认证Zend工程师。公司擅长开发PHP语言和Java开发的软件系统,并致力于企业在线办公,在线ERP系统开发,微信平台开发,电子商城开发等
公司主页