数据开发工程师

职位描述：
一、数据建模与数据清洗
1、与业务部门沟通协作，明确报表指标定义、展示形式、更新频率等进行数据模型建设前的分析工作；
2、确定数据来源（如ERP、OA），构建数据关联逻辑，定义计算规则；
3、编写ETL脚本或使用工具抽取、清洗数据，处理缺失值、重复值、异常值；
4、根据业务场景设计星型模型、雪花模型等。
二、数据集成与报表开发
1、整合多源数据，统一数据格式与编码，优化存储结构，提升查询性能与压缩效率；
2、使用工具开发交互式报表、仪表盘，支持钻取、筛选、参数化查询，设计友好的可视化图表，满足业务场景需求；
3、开发固定/可变格式报表（如Excel、PDF），支持自动生成与分发。后期根据业务部门的需求进行全面调研，开发数据目录。
三、运行维护与数据安全
1、监控数据平台运行状态，修复异常数据或错误展示，定期更新迭代逻辑；
2、负责权限管理与数据安全，配置报表访问权限，确保敏感数据脱敏。
任职要求：
1、本科及以上学历，计算机、软件工程、通信工程、信息管理与信息系统、网络工程等相关专业；
2、精通关系型数据库：熟练掌握至少一种主流数据库（如 MySQL、PostgreSQL、Oracle、SQL Server），了解其架构、存储引擎、事务机制（ACID）、锁机制等；
3、具备优秀的SQL开发与性能优化能力：能编写高效、复杂的 SQL 语句，熟悉执行计划分析、索引优化、慢查询诊断与调优，理解数据库的缓存机制、分库分表策略等优化手段；
4、熟练掌握Linux开发环境，能够使用Shell命令和脚本编程，实现自动化运维；
5、了解数据仓库、数据建模等概念和技术，熟悉 ETL 流程设计，了解数仓建设；
6、熟练掌握大数据技术栈，熟悉Hadoop生态系统中的工具；
7、具备良好的数据处理能力，如数据清洗、转换和整合，包括使用工具进行数据转换和清洗，确保数据的一致性和可用性；
8、具备良好的编程能力，至少掌握一门编程语言，用于开发数据工具或与业务系统集成。