岗位职责:
1、对Hadoop、Spark、Kafka、Flink等主流大数据处理框架有深入理解,并能够根据业务需求进行合理的技术选型和架构设计;
2、具备系统设计和架构能力,能够设计出可扩展、可维护、高性能的大数据架构,同时考虑数据的安全性、可靠性和易用性,熟悉业界数据湖架构的发展趋势,如大数据->数据湖->湖仓一体,熟悉Lamda、Kappa等常用的数据处理架构;
3、熟悉数据安全和隐私保护,采取合适的安全措施和技术手段,确保数据的安全性和隐私性;
4、具备优化系统的性能和效率的能力,通过优化数据存储和处理技术,提高系统的处理速度和响应时间;
5、具备出色的团队协作和沟通能力,能够与其他团队成员有效协作,并具备项目管理经验,以确保项目按时按质完成。
岗位要求:
1.负责开发和标准化大数据在金融、交通、能源、政府等行业的服务解决方案,对方案竞争力负责;
2. 完善行业生态的构建,引导行业标准的制定及推广,识别和反馈行业共性需求,推动自有产品及工具能力提升等;
3. 负责大数据工程服务产品的需求分析,对服务产品的规模复制负责;
4. 负责基于华为大数据产品(iData+eDataInsight)的配套服务产品面向全球的路标规划;
5. 负责大数据服务产品的立项、开发、实验局验证、商业设计、上市、迭代优化、退市的全生命