数据开发
1-1.2万元/月
更新 2026-01-13 14:17:24
浏览 401
职位详情
数据开发
3-5年
Java · 要求数据开发经验 · Scala · kafka · 实时数仓开发经验 · Spark · 数据仓库开发经验 · 数据治理经验 · Flink · Python
岗位职责:
1.参与数据盘点任务,协同业务部门推进数据治理及数据开发需求的梳理与落实。
2.负责各项目中数据相关需求的调研,开展数据对接、清洗及开发工作。
3.承担项目数据接口的开发任务,为上层应用提供稳定的数据支持。
4.编写数据治理与开发过程中的相关需求文档及技术设计文档。
5.完成上级安排的其他工作任务。
岗位要求:
1.具备3年及以上大数据开发经验,有大型企业数据治理与开发实践经历者优先;本科及以上学历,计算机科学、信息科学、大数据、数学等相关专业优先;熟练编写SQL,掌握Hadoop、Spark、Flink等大数据处理框架,能使用Java/Python/Scala等语言进行开发;
2.具备数据治理、数据标准制定、数据架构设计、元数据管理、数据质量管控及数据仓库构建与优化能力;
3.熟悉Hive基本架构,熟练运用Hive常用系统函数及SQL进行数据分析,了解Hive性能优化策略;
4.熟悉KafkaTopic的使用,能够搭建生产者与消费者实现数据流转;
5.掌握Flink算子编程与FlinkSQL语法,理解Watermark、Checkpoint、状态管理、窗口机制等核心概念,并具备Flink调优经验;
6.理解数据仓库分层治理理念,熟悉离线与实时大数据处理思路及相关技术体系。
工作地点:重庆渝北区重庆交通开投科技发展有限公司3楼
1.参与数据盘点任务,协同业务部门推进数据治理及数据开发需求的梳理与落实。
2.负责各项目中数据相关需求的调研,开展数据对接、清洗及开发工作。
3.承担项目数据接口的开发任务,为上层应用提供稳定的数据支持。
4.编写数据治理与开发过程中的相关需求文档及技术设计文档。
5.完成上级安排的其他工作任务。
岗位要求:
1.具备3年及以上大数据开发经验,有大型企业数据治理与开发实践经历者优先;本科及以上学历,计算机科学、信息科学、大数据、数学等相关专业优先;熟练编写SQL,掌握Hadoop、Spark、Flink等大数据处理框架,能使用Java/Python/Scala等语言进行开发;
2.具备数据治理、数据标准制定、数据架构设计、元数据管理、数据质量管控及数据仓库构建与优化能力;
3.熟悉Hive基本架构,熟练运用Hive常用系统函数及SQL进行数据分析,了解Hive性能优化策略;
4.熟悉KafkaTopic的使用,能够搭建生产者与消费者实现数据流转;
5.掌握Flink算子编程与FlinkSQL语法,理解Watermark、Checkpoint、状态管理、窗口机制等核心概念,并具备Flink调优经验;
6.理解数据仓库分层治理理念,熟悉离线与实时大数据处理思路及相关技术体系。
工作地点:重庆渝北区重庆交通开投科技发展有限公司3楼
相似职位
很抱歉,暂无相似职位!