数据开发工程师
1.4-1.7万元/月
更新 2025-12-22 14:29:03
浏览 769
职位详情
数据开发
3-5年
Hive · Shell · 要求数据开发经验 · Kafka · MySQL/SQL Server · BI报表开发经验 · Spark · 数据平台开发经验 · Flink · Python · SQL
岗位职责
1.负责数据采集与接入,构建高效稳定的数据入湖通道;
2.承担数据模型设计,完成数据映射编写,ETL流程的开发与性能调优;
3.持续优化数据处理逻辑,提升数据产出效率与准确性;
4.参与部分业务线的BI可视化工作,协同产品团队开展数据分析支持;
任职要求:
1.熟悉mysql/Starrocks/hive/spark/Flink等大数据技术栈,具备复杂SQL编写及优化能力;
2.掌握Paimon、Iceberg等数据湖工具,拥有离线与实时计算场景开发经验;
3.熟悉数据开发全流程,涵盖数据集成、处理、调度及BI展示环节,如Dolphinscheduler、QuickBI等;
4.熟练使用Python,可承担数据抓取类开发任务,包括爬虫、RPA等实现;
5.具备良好的业务理解力,能快速对接业务需求;拥有独立分析和解决问题的能力,责任心强,具备团队协作意识与沟通素养;
华宝
1.负责数据采集与接入,构建高效稳定的数据入湖通道;
2.承担数据模型设计,完成数据映射编写,ETL流程的开发与性能调优;
3.持续优化数据处理逻辑,提升数据产出效率与准确性;
4.参与部分业务线的BI可视化工作,协同产品团队开展数据分析支持;
任职要求:
1.熟悉mysql/Starrocks/hive/spark/Flink等大数据技术栈,具备复杂SQL编写及优化能力;
2.掌握Paimon、Iceberg等数据湖工具,拥有离线与实时计算场景开发经验;
3.熟悉数据开发全流程,涵盖数据集成、处理、调度及BI展示环节,如Dolphinscheduler、QuickBI等;
4.熟练使用Python,可承担数据抓取类开发任务,包括爬虫、RPA等实现;
5.具备良好的业务理解力,能快速对接业务需求;拥有独立分析和解决问题的能力,责任心强,具备团队协作意识与沟通素养;
华宝
相似职位
很抱歉,暂无相似职位!