搜索
登录注册

职位详情

工作职责
1. 负责大数据平台(Hadoop/Spark/Flink/Hive/Kafka)的整体架构设计与性能调优,确保大规模数据的高效存储、计算及实时处理能力。
2. 深度参与数据仓库全周期建设,涵盖ETL流程开发、数据清洗、模型构建及任务调度管理,保障数据准确性和链路可靠性。
3. 主导离线与实时数据通道的开发与优化,通过问题定位和性能提升手段增强系统处理效率与平台稳定性。
4. 响应业务侧数据需求,完成指标统计、报表开发及数据服务接口落地,支持数据分析应用的实施与运行。
5. 参与数据治理体系搭建,覆盖元数据管理、数据质量监控、任务运维以及自动化工具的研发与应用。
6. 关注大数据领域前沿技术发展,推动架构演进和技术方案升级,助力团队技术能力持续成长。

任职要求
1. 本科及以上学历,计算机、软件工程、大数据等相关专业背景,具备2年以上大数据开发工作经验。
2. 熟练掌握Flink/Spark/Hive SQL中至少一项计算框架,具有SQL性能调优和数据倾斜应对的实际案例。
3. 熟悉Hadoop生态常用组件(HDFS/YARN/HBase/Kafka/ZooKeeper),有Doris/ClickHouse使用经验者更佳。
4. 具备完整的ETL开发经验,熟悉数据仓库建模方法论,拥有离线或实时数据处理项目实践,可独立完成端到端数据链路构建。
5. 熟悉Airflow/DolphinScheduler/XXL-Job等主流调度工具,具备任务监控、异常排查与运维保障能力。
6. 精通Java/Scala/Python其中一门编程语言,编码规范良好,具备较强的工程化实现能力。
7. 有数据治理或高并发场景下数据处理经验者优先,学习适应能力强,具备良好的沟通协作与问题解决能力。

补充说明
1. 优先考虑:具备保险、金融、互联网或电商行业大数据项目背景;参与过数据中台、实时数仓、用户画像类项目;持有大数据相关认证,或了解数据安全、等保合规相关政策与要求。
2026-07-01 14:37
IP属地:北京

职位福利

本科5-10年数据治理ETL数据仓库HadoopSparkFlinkJavaScalaPython海量数据处理实时数据链路开发
企业发布信息图
中科软科技股份有限公司
已上市 · 10000人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

大数据开发工程师(保险背景-统招本科)
1.4-1.5万元/月
数据开发3-5年本科SqlHadoop保险
北京 西城区
大数据开发
1.4-1.6万元/月
数据开发5-10年本科hive要求数据开发经验doris模型BIBI报表开发经验Kafka离线数仓其他数据平台开发经验
北京 西城区
大数据开发
1.5-2万元/月
数据开发5-10年本科Java要求数据开发经验ScalaKafkaMySQL/SQL Server计算机相关专业数据平台开发经验数据治理经验Flink金融行业经验HiveBI报表开发经验Spark
北京 西城区
大数据研发工程师
1.4-1.8万元/月
数据开发1-3年本科PythonDjangoFlask
北京 西城区
数据开发工程师
1.3-2万元/月
数据开发3-5年本科数据治理数据建模数据仓库SqlPythonJavaMaxComputeDATAPHIN平台操作数据全流程开发数据质量监控
北京 西城区
大数据开发
1.4-1.5万元/月
数据开发3-5年本科腾讯系统实时Java
北京 西城区
数据开发
1.4-1.5万元/月
数据开发3-5年本科Hive要求数据开发经验Spark数据仓库开发经验金融行业经验SQL
北京 西城区
大数据开发工程师
9000-13000元/月
数据开发3-5年本科SqlFlinkKafka
北京 西城区
数据开发
1.4-1.7万元/月
数据开发3-5年本科要求数据开发经验其他数据开发经验计算机相关专业金融行业经验SQL
北京 西城区
数据开发
1.2-1.6万元/月
数据开发1-3年本科数据中台开发SqlFlinkKafkaORACLE、MYSQL售电市场分析预测平台数据应用体系数据开发
北京 西城区