职位详情
岗位职责:
1、负责大数据平台的整体架构设计与核心开发工作;
2、开展数据仓库的搭建及性能优化;
3、基于Hadoop等大数据技术体系进行数据加工与分析处理;
4、开发MapReduce程序及Spark相关作业任务;
5、参与数据挖掘类项目的研发与落地实施。
任职要求:
1.表达流畅,逻辑思维能力强。
2.掌握大数据生态相关技术栈
*分布式计算框架:Hadoop、Spark、Flink(需理解底层原理,具备调优与故障排查能力)。
*数据处理工具:Hive、Pig、SparkSQL、FlinkSQL等。
*实时与离线数据湖架构:了解Lambda/Kappa架构,熟悉分层建模方法(ODS/DWD/DWS/ADS)。
*消息中间件:Kafka、Pulsar、RocketMQ等(需具备消息积压、顺序消费等典型场景的应对经验)。
3.数据存储与查询能力
*熟悉主流分布式存储系统(HDFS、HBase、Cassandra)。
*掌握列式存储格式(Parquet/ORC),了解OLAP引擎(ClickHouse/Doris/Presto)
4.数据治理与质量保障
*具备数据清洗、去重及数据一致性校验的实际项目经验。
1、负责大数据平台的整体架构设计与核心开发工作;
2、开展数据仓库的搭建及性能优化;
3、基于Hadoop等大数据技术体系进行数据加工与分析处理;
4、开发MapReduce程序及Spark相关作业任务;
5、参与数据挖掘类项目的研发与落地实施。
任职要求:
1.表达流畅,逻辑思维能力强。
2.掌握大数据生态相关技术栈
*分布式计算框架:Hadoop、Spark、Flink(需理解底层原理,具备调优与故障排查能力)。
*数据处理工具:Hive、Pig、SparkSQL、FlinkSQL等。
*实时与离线数据湖架构:了解Lambda/Kappa架构,熟悉分层建模方法(ODS/DWD/DWS/ADS)。
*消息中间件:Kafka、Pulsar、RocketMQ等(需具备消息积压、顺序消费等典型场景的应对经验)。
3.数据存储与查询能力
*熟悉主流分布式存储系统(HDFS、HBase、Cassandra)。
*掌握列式存储格式(Parquet/ORC),了解OLAP引擎(ClickHouse/Doris/Presto)
4.数据治理与质量保障
*具备数据清洗、去重及数据一致性校验的实际项目经验。
2026-05-12 14:20
IP属地:北京
职位福利
本科3-5年要求数据开发经验Spark原理/源码Flink原理/源码数据建模经验KafkaMySQL/SQL ServerShellHive原理/源码数据仓库开发经验OraclePython

中电金信软件有限公司
不需要融资 · 10000人以上

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发
1.7-1.8万元/月
数据开发3-5年大专标准化数据服务接口Java要求数据开发经验Doris/Druid企业级数据中台MySQL/SQL Server计算机相关专业数据平台开发经验FlinkApache DorisSQL
北京 朝阳区

杨先生 · 中电金信昨日活跃
高级大数据开发工程师(朝阳区或海淀区)
1.5-2万元/月
数据开发5-10年本科JavaHive要求数据开发经验大数据引擎开发经验Flink原理/源码BI报表开发经验数据平台开发经验OracleFlink金融行业经验PythonSQL
北京 朝阳区

吴先生 · 信雅达科技股份5日内活跃
大数据(驻场中行学信网统招本)
1.4-2万元/月
数据开发5-10年本科要求数据开发经验Kafka原理/源码Spark原理/源码大数据引擎开发经验数据建模经验Kafka数据平台开发经验金融行业经验SQLHBaseHBase原理/源码ShellHiv
北京 朝阳区

吴先生 · 信雅达科技股份5日内活跃
大数据开发工程师-北京-金融行业
1.9-2.2万元/月
数据开发10年以上本科Hive要求数据开发经验高斯Hadoop数据平台开发经验Flink金融行业经验SQL
北京 朝阳区

吴先生 · 信雅达科技股份5日内活跃
大数据开发-北京(需现场面试)
1.7-2.2万元/月
数据开发10年以上本科要求数据开发经验ETL开发经验KafkaBI报表开发经验Spark数据平台开发经验SQL
北京 朝阳区

吴先生 · 信雅达科技股份5日内活跃



