搜索
登录注册

职位详情

岗位职责
1、参与大数据平台及后端系统的技术架构设计、编码实现与日常维护,保障大规模数据处理的稳定性与效率。
2、承担数据接入、清洗转换、持久化存储、分布式计算等关键环节的开发任务,持续优化实时与离线数据处理流程性能。
3、基于Hadoop、Spark、Flink等技术栈搭建高可靠、可扩展的分布式数据服务架构。
4、结合业务实际需求,完成数据模型设计、数仓分层建设以及对外API接口开发,支撑数据分析与前端展示应用。
5、应对大数据环境中的典型挑战,包括数据倾斜、系统瓶颈、容错恢复与备份策略等问题。
6、协同数据产品团队与研发人员,推进数据产品的设计落地与迭代升级。

任职要求
技术基础:
1、扎实掌握Java语言,熟悉多线程机制、IO操作及网络通信编程,具备JVM底层机制的深入认知。
2、具备3年以上大数据领域后端开发经历,熟练掌握Hadoop生态体系(HDFS/YARN/MapReduce)和Spark核心原理。
3、了解分布式系统架构设计原则,熟练运用Zookeeper、Redis等中间件并具备调优能力。
4、熟练操作HBase、Hive、Kafka、Flume、minio等主流大数据组件,拥有真实项目部署实践经验。

数据库与工具:
5、掌握关系型数据库(如MySQL/Oracle)及NoSQL数据库(如MongoDB/ClickHouse)的使用与优化技巧。
6、熟悉数据仓库建模方法(如维度建模、分层结构设计)以及ETL工具的应用开发流程。

工程能力:
7、熟悉Linux操作系统下的开发环境,能使用Shell或Python编写自动化运维脚本。
8、熟练使用Git、Maven等开发协作工具,了解CI/CD流水线构建及DevOps实践理念。

加分项:
9、掌握实时流式计算框架(如Flink/Storm)或OLAP分析引擎(如Druid/Kylin)者优先;具备Docker/K8s容器化部署或公有云(AWS/Azure/GCP)大数据项目经验者更佳。
10、了解数据治理体系,包括元数据管理、数据安全控制、资源调度与分配机制等相关技术。
2026-07-04 13:24
IP属地:北京

职位福利

本科3-5年要求数据开发经验Spark原理/源码Flink原理/源码数据建模经验KafkaMySQL/SQL Server实时数仓开发经验FlinkHive原理/源码数据仓库开发经验Postg
企业发布信息图
北京航云科创科技有限公司
20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

高级软件开发工程师(数据管理)
1.8-3.5万元/月
数据开发3-5年本科PythonJavaPandasSpring单元测试需求分析架构设计
北京 海淀区
先生 · 广联达5日内活跃
hadoop大数据开发工程师
1.8-2.3万元/月
数据开发5-10年本科JavaShellClickhouse原理/源码要求数据开发经验Spark原理/源码大数据引擎开发经验Flink原理/源码金融行业经验SQL
北京 海淀区
大数据开发工程师(Java技术)
1.5-2.2万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Flink原理/源码数据建模经验KafkaMySQL/SQL Server实时数仓开发经验FlinkHive原理/源码数据仓库开发经验Postg
北京 海淀区
北京-数据岗位
1.2-1.8万元/月
数据开发3-5年本科要求数据开发经验PostgreSQL数据建模经验MySQL/SQL Server其他计算机相关专业数据平台开发经验SQL数据湖spark sql机器学习pg其他数据开发经验S
北京 海淀区
Data(外包联想)
1.6-2万元/月
数据开发5-10年本科JavaSAP要求数据开发经验PostgreSQLETL开发经验MySQL/SQL ServerAISQLKettle优化Clickhouse电商/零售行业经验制造业行业经验
北京 海淀区
SmartBI报表可视化开发工程师
6000-10000元/月
数据开发1年以下本科SmartBI可视化
北京 海淀区
大数据研发工程师
1-1.2万元/月
数据开发1年以下本科ETL数据仓库数据建模JavaPythonScalaHadoopSpark大数据平台运维业务数据支撑跨团队协作
北京 海淀区
数据开发
1.3-1.5万元/月
数据开发5-10年大专Java要求数据开发经验ETL开发经验数据平台开发经验数据治理经验FlinkPython
北京 海淀区
大数据开发
1.7-1.8万元/月
数据开发Hadoop5-10年本科外包类要求数据开发经验实时数仓开发经验金融行业经验
北京 海淀区