职位详情
工作职责:
设计与实现高并发、高可用的服务端数据上报系统,支撑日均百亿级数据采集
搭建实时流式处理与离线批量处理的数据通道,保障数据处理的及时性与准确性
规划并优化大数据存储架构,对HDFS、Hive、ClickHouse等组件进行性能调优
构建数据质量监控机制,制定数据标准与规范,推动数据治理能力提升
参与大数据平台的研发建设,为业务团队提供稳定高效的数据底层支持
持续改进数据处理效率,减少资源占用,增强系统的稳定性与可维护性
任职要求:
计算机相关专业本科及以上学历,具备3-5年大数据开发工作经验
熟练掌握Java/Scala/Python,熟悉多线程编程、网络通信及JVM性能优化
精通Flink/Spark Streaming等流计算框架,具有大规模数据处理实战经验
深入理解Hadoop技术生态,掌握HDFS、YARN、Hive等核心组件原理与调优策略
熟悉Kafka、ClickHouse、Doris等大数据中间件的使用场景及性能优化方法
了解数据仓库建模方法论,具备实时数仓项目经验者优先考虑
具备良好沟通协作能力,责任心强,具有积极主动的工作态度
有大型数据系统架构设计实践经验者优先
设计与实现高并发、高可用的服务端数据上报系统,支撑日均百亿级数据采集
搭建实时流式处理与离线批量处理的数据通道,保障数据处理的及时性与准确性
规划并优化大数据存储架构,对HDFS、Hive、ClickHouse等组件进行性能调优
构建数据质量监控机制,制定数据标准与规范,推动数据治理能力提升
参与大数据平台的研发建设,为业务团队提供稳定高效的数据底层支持
持续改进数据处理效率,减少资源占用,增强系统的稳定性与可维护性
任职要求:
计算机相关专业本科及以上学历,具备3-5年大数据开发工作经验
熟练掌握Java/Scala/Python,熟悉多线程编程、网络通信及JVM性能优化
精通Flink/Spark Streaming等流计算框架,具有大规模数据处理实战经验
深入理解Hadoop技术生态,掌握HDFS、YARN、Hive等核心组件原理与调优策略
熟悉Kafka、ClickHouse、Doris等大数据中间件的使用场景及性能优化方法
了解数据仓库建模方法论,具备实时数仓项目经验者优先考虑
具备良好沟通协作能力,责任心强,具有积极主动的工作态度
有大型数据系统架构设计实践经验者优先
2026-06-06 13:57
IP属地:上海
职位福利
本科3-5年Java要求数据开发经验计算机相关专业Spark数据平台开发经验FlinkPython

德科信息有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
数据开发工程师
1.5-2万元/月
数据开发5-10年本科要求数据开发经验MySQL/SQL Server实时数仓开发经验非外包类Spark数据平台开发经验数据仓库开发经验FlinkSQL
上海 青浦区
大数据系统开发
1.5-2.5万元/月
数据开发5-10年本科JavaHive要求数据开发经验KafkaClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlink
上海 青浦区
大数据平台开发(上市企业)
1.4-2万元/月
数据开发5-10年本科JavaHive要求数据开发经验MySQL/SQL ServerClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlinkSQL
上海 青浦区
大数据工程师(外包至华测)
1.5-2.6万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Hive原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验非外包类Python
上海 青浦区









