搜索
登录注册

职位详情

职位描述
1.负责大数据平台的架构设计、开发实施、性能优化及日常运维,涵盖实时与批处理数据链路的搭建、数据整合、加工计算等能力,支撑公司数据类产品的研发与落地。
2.参与数据中台系统的建设工作,承担数据仓库与数据湖的模型规划、ETL流程开发、数据质量保障以及数据治理体系相关任务。
3.基于Hadoop、Flink等核心技术生态,构建稳定高效、可扩展的实时与离线数据处理平台,解决大规模数据存储、计算效率及查询性能等问题。
4.设计并实现通用数据服务接口,满足业务单元、产品团队及运营团队在数据分析与应用层面的需求,深度参与数据产品从需求梳理到技术架构设计的全流程。
5.负责数据同步机制、任务调度系统、元数据管理及数据安全合规方案的技术落地与持续优化。

职位要求
本科及以上学历,计算机、数学、统计学或相关专业背景,具备3年以上大数据开发或数据仓库项目实践经验。

技术硬技能要求:
1.熟练掌握大数据技术栈,包括Hadoop(需理解底层机制)、Spark、Flink(支持实时处理)、Hive、Kafka等,并有实际项目应用经验。
2.精通关系型数据库(如MySQL、Oracle、PostgreSQL等)和MPP数据库(如Doris、ClickHouse、Greenplum等),具备扎实的SQL编写与性能调优能力。
3.熟悉主流ETL工具(如DataX、Sqoop、Kettle等),具有丰富的数据建模与数据处理实战经验。
4.具备数据中台类产品(如DataWorks、阿里云大数据平台、火山VeCDP等)使用或二次开发经验者优先考虑。
5.熟悉基础的数据治理实践,涵盖元数据管理、数据质量管理、数据安全控制等方面内容。

编程与系统能力:
1.熟练运用SQL进行数据开发与分析。
2.掌握至少一种编程语言。
3.熟悉Linux操作系统环境,能够编写Shell脚本完成自动化运维任务。
2026-06-09 14:02
IP属地:上海

职位福利

本科5-10年要求数据开发经验MySQL/SQL Server实时数仓开发经验非外包类Spark数据平台开发经验数据仓库开发经验FlinkSQL
企业发布信息图
上海德慧信息技术有限公司
不需要融资 · 500-999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

数据开发工程师(J14354)
6000-12000元/月
数据开发经验不限本科Java数据治理数据架构数据库开发
上海 青浦区
大数据研发工程师
1-1.3万元/月
数据开发5-10年大专要求数据开发经验ETL开发经验MySQL/SQL Ser
上海 青浦区
高级数据开发工程师(6个月短期项目)
1.8-2万元/月
数据开发5-10年大专DORISPythonKafka
上海 青浦区
大数据开发工程师
1.6-2.6万元/月
数据开发3-5年本科Java要求数据开发经验计算机相关专业Spark数据平台开发经验FlinkPython
上海 青浦区
高级大数据开发工程师15k
1.3-1.5万元/月
数据开发3-5年大专PostgreSQL原理/源码Java要求数据开发经验
上海 青浦区
大数据系统开发
1.5-2.5万元/月
数据开发5-10年本科JavaHive要求数据开发经验KafkaClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlink
上海 青浦区
大数据平台开发(上市企业)
1.4-2万元/月
数据开发5-10年本科JavaHive要求数据开发经验MySQL/SQL ServerClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlinkSQL
上海 青浦区
大数据工程师(外包至华测)
1.5-2.6万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Hive原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验非外包类Python
上海 青浦区
智能驾驶数据平台开发
3.5-7万元/月
数据开发Hadoop3-5年本科数据数据平台智能驾驶
上海 青浦区