职位详情
职位描述
1.负责大数据平台的架构设计、开发实施、性能优化及日常运维,涵盖实时与批处理数据链路的搭建、数据整合、加工计算等能力,支撑公司数据类产品的研发与落地。
2.参与数据中台系统的建设工作,承担数据仓库与数据湖的模型规划、ETL流程开发、数据质量保障以及数据治理体系相关任务。
3.基于Hadoop、Flink等核心技术生态,构建稳定高效、可扩展的实时与离线数据处理平台,解决大规模数据存储、计算效率及查询性能等问题。
4.设计并实现通用数据服务接口,满足业务单元、产品团队及运营团队在数据分析与应用层面的需求,深度参与数据产品从需求梳理到技术架构设计的全流程。
5.负责数据同步机制、任务调度系统、元数据管理及数据安全合规方案的技术落地与持续优化。
职位要求
本科及以上学历,计算机、数学、统计学或相关专业背景,具备3年以上大数据开发或数据仓库项目实践经验。
技术硬技能要求:
1.熟练掌握大数据技术栈,包括Hadoop(需理解底层机制)、Spark、Flink(支持实时处理)、Hive、Kafka等,并有实际项目应用经验。
2.精通关系型数据库(如MySQL、Oracle、PostgreSQL等)和MPP数据库(如Doris、ClickHouse、Greenplum等),具备扎实的SQL编写与性能调优能力。
3.熟悉主流ETL工具(如DataX、Sqoop、Kettle等),具有丰富的数据建模与数据处理实战经验。
4.具备数据中台类产品(如DataWorks、阿里云大数据平台、火山VeCDP等)使用或二次开发经验者优先考虑。
5.熟悉基础的数据治理实践,涵盖元数据管理、数据质量管理、数据安全控制等方面内容。
编程与系统能力:
1.熟练运用SQL进行数据开发与分析。
2.掌握至少一种编程语言。
3.熟悉Linux操作系统环境,能够编写Shell脚本完成自动化运维任务。
1.负责大数据平台的架构设计、开发实施、性能优化及日常运维,涵盖实时与批处理数据链路的搭建、数据整合、加工计算等能力,支撑公司数据类产品的研发与落地。
2.参与数据中台系统的建设工作,承担数据仓库与数据湖的模型规划、ETL流程开发、数据质量保障以及数据治理体系相关任务。
3.基于Hadoop、Flink等核心技术生态,构建稳定高效、可扩展的实时与离线数据处理平台,解决大规模数据存储、计算效率及查询性能等问题。
4.设计并实现通用数据服务接口,满足业务单元、产品团队及运营团队在数据分析与应用层面的需求,深度参与数据产品从需求梳理到技术架构设计的全流程。
5.负责数据同步机制、任务调度系统、元数据管理及数据安全合规方案的技术落地与持续优化。
职位要求
本科及以上学历,计算机、数学、统计学或相关专业背景,具备3年以上大数据开发或数据仓库项目实践经验。
技术硬技能要求:
1.熟练掌握大数据技术栈,包括Hadoop(需理解底层机制)、Spark、Flink(支持实时处理)、Hive、Kafka等,并有实际项目应用经验。
2.精通关系型数据库(如MySQL、Oracle、PostgreSQL等)和MPP数据库(如Doris、ClickHouse、Greenplum等),具备扎实的SQL编写与性能调优能力。
3.熟悉主流ETL工具(如DataX、Sqoop、Kettle等),具有丰富的数据建模与数据处理实战经验。
4.具备数据中台类产品(如DataWorks、阿里云大数据平台、火山VeCDP等)使用或二次开发经验者优先考虑。
5.熟悉基础的数据治理实践,涵盖元数据管理、数据质量管理、数据安全控制等方面内容。
编程与系统能力:
1.熟练运用SQL进行数据开发与分析。
2.掌握至少一种编程语言。
3.熟悉Linux操作系统环境,能够编写Shell脚本完成自动化运维任务。
2026-06-09 14:02
IP属地:上海
职位福利
本科5-10年要求数据开发经验MySQL/SQL Server实时数仓开发经验非外包类Spark数据平台开发经验数据仓库开发经验FlinkSQL

上海德慧信息技术有限公司
不需要融资 · 500-999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据系统开发
1.5-2.5万元/月
数据开发5-10年本科JavaHive要求数据开发经验KafkaClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlink
上海 青浦区
大数据平台开发(上市企业)
1.4-2万元/月
数据开发5-10年本科JavaHive要求数据开发经验MySQL/SQL ServerClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlinkSQL
上海 青浦区
大数据工程师(外包至华测)
1.5-2.6万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Hive原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验非外包类Python
上海 青浦区








