青浦区
职位详情
（一）高级数据开发工程师 A —— 元数据与API方向
岗位职责
1. 搭建元数据采集链路：集成阿里云OSS与FTP系统，实时监听图片上传动作，抽取并规范化元数据信息（如文件名、大小、路径、时间戳等）
2. 构建存储与查询体系：依托 Doris 设计适用于大规模元数据的表模型，提升数据写入效率与查询响应速度，支持标签化搜索及多维统计分析
3. 实现RESTful API功能：为前端应用提供图片查找、数据录入、状态获取等关键服务接口
4. 编制技术文档资料：完成系统架构说明、接口定义、部署流程及运维操作指南的撰写
任职要求
· 具备3年以上数据工程或后端研发经验，有处理大规模数据的实际项目经历
· 熟练掌握 Python，代码风格良好，具备较强的可读性与维护性
· 熟悉 Doris / ClickHouse 类分析型数据库，拥有实际的性能优化经验
· 了解 Kafka 等消息中间件，可用于系统间事件分离与高并发缓冲
· 掌握阿里云OSS及其对象存储事件通知机制
岗位职责
1. 搭建元数据采集链路：集成阿里云OSS与FTP系统，实时监听图片上传动作，抽取并规范化元数据信息（如文件名、大小、路径、时间戳等）
2. 构建存储与查询体系：依托 Doris 设计适用于大规模元数据的表模型，提升数据写入效率与查询响应速度，支持标签化搜索及多维统计分析
3. 实现RESTful API功能：为前端应用提供图片查找、数据录入、状态获取等关键服务接口
4. 编制技术文档资料：完成系统架构说明、接口定义、部署流程及运维操作指南的撰写
任职要求
· 具备3年以上数据工程或后端研发经验，有处理大规模数据的实际项目经历
· 熟练掌握 Python，代码风格良好，具备较强的可读性与维护性
· 熟悉 Doris / ClickHouse 类分析型数据库，拥有实际的性能优化经验
· 了解 Kafka 等消息中间件，可用于系统间事件分离与高并发缓冲
· 掌握阿里云OSS及其对象存储事件通知机制
2026-05-16 12:53
IP属地：上海
职位福利
大专5-10年数据开发DORISPythonKafka
软通动力信息技术（集团）股份有限公司
已上市 · 10000人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
大数据工程师（外包至华测）
1.5-2.6万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Hive原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验非外包类Python
上海 青浦区
秦先生 · 德科信息有限公司昨日活跃
大数据系统开发
1.5-2.5万元/月
数据开发5-10年本科JavaHive要求数据开发经验KafkaClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlink
上海 青浦区
秦先生 · 德科信息有限公司昨日活跃
大数据平台开发（上市企业）
1.4-2万元/月
数据开发5-10年本科JavaHive要求数据开发经验MySQL/SQL ServerClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlinkSQL
上海 青浦区
王女士 · 德科信息有限公司昨日活跃
数据开发工程师
1.5-2万元/月
数据开发5-10年本科要求数据开发经验MySQL/SQL Server实时数仓开发经验非外包类Spark数据平台开发经验数据仓库开发经验FlinkSQL
上海 青浦区
陈先生 · 上海德慧5日内活跃
收藏职位
