搜索
登录注册

职位详情

岗位职责:
1、主导公司大数据平台的整体架构设计、技术选型与系统规划,打造具备高可用性、高扩展性和低延迟特性的PB级数据处理架构;
2、攻克大规模数据在采集、清洗、存储、计算及服务化过程中面临的核心技术挑战,如数据倾斜、背压控制、容错机制等;
3、构建并持续优化数据治理体系,涵盖数据标准化、元数据管理、数据质量监控、血缘追踪及生命周期管控;
4、设计并实施数据安全架构,落实数据分级分类策略,集成隐私计算技术,完善权限管理体系并满足合规要求;
5、承担TSP/FOTA等相关系统的分析、架构设计及编码实现工作;
6、参与业务需求研讨,协同团队完成产品新功能的设计与落地开发;

任职要求:
1、计算机或相关专业背景,具备三年以上Java/大数据方向开发经验;
2、深刻掌握Spark、Flink、MapReduce、Hive、HUE、Airflow等计算框架底层原理,具备内核优化或二次开发经验者优先;
3、熟练运用HDFS、Paimon、Doris/StarRocks、Elasticsearch等存储引擎,并具备选型与性能调优能力;
4、精通Kafka、Pulsar等消息中间件的高吞吐量架构设计与应用实践;
5、熟悉Docker与Kubernetes技术,具有在公有云(AWS/腾讯云/Azure)或私有云环境部署大数据平台的实际经验;
6、熟练使用SpringCloud/SpringFramework/Mybatis/Maven/MySQL等主流开发框架与工具;
7、通过大学英语CET-4及以上,具备独立阅读英文技术文档和撰写英文资料的能力;
8、有车联网领域相关系统开发经验者优先考虑;
9、具备较强的抗压能力、自主学习意识以及良好的团队协作精神;
2026-03-01 08:52
IP属地:上海

职位福利

本科及以上3-5年数据架构JavaHadoopFlinkSpark车联网
企业发布信息图
中电金信软件有限公司
· 6人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

bi数据开发(AI数据可视化)
1-1.4万元/月
数据开发5-10年本科及以上AI可视化外包类要求数据开发经验BI报表开发经验数据平台开发经验
上海 嘉定区
大数据开发工程师
1.4-1.7万元/月
数据开发3-5年本科及以上PythonJavaFlinkSpark数据中台开发数据库开发数据仓库
上海 闵行区
大数据研发工程师
1.8-2.1万元/月
数据开发3-5年本科及以上SqlJavaPythonHadoopFlinkSpark
上海 杨浦区
数据开发
1.4-1.6万元/月
数据开发3-5年本科及以上ETL
上海 黄浦区
数据开发工程师
1-1.5万元/月
数据开发3-5年本科及以上数据仓库
上海 黄浦区
数据开发
1.5-1.6万元/月
数据开发5-10年本科及以上ERP要求数据开发经验Spark原理/源码ScalaFlink原理/源码实时数仓开发经验数据平台开发经验财务SQLHive供应链业财一体化Hive原理/源码MESSpark
上海 浦东新区
数据开发-证券基金经验-试用期全额薪资
1.7-1.9万元/月
数据开发5-10年本科及以上帆软要求数据开发经验证券BI报表开发经验其他数据平台开发经验基金PythonSQL
上海 浦东新区
大数据开发
1.5-1.6万元/月
数据开发5-10年本科及以上能源要求数据开发经验化工业财一体化BI报表开发经验Spark数据平台开发经验SQL
上海 浦东新区
大数据开发
1.5-1.8万元/月
数据开发5-10年本科及以上Javaerp要求数据开发经验其他Spark数据平台开发经验bpcrm
上海 浦东新区