下载鱼泡直聘APP, 求职招聘快人一步!

搜索
登录注册

职位详情

关键字:华为云大数据,大数据迁移、pyspark、python、scala spark

主要职责:
1、承担大数据搬迁及系统集成相关工作。
2、使用华为云数据迁移工具完成数据仓库的迁移,并执行数据一致性核对。
3、处理大规模数据集,开展实时与批量数据分析,满足业务发展需要。
4、具备扎实的SQL优化能力;可独立完成数据比对任务,在数据异常时能通过数据流溯源定位问题脚本。

任职资格:
1、具有5年大数据开发经验,掌握主流大数据技术体系。
2、熟练运用 Hadoop、Spark、Flink、Hive 等大数据处理框架,具备4年以上 python、pyspark、hive、sparksql 开发经验,可独立完成 flink、spark 作业的开发与迁移,支持端到端调试。
3、熟练使用 Java、SQL、Scala 或 Python 编程语言。
4、具备较强的SQL调优能力,了解关系型数据库与NoSQL数据库特性。
5、有大数据平台性能调优实践经历。
6、具备良好的沟通协作能力及书面表达能力。
7、熟悉华为MRS、DataArt Studio、Data Lake、GaussDB(DWS)者优先,具备数据迁移项目经验者优先。
2026-09-25 13:54
IP属地:广东深圳

职位福利

大专5-10年华为云大数据大数据迁移PythonSparkPYSPARK
企业发布信息图
软通动力信息技术(集团)股份有限公司
已上市 · 10000人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

数据开发3-5年本科OracleMySQLHadoopFlinkSparkSQL
深圳 龙岗区
1.5-2.5万/月
数据开发5-10年本科FineBI
深圳 龙岗区
4-9千/月
数据开发1-3年本科PythonSQL计算机相关专业数学/统计相关专业大数据开发经验
深圳 龙岗区
7千-1.2万/月
数据开发1-3年本科JavaHive要求数据开发经验计算机相关专业数据平台开发经验Python
深圳 龙岗区
1.5-2.5万/月
数据开发5-10年本科跨境电商要求数据开发经验ETL开发经验数据治理BI报表开发经验非外包类其他数据仓库开发经验SQLFineBI
深圳 龙岗区
1.5-2.5万/月
数据开发3-5年本科跨境电商要求数据开发经验ETL开发经验BI报表开发经验非外包类其他数据仓库开发经验SQLFineBI
深圳 龙岗区
1-1.5万/月
数据开发3-5年本科
深圳 龙岗区
1.5-3万/月
数据开发经验不限本科非外包类接受无数据开发经验
深圳 龙岗区
7千-1.2万/月
数据开发1-3年本科JavaHive要求数据开发经验计算机相关专业数据平台开发经验Python
深圳 龙岗区
1.5-2.5万/月
数据开发5-10年本科要求数据开发经验电商/零售行业经验其他数据开发经验非外
深圳 龙岗区