职位详情
岗位职责
1、数据采集与整合:
负责从多种数据来源(如关系型数据库、非关系型数据库、API接口等)获取数据,并完成数据的清洗、转换及集成工作。
2、数据质量保证:
保障数据的准确、一致与完整,通过建立和执行数据质量管理流程,持续维护高水平的数据质量。
3、数据分析与建模:
结合实际业务需求,运用统计方法与机器学习算法开展深度数据分析,构建有效模型以支撑业务决策与洞察。
4、数据架构设计:
依据业务场景,规划并优化数据架构体系,涵盖数据仓库、数据湖等组件,确保数据存储与查询的高效性。
5、数据流程自动化:
编写自动化脚本并搭建数据处理流程,提升数据作业效率,降低人工操作频率。
6、技术支持与咨询:
为团队提供数据处理方面的技术协助,及时响应并解决成员在数据相关任务中遇到的问题。
7、技术研究与创新:
关注数据处理领域的前沿技术与发展趋势,评估并引入适用的新技术手段,持续增强数据处理能力。
技术要求
1、编程语言:
熟练掌握至少一门编程语言,如Python或Java,具备扎实的编码实践经验。
2、数据库管理:
精通SQL语言,熟悉主流数据库管理系统,如阿里MySQL、PostgreSQL等。
3、数据处理框架:
熟悉常用大数据处理框架,包括Apache Spark、Hadoop、Flink、Kettle、DataX等。
4、数据仓库技术:
理解数据仓库建设的基本原则,有Amazon Redshift、Google BigQuery等平台的实际使用经验。
5、数据可视化:
能够使用至少一种可视化工具(如FineBI/FineReport、Tableau、Power BI、Matplotlib等)呈现分析成果。
6、版本控制:
掌握Git等版本控制工具的使用,具备良好的代码管理习惯。
1、数据采集与整合:
负责从多种数据来源(如关系型数据库、非关系型数据库、API接口等)获取数据,并完成数据的清洗、转换及集成工作。
2、数据质量保证:
保障数据的准确、一致与完整,通过建立和执行数据质量管理流程,持续维护高水平的数据质量。
3、数据分析与建模:
结合实际业务需求,运用统计方法与机器学习算法开展深度数据分析,构建有效模型以支撑业务决策与洞察。
4、数据架构设计:
依据业务场景,规划并优化数据架构体系,涵盖数据仓库、数据湖等组件,确保数据存储与查询的高效性。
5、数据流程自动化:
编写自动化脚本并搭建数据处理流程,提升数据作业效率,降低人工操作频率。
6、技术支持与咨询:
为团队提供数据处理方面的技术协助,及时响应并解决成员在数据相关任务中遇到的问题。
7、技术研究与创新:
关注数据处理领域的前沿技术与发展趋势,评估并引入适用的新技术手段,持续增强数据处理能力。
技术要求
1、编程语言:
熟练掌握至少一门编程语言,如Python或Java,具备扎实的编码实践经验。
2、数据库管理:
精通SQL语言,熟悉主流数据库管理系统,如阿里MySQL、PostgreSQL等。
3、数据处理框架:
熟悉常用大数据处理框架,包括Apache Spark、Hadoop、Flink、Kettle、DataX等。
4、数据仓库技术:
理解数据仓库建设的基本原则,有Amazon Redshift、Google BigQuery等平台的实际使用经验。
5、数据可视化:
能够使用至少一种可视化工具(如FineBI/FineReport、Tableau、Power BI、Matplotlib等)呈现分析成果。
6、版本控制:
掌握Git等版本控制工具的使用,具备良好的代码管理习惯。
2026-06-16 13:11
IP属地:广东广州
职位福利
本科3-5年JavaPythonAPACHEARK、HADOOP、数据中台开发数据库开发

德科信息有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发工程师
1-1.5万元/月
数据开发5-10年本科Java要求数据开发经验ScalaKafka非外包类计算机相关专业数据平台开发经验FlinkSQLHBaseC/C++HiveSparkPython
广州 海珠区
大数据研发工程师
1-1.5万元/月
数据开发5-10年本科Java要求数据开发经验ScalaKafka非外包类计算机相关专业数据平台开发经验FlinkSQLHBaseC/C++HiveSparkPython
广州 海珠区
数据运营
9000-13000元/月
数据开发3-5年本科要求数据开发经验ETL开发经验Kafka电力非外包类计算机相关专业数据平台开发经验数据治理经验SQLBI报表开发经验Spark数学/统计相关专业国网
广州 海珠区
大数据平台或大数据产品开发
1-1.7万元/月
数据开发Hadoop5-10年本科要求数据开发经验医疗行业经验计算机相关专业数据平台开发经验JavaSparkHiveFlinkHBaseMySQL/SQL ServerSpark原理/源码Flink原理/源码Doris原理/源码HDFS原理/源码MySQL原理/源码
广州 海珠区









