
数据开发(金融行业双休)
1.3-1.5万元/月
数据开发5-10年本科及以上要求数据开发经验银行ai实时数仓开发经验数据平台开发经验数据治理经验金融行业经验金融SQLHiveSparkOraclePython
任职要求:
1、掌握数据仓库构建相关理论,具有2年以上大数据开发实际项目经验;
2、具备规范的编码习惯,熟练运用SQL,至少掌握一种脚本语言(Python、Shell等);
3、精通大数据离线处理技术,至少熟悉一种主流大数据平台框架(Hadoop、Spark、ClickHouse、Impala等);
4、理解数据库基本原理与核心技术,熟悉Mysql、Oracle、Hbase等数据库,具备查询性能分析与调优能力;
5、了解实时数据处理场景,至少接触过一种实时计算技术(Kafka、Flink等);
6、态度严谨,细致耐心,责任心强,具备优秀的逻辑思维及沟通协作能力;
【工作职责】:
1、对接金融领域业务需求,承担金融方向大数据应用系统的开发任务;
2、探索数据与AI融合的应用模式,推动技术在业务场景中的落地与创新;
3、负责数据质量管控与性能优化等运维保障工作,确保大数据作业稳定运行;
4、参与金融资讯类数据体系建设,支撑数据接入、加工开发及治理等相关工作。
银行数据开发+双休福利好
1.4-1.7万元/月
数据开发5-10年本科及以上JavaHive要求数据开发经验银行ETL开发经验BI报表开发经验数据平台开发经验数据仓库开发经验Flink金融行业经验金融HBase
1. 本科学历,具备5年以上工作经验,简历中需包含至少5个银行金融数据开发相关项目经历
2. 薪资上限为15k,初试采用线上形式,复试需现场进行
3. 有监管类项目(如east 1104)或信创MPP数据库经验者优先考虑
4. 熟练掌握smartbi报表开发工具为必要条件
5. 具备需求分析与模型设计经验者优先录用
注意:必须拥有5个银行金融数据开发项目经历
公司福利:
1. 周末双休,享有国家法定节假日及带薪年假
2. 提供美味食堂餐食,享受项目专项补贴
3. 每季度发放绩效奖金
4. 团队氛围融洽,节日赠送礼品,定期组织聚餐活动
数据开发
2.5-5万元/月
数据开发3-5年本科及以上SQLJavaScalaSparkHDFSHadoopHIVEStreaming
对腾讯其他岗位感兴趣也可协助内推。
岗位职责:
参与新闻视频广告大数据系统的研发,借助数据洞察助力业务持续增长;
参与海量数据实时处理架构的设计与实现;
参与在线分析平台的开发与优化,提升数据接入效率与查询响应速度。
岗位要求:
本科及以上学历,具备1年以上大数据领域相关经验;
掌握Hadoop、Spark等大数据平台及其生态系统,理解核心运行机制;
熟悉OLAP系统的应用,了解其底层工作原理;
熟练使用Java、Scala或Python进行开发;
具备一定的数据科学基础知识;
责任心强,具备出色的学习能力、问题分析与解决能力,拥有良好的团队协作与沟通意识。
数据开发(双休/远程面试)
1.3-1.5万元/月
数据开发3-5年本科及以上
上班时间:8:30-18:00,中午休息1个半小时
双休 法定节假日 金融假期 年假 五险一金
技术要求:
1、本科及以上学历,计算机相关专业。具备扎实的大数据开发理论基础,有实际参与大数据清洗及批量处理类项目的经验;
2、两年以上大数据开发工作经验,熟练掌握SQL,熟悉Hive/PostgreSQL/Oracle底层机制并具备调优能力者优先;
3、熟练运用Oracle存储过程,具备Python/shell脚本开发能力;
4、有独立完成Hadoop、Spark集群搭建与部署经验者,视为加分项;
5、逻辑清晰,反应敏捷,具备良好的沟通协调、语言表达及文档撰写能力,能适应一定强度的工作节奏。
工作职责:
1. 负责客户、员工、企业工商等主数据的唯一性判定及相关信息的整合处理与开发工作;
2. 对接各类主数据管理系统,提供大数据技术支持,支撑各集市层及下游应用系统的主数据需求;
3. 开展主数据相关的统计分析与深度挖掘工作;
4. 承担主数据质量的日常监控、问题排查及持续优化任务。
数据开发
1-1.5万元/月
数据开发3-5年本科及以上要求数据开发经验ETL开发经验实时数仓开发经验其他数据平台开发经验数据仓库开发经验ETLSQL
1、熟练掌握Oracle、TDH数据库,精通标准SQL、hiveSQL、PL/SQL开发与性能优化,具备编写高效SQL语句及存储过程的能力;
2、了解银行数据集市、数据中台及大数据平台的架构设计与应用模式,具备相关理论基础;
3、需具备5年以上银行数据仓库建模与数据集市报表开发经验,熟练使用主流BI工具进行报表开发;
4、了解部分银行业务流程,具备主动学习和归纳业务知识的意识;
5、具备较强的逻辑思维与学习能力,能适应高强度工作,接受加班安排;
6、具备良好的编码规范、沟通表达能力、责任心以及团队协作精神;
7、计算机相关专业背景,拥有5年以上数据类项目实践经验。
大数据开发(少加班,双休)
1.3-1.5万元/月
数据开发3-5年本科及以上要求数据开发经验证券MySQL/SQL ServerKafkaAI实时数仓开发经验计算机相关专业数据治理经验Flink金融行业经验SQLSpark数据仓库开发经验Oracle
【工作职责】:
1、承接金融类业务需求,开展金融领域大数据应用系统开发;
2、探索数据与人工智能融合的应用模式,推动技术对业务及研发的支撑作用;
3、承担数据质量管控、性能调优等运维任务,确保大数据作业高效稳定运行;
4、参与金融信息类数据体系建设,协助完成数据接入、加工开发及治理相关工作。
【岗位要求】:
1、掌握数据仓库构建方法论,具有4-5年及以上大数据开发实战经验;
2、具备规范的编码习惯,熟练运用SQL,至少掌握一种脚本语言(如Python、Shell等);
3、精通大数据离线处理技术,熟悉至少一种主流框架(如Hadoop、Spark、ClickHouse、Impala等);
4、了解数据库原理及相关技术,熟悉Mysql、Oracle、Hbase等工具,可进行查询性能分析与优化;
5、态度严谨、细致耐心、责任心强,具备优秀的逻辑思维与协作沟通能力;
数据开发工程师
1.3-1.8万元/月
数据开发5-10年本科及以上要求数据开发经验BI报表开发经验非外包类Spark数
岗位职责:
1.基于业务价值链,独立开展探索性数据分析,识别流程中的关键问题与优化空间,输出具备决策推动力的洞察报告,充分释放数据潜能,为管理层提供经营策略支持。
2.根据企业数据仓库与BI系统建设需求,制定可行的技术方案与实施计划;自主调研业务场景,梳理数据应用逻辑,推动公司各业务系统数据整合至统一数据平台。
3.负责公司各业务系统数据的集中采集与入仓工作。
4.协同项目负责人完成BI系统的用户需求调研、技术支持、操作培训及使用指导,参与信息化项目规划与落地执行,编制标准化操作流程文档。
5.参与外部供应商的评估、技术沟通、选型建议及上报流程。
6.以实际业务成果为目标导向,开展深度数据挖掘与分析,全面理解公司运作机制,解决核心业务难题,提升运营效能,控制运营成本,确保分析成果有效转化为落地举措。
任职要求:
1.年龄27-38岁,具备5年以上BI项目分析与开发工作经验。
2.有BI项目实施与项目管理经验;精通SQL、Python、R、Tableau、PowerBI等主流数据分析工具与技术。
3.具备敏锐的数据洞察力,良好的沟通协调能力,出色的自主问题解决能力与抗压能力。
4.熟悉ETL流程设计,掌握数据采集、清洗、转换、抽取与统计方法,能够保障数据准确性与一致性。
5.有主导BI项目经验者优先,具备ETL开发背景,熟悉SSIS、kettle、DataStage或Informatica至少一种工具;了解OLAP技术(如SSAS);具备数据仓库架构或主题域建模经验。
6.熟练运用SQL、Python、R、Tableau、PowerBI等数据分析工具与技术。
7.熟悉制造业运营逻辑及数据分析特性,能深入理解业务本质,从多维度挖掘数据价值,为业务部门提供可行性建议,助力业务模式优化与创新。
数据开发+双休福利好
1.1-1.7万元/月
数据开发3-5年本科及以上TidbOracleMoia
中级:
1. 熟悉Tidb、Oracle、MySQL等国产及通用数据库,掌握SQL语言,了解SQL存储过程与SQL性能优化;
2. 掌握数据分析模型相关理论与方法,结合银行业务理解,具备良好的概念模型、逻辑模型设计能力,并能指导ETL完成物理模型构建;
3. 熟悉Kettle与Moia调度平台,能够运用ETL工具开展ETL流程的设计、开发、部署及日常维护;
4. 具备基础的数据库环境搭建与配置能力;
5. 有1年以上在银行或同类机构从事数据分析系统模型设计的经验;
6. 工作认真负责,抗压性强,沟通顺畅,具备良好的团队协作与协调意识。
高级:
1. 深入理解数据分析模型的理论体系并能灵活实践,基于对银行业务的整体把握,具备出色的概念模型与逻辑模型设计能力,可主导ETL物理模型的技术落地;
2. 对Tidb、Oracle、MySQL等主流数据库有深入认知,能定位和分析数据库运行问题,具备Tidb环境下的SQL性能调优经验,精通SQL及存储过程编写;
3. 精通Kettle与Moia调度平台的应用,能熟练使用ETL工具完成数据抽取、转换、加载全流程的设计、开发、部署与运维工作;
4. 具备数据库环境部署能力,在项目实施中可应对复杂场景下数据库、Kettle及Moia平台的技术挑战;
5. 具有2年以上银行或金融同业数据分析系统模型设计经验,熟悉整体数据模型架构与ETL架构,拥有丰富的技术难题处理经验;
6. 责任心强,能胜任高强度工作,具备优秀的沟通协作、自主学习与团队管理能力。
公司福利:
1. 周末双休,享受国家法定节假日,带薪年假
2. 美味食堂,项目补贴
3. 每季度发放季度绩效奖金
4. 愉快的公司氛围,有节假日礼品,不定时聚餐
客房服务员
4000-6000元/月
客房服务员月结全职熟手有经验立即上班
岗位职责:
1.负责客房日常清洁与整理,确保房间整洁、舒适、无异味,符合酒店卫生及服务标准
2. 按规范补充客房内洗漱用品、布草及客用物品,及时更换脏污布草并做好登记
3.巡查客房设施设备运行情况,发现故障或损坏及时报修并跟进处理进度
4.礼貌接待入住及退房客人,协助搬运行李、解答基础问询,提供必要帮助
5.配合领班完成计划性清洁、深度保洁及临时性突击任务,保障客房周转效率
任职要求:
1.学历不限,身体健康,仪容整洁,具备良好的服务意识和沟通能力
2.无经验者可接受带薪培训,有酒店客房服务经验者优先
3. 吃苦耐劳,责任心强,能适应轮班及节假日工作安排
4.遵守酒店规章制度,服从管理,具备团队协作精神
上什包住包吃1-2人月结
代友招聘:佛山市南海区狮山镇官窑湘菜馆招聘炒锅师傅1名工资八仠起,两餐饭市、包吃包住,月休两天。当月节假日补1天为人勤快,听安排,有炒锅底子。湖南老乡为佳信息绝对靠谱联系电话
备注:正月初九开工
配菜烧烤
民谣之夜
春春风民谣烧烤·酒馆 每晚演出6小时
营业时间:17.00-3.00
炒锅3名6500—7000
烤工6名6000-6500
配菜5名5000-5500
包吃住.月休3天, 15号发工资
联系电话
地址:广东省深圳市宝安区新桥街道
水案
顺德龙江镇某酒楼招炒锅1名6800元,水台5000元,做二个饭市,细场月休三天节假日补一天,宿舍近有空调热水器,
广东揭阳男装内裤厂诚聘电剪(一名)排布杂工(一名)仓库勤杂工(男女均可)联系电话厂址:斗文
裁剪工1-2人
男装内裤厂诚聘
电剪(一名)
排布杂工(一名)
仓库勤杂工(男女均可)
联系电话
厂址:斗文二片
初级大数据开发工程师
1-1.3万元/月
Hadoop数据开发1-3年本科及以上
1.负责大数据相关模块设计与开发工作,独立完成从需求分析、技术方案设计、开发、测试到上线交付的全流程工作;
2.深入理解业务逻辑,针对复杂业务场景进行数据探查、建模,提供并实现高效、可靠的技术与数据解决方案;
3.与业务团队及上下游系统团队紧密协作,有效沟通,确保数据项目顺利交付和运营;
4.编写高效、复杂的SQL脚本,满足多样的业务数据提取和分析需求,并对现有SQL进行性能调优。
任职要求:
1.本科及以上学历,计算机、统计学、应用数学等相关专业;
2.2年以上数据开发、数据处理相关工作经验;
3.拥有大数据生态圈开发经验,熟悉并使用过 Hadoop, Hive, Spark 中的至少两项。
4.熟悉Linux开发环境和Java/Python/Shell等开发语言;
5.熟练掌握 SQL,具备优秀的SQL编写和性能优化能力,熟悉窗口函数、复杂查询等;
6.有数据调度工具(如 DolphinScheduler, Azkaban)的使用经验;
7.有数据管理经验,熟悉数据仓库模型设计方法论,并有实际模型设计及ETL开发经验优先;
8.有银行或金融行业,特别是信用卡业务(如交易、风控、EAST或一表通监管报送等) 的数据开发或分析经验者优先;
9.学习能力强,拥有优秀的逻辑思维能力,工作认真负责、谨慎,能跨部门合作沟通。
大数据开发工程师(26届校园招聘)
1-1.5万元/月
数据开发经验不限硕士及以上Java要求数据开发经验ScalaETL开发经验数据建模经验Kafka实时数仓开发经验非外包类数据平台开发经验Flink数据治理经验C/C++其他数据开发经验BI报表开发经验
一、工作职责:
1、基于Flink、Hudi、Paimon等技术构建中国联通BOM域的大规模实时湖仓体系。
2、开展海量实时数据的处理、分析、统计与深度挖掘工作,依托Flink实现高效计算。
3、推进面向AI应用的大数据集构建与优化。
4、主导公司核心数据资产的建设,确保数据完整性与准确性。
5、制定并落地相关技术标准及使用规范,提升团队协作效率。
二、任职资格要求:
1、学历:优先考虑国内外全日制硕士研究生及以上学历人员。
2、专业背景:计算机、软件工程、信息通信、数学等相关专业方向。
三、工作技能要求:
1、熟悉Linux环境,掌握主流开发语言、工具及业务流程,精通Scala、Java、C++、Python中1至2种编程语言。
2、掌握Flink、Hudi、Paimon等大数据框架,具备扎实的实时湖仓项目实践经验。
3、具备Kafka、RocketMQ、ActiveMQ等消息中间件使用经验者优先考虑。
4、熟练运用Flink SQL进行数据处理者优先。
5、了解通用基础大模型,具备AI数据集构建经验者优先。
6、具有大规模数据系统开发经历者优先。
大数据开发工程师
1.1-1.8万元/月
数据开发5-10年本科及以上HiveShell要求数据开发经验KafkaMySQL/SQL ServerBI报表开发经验数据平台开发经验FlinkHBaseSQL
1) 持有本科毕业证及学位证,学信网可查!******之间!
2) 具备Flink或BI开发相关经验
3) 熟悉Oracle、MySQL等常用数据库,可独立编写存储过程
4) 熟练操作Linux系统及Shell脚本编程
5) 精通大数据技术栈如Hadoop、Hive、Spark、DataX、ClickHouse的开发与性能调优,具备大规模数据处理实战经验
6) 熟悉数据仓库架构及数据集市(ODS、DWD、DWS、DIM、ADS)类项目的开发流程
7) 具备较强的沟通理解能力,能独立承担并完成工作任务
数据开发工程师
1.1-1.8万元/月
数据开发3-5年本科及以上Hive要求数据开发经验ETL开发经验Spark数据平台开发经验SQL
1、计算机相关专业本科及以上学历
2、熟练掌握Oracle、Mysql等主流数据库,具备存储过程、函数的开发能力,并可完成性能调优;
3、熟悉常用ETL工具,掌握UNIX/LINUX系统命令,能够编写及维护相关自动化脚本;
4、了解银行监管数据报送相关业务流程,具备良好的学习能力与主动学习意识;
5、具备较强的沟通表达能力、团队合作精神以及工作责任感;
6、具有大数据平台或信创环境开发经验者优先考虑。
7、计算机相关专业本科及以上学历,需具备至少5年银行行业开发工作经验
中保登-中级应用系统开发工程师
1.4-1.5万元/月
数据开发3-5年本科及以上
岗位职责
1. 深入理解业务需求,并开展针对性分析;
2. 依据项目开发节奏与任务安排,高效完成对应的数据开发任务;
3. 协同项目经理推进并达成各项相关工作目标;
4. 执行公司管理层安排的其他工作任务。
岗位要求
1. 具备3-5年相关领域工作经验,本科及以上学历;
2. 精通SQL,具有编写复杂查询及性能优化的实际经验;
3. 掌握常用数据同步工具(如Sqoop、DataX);
4. 熟悉高斯、达梦、tdsql、mysql、oracle等关系型数据库;
5. 熟悉数据仓库相关理论与实践;
6. 拥有大数据行业实践经验者优先考虑;
7. 能够独立承担大数据平台部署、模块开发与性能调优工作;
8. 具备金融行业工作背景者优先录用;
9. 需现场参加面试
驻场数据标注员
8000-13000元/月
数据标注/AI训练师1-3年高中及以上
岗位职责:
1.负责智标数据项目现场的数据标注执行工作
2.精准完成数据的标记与归类,保障数据准确性与完整性
3.协同团队成员,高效推进并落实各项标注任务
任职要求:
1.具备良好的表达能力和协作意识
2.能够清晰理解并规范执行数据标注指令
3.具有较强的关注细节能力及应对问题的处理能力
大模型算法
大模型应用开发工程师(LLM工程化/软件集成)
核心定位
软件产品与大模型的核心桥梁岗,最适配软件端基础大模型需求,负责将大模型能力封装为软件可调用的接口/功能模块,落地大模型相关产品功能(如智能问答、内容生成、智能助手等),是需求最高的基础岗。
岗位职责
1. 负责大模型能力与公司软件产品的集成开发,封装大模型API接口、开发专属功能模块(如智能对话、生成式功能),适配软件前端/后端调用逻辑;
2. 设计并落地Prompt工程,针对软件业务场景制作专属Prompt模板、知识库检索增强(RAG)流程,提升大模型在业务场景的回答准确性;
3. 对接软件后端开发团队,协同完成大模型功能的联调、测试与上线,保障功能在软件中稳定运行;
4. 优化大模型调用的响应速度、容错机制,解决软件中调用大模型出现的卡顿、报错、结果不符合预期等问题;
5. 梳理软件业务场景的大模型需求,输出接口文档、使用手册,支撑产品迭代。
必备技能
1. 精通Python开发,熟悉FastAPI/Flask/Django等后端框架,能独立开发大模型调用接口,具备软件接口开发经验;
2. 熟悉主流开源大模型(如Llama3、Qwen、Baichuan、ChatGLM)或商用大模型API(如文心一言、通义千问、讯飞星火)的调用与二次开发;
3. 掌握Prompt工程核心方法,能针对具体业务场景设计高效Prompt,了解Few-shot/Zero-shot提示词技巧;
4. 了解大模型知识库检索增强(RAG) 基础逻辑,会使用Milvus/Pinecone/Chroma等向量数据库的基础操作;
5. 具备良好的代码规范,熟悉Git版本管理,能与软件前后端开发团队高效协同联调;
6. 有软件功能模块开发经验,理解软件前后端交互逻辑,能快速适配软件的技术栈与运行环境。
加分技能
1. 熟悉大模型函数调用(Function Call)、工具调用(Tool Call),能开发大模型调用软件本地功能/第三方工具的能力;
2. 掌握轻量级大模型微调(如LoRA/QLoRA)基础流程,能结合业务数据做简单精调;
3. 了解向量数据库优化、文本分块/向量化策略,能提升RAG场景的检索效率;
4. 熟悉TypeScript/Java/Go等其中一门语言,能适配公司软件的主流后端技术栈;
5. 有AI大模型与APP/小程序/后台系统集成的实际项目经验。
大模型微调/精调工程师(软件业务定制)
核心定位
针对公司软件的专属业务场景做大模型定制化微调,让大模型适配行业/产品专属需求(如潮玩行业智能设计、软件专属问答),输出可直接集成到软件的定制化模型版本。
岗位职责
1. 基于公司软件的业务数据(如行业语料、产品对话记录、功能需求语料),完成数据清洗、标注、格式转换,制作大模型微调数据集;
2. 选用合适的微调方法(LoRA/QLoRA/全参数微调),对开源大模型进行轻量级精调,适配软件的业务场景,提升模型在专属场景的效果;
3. 负责微调模型的效果评估与迭代,设计评估指标(如准确率、相关性、流畅度),解决模型过拟合、效果不佳等问题;
4. 输出微调后的轻量化模型版本,配合部署工程师完成模型在软件端的集成与落地;
5. 沉淀大模型微调流程与数据标注规范,支撑后续多场景的模型定制。
必备技能
1. 精通Python开发,熟悉PyTorch/TensorFlow/PaddlePaddle等深度学习框架,能独立搭建大模型微调训练环境;
2. 熟悉主
信实广州翻译公司大洋洲语种数据标注项目
30-60元/时
数据标注/AI训练师经验不限学历不限
工作周期:长期兼职
每周工期:无限制
工作时间:灵活安排
工作时段:自由选择
结算方式:日结
招聘截止时间:2025-11-05
信实广州翻译公司_信实深圳翻译公司|数据标注项目,现面向社会招募【大量】毛利语、巴布亚皮金语、比斯拉马语、萨摩亚语、斐济语、密克罗尼西亚语人才,期待与您建立长期合作关系。
工作形式:线上远程,需自备电脑设备。
岗位要求:
1.负责音频数据的分割、转录、语句顺滑、翻译及专业术语提取等工作;
2.系统提供初步识别结果,支持使用AI工具辅助处理;
3.具备良好的理解力、适应性及问题解决能力;
4.有数据标注平台操作经验或语言质量审核相关背景者优先考虑;
感兴趣者欢迎联系咨询,若有合适人脉资源推荐,同样深表感谢!
数据标注
2000-3000元/月
数据标注/AI训练师经验不限大专及以上不接受居家办公
岗位职责:
1、按照任务分配在平台完成数据标注工作;
2、在线处理图文、音频、视频、3D、4D及大模型相关数据;
3、依据标准对数据内容进行框选,并参与规则优化;
4、协同审核与质检流程,确保数据顺利通过验收;
任职要求:
1、具备大专及以上学历;
2、能熟练操作Excel等办公软件;
3、具备良好的沟通能力,能够及时发现并反馈问题;
数据标注
2000-4000元/月
数据标注/AI训练师经验不限大专及以上
岗位职责:
1. 负责数据的标注工作,保障数据的准确性和质量达标
2. 参与AI系统训练流程,提供高质量标注数据以提升算法效果
任职要求:
1. 大专及以上学历,熟悉计算机基本操作
2. 具备较强的细节观察能力和准确性,能精准完成数据标注
3. 具备高效执行任务的能力,同时保持良好的协作意识
临时工
岗位职责
1. 负责教授青少年无人机系列课程,涵盖无人机理论基础、模拟飞行,实操飞行(航模、童学机、穿越机等)无人机编程与应用,组装与维护,无人机足球及赛事规则等模块,确保教学内容准确、生动,符合青少年认知水平。
2. 依据课程体系制定详细教学计划,设计课堂互动环节与实践任务,激发学员对无人机领域的兴趣,提升学员动手操作与逻辑思维能力。
3. 组织无人机飞行实操训练,全程监督学员操作安全,及时纠正不规范操作,保障教学过程中的人员与设备安全。
4. 跟踪学员学习进度,定期评估学习效果,针对不同学员的学习情况提供个性化辅导,帮助学员攻克学习难点。
5. 维护教学所用无人机、航模、编程设备等教具,确保设备正常运行;课后整理教学场地,保持教学环境整洁有序。
6. 与学员家长保持沟通,反馈学员学习情况,解答家长关于课程内容与学习效果的疑问,建立良好家校合作关系。
7. 关注无人机教育领域的最新动态与技术发展,定期更新教学内容与方法,提升自身专业素养与教学水平。
爬虫逆向开发工程师
1.8-3.5万元/月
爬虫工程师5-10年本科及以上
岗位职责
1. 负责抖音、小红书等社交类APP及WEB端平台的数据采集工作,完成数据清洗、结构化转换与存储,并持续进行爬虫系统的运营与维护。
2. 深入分析主流平台的反爬机制,综合运用验证码识别、防护逻辑逆向、JS混淆解析等技术手段突破限制,具备处理复杂反爬策略的实际能力。
3. 承担独立及分布式爬虫系统的设计、开发、优化与重构工作,提升系统运行效率与稳定性,确保数据抓取的高效性与准确性。
4. 熟练使用正则表达式、XPath等数据提取方式,对获取信息进行深度清洗与管理,保障数据处理结果的精确与完整。
5. 实现APP逆向采集、浏览器自动化模拟等技术方案,提升数据抓取的自动化水平与执行效率。
6. 编写规范的技术文档,为团队其他开发人员提供技术支持与开发协助。
任职要求
1. 本科及以上学历,计算机科学、软件工程等相关专业优先。
2. 熟练掌握Python语言及爬虫开发全流程,精通JS逆向技术,可独立完成多种类型爬虫任务。
3. 具备抖音、头条、Tiktok、小红书、快手、蝴蝶号等任一平台逆向经验者优先;熟悉相关平台风控体系,长期研究并能有效应对风控问题者优先。
4. 理解JSVMP运行机制,能够通过跟栈、日志输出、插桩等方式分析请求头、Cookies等参数生成逻辑,可通过补环境或算法还原方式解决加密参数问题。
5. 精通md5、sm3、sm4、AES等前端常用加密算法,了解WASM工作机制,能通过调用栈分析加密流程。
6. 熟悉滑块、点选、谷歌验证码等常见验证码类型,具备相应的识别与应对能力。
7. 掌握APP运行机制与逆向分析原理,能使用Jadx-gui等工具进行Java层参数解析,并通过Hook脚本实现代码逻辑追踪。
8. 熟练操作各类抓包与逆向工具,能结合AI技术快速定位并解决爬虫难题,具备自主学习能力,善于新技术的研究与落地应用。
9. 了解quic、ssl等协议层面的抓包与反爬策略,能快速排查并解决网络抓包中的异常问题。
10. 精通Python,同时具备Node.js、Java等至少一种其他编程语言的实际开发经验。
11. 熟练使用Scrapy、BeautifulSoup、Selenium等主流爬虫框架,有丰富的框架定制与维护经验。
12. 熟悉MySQL、MongoDB、Redis等常用数据库的使用与性能优化,具备实际项目应用经验。
13. 掌握大规模数据采集、清洗、去重、分类等核心技术,具备数据质量判断与无效信息过滤能力。
14. 具备良好的沟通协调能力和团队合作意识,能与产品、运维等多方协作,准确理解并实现业务需求。
大数据开发工程师
1-1.5万元/月
数据开发5-10年本科及以上Java要求数据开发经验ScalaKafka非外包类计算机相关专业数据平台开发经验FlinkSQLHBaseC/C++HiveSparkPython
岗位职责
负责数据中台的数据建模、ETL开发及指标体系的标准化梳理;
搭建并维护公共数据服务体系(ODS/DWD/DWS/ADS),支撑业务端高效获取可靠数据;
持续优化大数据处理流程与系统性能,保障数据准确性与一致性;
参与数据资产管理相关功能建设,包括数据血缘追踪、数据质量监控等模块。
任职要求
熟练掌握Hadoop/Spark/Flink等主流大数据计算框架;
熟悉Hive、ClickHouse、Presto、Iceberg/Hudi等数据仓库与数据湖技术;
具备主流调度工具(Airflow/DolphinScheduler)及数据开发平台的使用经验;
具备扎实的SQL能力和良好的数据建模基础(如维度建模、主题域建模);
有数据中台项目实践经验者优先考虑。
临时工
通知:明天8点20之前到中国药科大学地铁站2号出口集合,提前查好路线,不要迟到放鸽子,上下班注意打卡,,如提前下班按打卡工时结算,着装不要穿短裤裙子,不要穿安踏斐乐品牌鞋服,自带水杯喝水!
梁通潭
数据工程师
1.5-2万元/月
数据开发3-5年本科及以上要求数据开发经验ETL开发经验MySQL/SQL Ser
使用Databricks、Python与SQL设计、开发并维护高效稳定的ETL/ELT数据处理流程
集成来自API、数据库以及Kafka/SnowPlow等流式系统的多源异构数据
在AzureDataFactory(ADF)中构建和管理数据工作流,实现自动化调度与转换任务
持续优化数据存储结构与处理逻辑,提升执行效率并降低资源开销
协同各业务部门梳理数据需求,交付可扩展、高可用的数据解决方案
保障数据平台中数据的质量、一致性和安全合规性
实时监控数据链路运行状态,快速定位并解决系统异常与性能瓶颈
必备条件:
计算机科学、工程或相关专业本科及以上学历
3年以上数据工程领域实际工作经验
熟练掌握Python与SQL进行数据清洗、转换与加载操作
具备Databricks平台及ApacheSpark的项目实战经历
深刻理解ETL/ELT流程架构与数据仓库建模原理
拥有AzureDataFactory(ADF)的实际应用经验
熟悉Kafka用于实时数据流的采集与处理机制
了解数据建模方法论,掌握数据治理与架构设计最佳实践
优先条件:
具有主流云平台(Azure/AWS/GCP)的部署与运维经验
了解CI/CD流水线搭建及DevOps协作模式
接触过数据目录工具与元数据管理系统
具备出色的分析能力与严谨的执行细节意识
高级大数据开发工程师
2.5-5万元/月
数据开发5-10年硕士及以上HDFS原理/源码要求数据开发经验Spark原理/源码Flink原理/源码Go实时数仓开发经验FlinkShellHive原理/源码数据仓库开发经验PythonJavaETL开
岗位要求:
数据库与SQL:熟练掌握SQL技能,尤其在HiveSQL方面具备扎实能力,能够进行性能优化;了解Oracle、MySQL等至少一种主流数据库系统。
大数据技术:熟悉Hadoop、Hive、Spark、Flink等大数据平台核心组件及其应用场景。
编程语言:具备Java、Python、Shell或Scala中至少一项语言的开发能力。
ETL与建模:能熟练运用Kettle、Informatica等ETL工具;理解维度建模方法(如星型模型、雪花模型)及相关理论基础。
岗位职责:
体系建设:主导数据仓库或数据平台的整体架构设计,负责数据模型的规划与实施搭建。
数据开发:承担ETL流程的设计、编码与调优工作,确保数据处理过程的准确性和系统稳定性。
数据治理:推进元数据管理机制和数据质量保障体系的建立与执行,及时识别并解决数据相关问题。
业务支持:协同业务部门及数据分析团队,将实际业务需求转化为可落地的技术解决方案,助力数据驱动决策和应用落地。
其他背景要求:
教育背景:一般需计算机、数学、统计学等相关专业本科及以上学历(占比88.6%)。
工作经验:多数岗位需具备3-5年(占比44.1%)或5-10年数据领域相关工作经验。
综合能力:具备良好的沟通协调能力、团队协作意识、问题分析与解决能力,以及高度的责任感。
栏目概述
鱼泡直聘为工人提供广东大数据工程师招聘信息在线招聘信息,主要招聘广东数据开发相关人才。作为数据开发工人,如果您具备一定的工作经验,并且能够熟练掌握相关的岗位技能和了解数据开发的工作职责。那么您将是我们需要的人才,平台上有更多的工作机会适合您。