成都·武侯区
职位详情
岗位职责
-设计与实现电商平台商品数据采集系统（爬虫/接口）。
-搭建稳定的数据存储与ETL（抽取、清洗、转换、加载）流程。
-协同算法团队，支撑比价与推荐模型的数据需求。
-建立数据监控体系，保障数据质量、时效性与完整性。
-研究并应用新兴的数据采集与处理技术（如WebRPA、LLM+Tool调用）以提升效率与智能化水平。
技能需求
-熟悉Python/Go，掌握常用爬虫框架（Scrapy、Playwright、Selenium等）。
-精通SQL，熟悉MySQL优化及分布式数据库设计。
-熟悉APP逆向、JS逆向、验证码破解、图像识别等技术
-熟悉常见的反爬机制并且对反爬具有一定的的措施策略且有一定研究
-熟悉分布式数据处理（Spark、Flink）及常用数据仓库（Hive、ClickHouse）。
-熟悉大模型相关知识以及Agent任务编排与工具调用机制。
-理解消息队列（Kafka/RabbitMQ）与缓存系统（Redis）的应用场景。
-有大规模数据采集、清洗、存储及分析经验。
-有使用LLM/AIAgent进行自动化信息采集、语义检索或知识抽取实战经验者优先。
经验需求
-3年以上数据工程经验，有电商/互联网数据采集经验优先。
-有与算法团队或AI系统协同开发经验者优先。
-有从0到1搭建数据平台或大规模数据处理经验优先。
-设计与实现电商平台商品数据采集系统（爬虫/接口）。
-搭建稳定的数据存储与ETL（抽取、清洗、转换、加载）流程。
-协同算法团队，支撑比价与推荐模型的数据需求。
-建立数据监控体系，保障数据质量、时效性与完整性。
-研究并应用新兴的数据采集与处理技术（如WebRPA、LLM+Tool调用）以提升效率与智能化水平。
技能需求
-熟悉Python/Go，掌握常用爬虫框架（Scrapy、Playwright、Selenium等）。
-精通SQL，熟悉MySQL优化及分布式数据库设计。
-熟悉APP逆向、JS逆向、验证码破解、图像识别等技术
-熟悉常见的反爬机制并且对反爬具有一定的的措施策略且有一定研究
-熟悉分布式数据处理（Spark、Flink）及常用数据仓库（Hive、ClickHouse）。
-熟悉大模型相关知识以及Agent任务编排与工具调用机制。
-理解消息队列（Kafka/RabbitMQ）与缓存系统（Redis）的应用场景。
-有大规模数据采集、清洗、存储及分析经验。
-有使用LLM/AIAgent进行自动化信息采集、语义检索或知识抽取实战经验者优先。
经验需求
-3年以上数据工程经验，有电商/互联网数据采集经验优先。
-有与算法团队或AI系统协同开发经验者优先。
-有从0到1搭建数据平台或大规模数据处理经验优先。
2026-05-17 12:29
IP属地：四川
职位福利
本科3-5年
成都吾利爱智科技有限公司
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
