您的位置:首页 > 找活儿 > 项目详情
外部线索 高级爬虫工程师
  • 来源:实现网
  • 发布时间:2026-07-24
  • 分类:爬虫采集
  • 地区:全国
  • 模式:雇佣任务
预算:

22000 元

免责声明

该外包需求信息来源于站外平台,本站仅提供公开信息部分字段展示与订阅服务,更多请查看免责声明。

项目详情

高级数据采集工程师(中国互联网数据采集 / 自动化监控方向)

工作地点: 西安/远程

工作性质: 全职 / 兼职 / 项目合作均可

【关于我们】

我们是一家来自北欧的品牌保护公司,为全球知名品牌提供电商平台、社交媒体及直播平台的品牌监控、数据分析及侵权治理解决方案。随着中国直播电商和社交电商的快速发展,我们在上海和西安设立研发支持团队,现寻找熟悉中国互联网生态的开发工程师。

【我们正在寻找什么样的人】

我们需要一位熟悉中国互联网生态、善于解决复杂技术问题的开发工程师,共同打造下一代智能品牌监控系统。

我们的核心目标很明确:建立一套稳定、高效、可扩展的自动化品牌监控解决方案。

我们不限制技术路线,无论是官方API、第三方数据平台、浏览器自动化、协议分析还是AI技术,只要能够有效解决业务问题,我们都愿意一起探索。

【您将负责的工作】

1. 自动化直播监控

· 研究并实现抖音、淘宝、快手、小红书、视频号等主流直播平台的自动化监控方案

· 稳定获取直播间商品、价格、销量、主播信息等数据

2. 电商平台数据采集

· 负责淘宝、天猫、京东、拼多多、1688、闲鱼等平台的数据获取

· 实现商品Listing的自动发现、持续监控与更新

3. 数据获取方案研究与选型

· 评估官方API、第三方数据平台、浏览器自动化、JS逆向、AI/OCR等多种技术路线

· 针对不同平台选择最优方案,平衡稳定性与开发效率

4. 自动化能力建设

· 持续优化采集稳定性,应对平台反爬策略

· 设计自动化采集流程,提升系统覆盖率与自动化程度

5. 产品研发支撑

· 与产品团队协作,将数据能力落地为“侵权商品自动发现”“品牌Logo自动识别”“监控报告自动生成”等产品功能

【我们希望您具备】

· 3年以上数据采集/爬虫开发经验,熟悉中国互联网生态

· 掌握Python(Java/Go亦可),熟悉Scrapy/Requests/Playwright等框架

· 有主流电商或直播平台(抖音、淘宝、快手等)的实际采集经验

· 具备反爬对抗经验(验证码、IP封锁、JS混淆、设备指纹等)

· 能够独立分析问题,持续尝试直到找到可行方案

· 良好的沟通能力,能与国内外团队协作

加分项

(非必须,如有更好)

· JS逆向 / APP逆向经验

· AI、大语言模型(LLM)、Agent应用经验

· OCR、图像识别或视频分析经验

· 第三方数据平台使用经验

· 分布式爬虫架构设计与落地经验

【我们能提供】

· 与国际化团队合作的机会,参与全球品牌保护产品研发

· 较大的技术探索空间,不限制技术路线,鼓励创新

· 灵活的工作方式(西安优先,支持远程)

· 根据项目成果提供具有竞争力的薪酬和长期合作机会

线索说明

该需求来自外部平台聚合,详情以原文为准。外包网仅提供线索展示,不参与交易托管。合作请注意核实对方身份。

查看原文并联系

我有需求

可在本站免费发布需求,服务商直接接单。

发布需求