任务详情
高级数据采集工程师（中国互联网数据采集 / 自动化监控方向）
工作地点： 西安/远程
工作性质： 全职 / 兼职 / 项目合作均可
【关于我们】
我们是一家来自北欧的品牌保护公司，为全球知名品牌提供电商平台、社交媒体及直播平台的品牌监控、数据分析及侵权治理解决方案。随着中国直播电商和社交电商的快速发展，我们在上海和西安设立研发支持团队，现寻找熟悉中国互联网生态的开发工程师。
【我们正在寻找什么样的人】
我们需要一位熟悉中国互联网生态、善于解决复杂技术问题的开发工程师，共同打造下一代智能品牌监控系统。
我们的核心目标很明确：建立一套稳定、高效、可扩展的自动化品牌监控解决方案。
我们不限制技术路线，无论是官方API、第三方数据平台、浏览器自动化、协议分析还是AI技术，只要能够有效解决业务问题，我们都愿意一起探索。
【您将负责的工作】
1. 自动化直播监控
· 研究并实现抖音、淘宝、快手、小红书、视频号等主流直播平台的自动化监控方案
· 稳定获取直播间商品、价格、销量、主播信息等数据
2. 电商平台数据采集
· 负责淘宝、天猫、京东、拼多多、1688、闲鱼等平台的数据获取
· 实现商品Listing的自动发现、持续监控与更新
3. 数据获取方案研究与选型
· 评估官方API、第三方数据平台、浏览器自动化、JS逆向、AI/OCR等多种技术路线
· 针对不同平台选择最优方案，平衡稳定性与开发效率
4. 自动化能力建设
· 持续优化采集稳定性，应对平台反爬策略
· 设计自动化采集流程，提升系统覆盖率与自动化程度
5. 产品研发支撑
· 与产品团队协作，将数据能力落地为“侵权商品自动发现”“品牌Logo自动识别”“监控报告自动生成”等产品功能
【我们希望您具备】
· 3年以上数据采集/爬虫开发经验，熟悉中国互联网生态
· 掌握Python（Java/Go亦可），熟悉Scrapy/Requests/Playwright等框架
· 有主流电商或直播平台（抖音、淘宝、快手等）的实际采集经验
· 具备反爬对抗经验（验证码、IP封锁、JS混淆、设备指纹等）
· 能够独立分析问题，持续尝试直到找到可行方案
· 良好的沟通能力，能与国内外团队协作
加分项（非必须，如有更好）
· JS逆向 / APP逆向经验
· AI、大语言模型（LLM）、Agent应用经验
· OCR、图像识别或视频分析经验
· 第三方数据平台使用经验
· 分布式爬虫架构设计与落地经验
【我们能提供】
· 与国际化团队合作的机会，参与全球品牌保护产品研发
· 较大的技术探索空间，不限制技术路线，鼓励创新
· 灵活的工作方式（西安优先，支持远程）
· 根据项目成果提供具有竞争力的薪酬和长期合作机会
