任务详情
Hiring: AI Crawler / Job Intelligence Engineer（Remote）
【关于我们】
我们是一家聚焦北美市场的AI初创公司，正在打造下一代企业智能招聘与销售自动化助手。通过AI Agent自动化操作LinkedIn等平台，帮助企业精准触达目标人才或客户，并实现高效转化。同时，我们也在做帮助个人求职者求职提效的AI+求职产品。团队核心成员来自硅谷，现寻找中国的技术极客共同从0到1打造产品。
我们在做一套 AI 爬虫+ 职位监测系统：能对任何包含岗位信息的网站（官方招聘页、ATS、求职平台、社区帖、公司公告等）进行自动化抓取、解析、去重与变更监测，并把结构化职位推送到内部系统与订阅用户。
你将负责：
1.建立可扩展的站点适配 + 解析模板系统，覆盖 Greenhouse、Lever、Workday、SmartRecruiters、公司官网等
2.反爬与稳定性：remote browser 池、代理轮换、指纹与会话管理、自动重试
3.结构化抽取（LLM + 规则）：标题、技能、薪资、签证、地点、级别、远程/混合等
4.变更监测：新增/下线/内容更新检测与通知
5.数据写入 Postgres/Elastic/BigQuery，并推送Slack/Email/Webhook/Sheets
我们期望你：
1.熟练：Playwright/Puppeteer/Selenium + Python/Node.js、分布式调度（Airflow/Celery/K8s Cron）、代理与指纹、反爬与渲染
2.有 LLM 提取与对齐（Guardrails/JsonSchema/Retry）经验更佳
3.对 robots.txt / ToS /合规敏感，能在灰度边界内稳健落地
技术栈（灵活）：Playwright、Puppeteer、Selenium、Scrapy、Playwright-Docker、Selenium Grid、Browserless、K8s、Redis、Postgres、Elastic、Airflow、LangChain + GPT/Claude
备注：
1.线上面试、远程办公，工作时间地点灵活；
2.兼职，报酬面议；
3.如合适，可长期合作；
技术栈非常匹配，求联系
