任务详情
工作要求：1.负责小红书及抖音的数据抓取，定期爬取指定这两个APP端的数据；2.解决app端遇到的反爬问题；3.实现数据提取、清洗、结构化、入库、统计分析等需求。兼职要求：1.大专以上学历，计算机软件或相关专业，需要有经验，有小红书及抖音数据爬取的实操经验，萌新绝对不要来！还是要技术的！！2.熟知HTTP、TCP 等知识，了解反爬原理；3.熟练掌握正则表达式、XPath；4.熟练使用一款代理工具（Charles、Fiddler、Mitmproxy）；5.熟练使用 MySql、MongoDB；5.能够独立分析遇到的 JS 反爬；6.有接触爬取过 APP 端数据；7.不用坐班，自己安排业余时间完成工作。
