猿急送    52人浏览/13人投稿    851天前    已托管赏金

一、需求描述： 1、国外一款APP上抓取视频url，APP上需要设置地点，设置后会展示周边五英里范围的视频，抓取保存所有视频url，然后切换地址，切换后地址要求与设置过地址范围不重复，切换地址后重复视频url抓取，直到完成目标范围。 2、技术：逆向工程，地理信息处理，反爬虫机制应对。 二、人才要求：原生APP爬虫高手 三、参考产品：无 四、合作方式 开发方式：远程开发； 开发周期：2天。

猿急送    43人浏览/47人投稿    851天前    已托管赏金

爬虫时有一定的屏蔽，提交信息，提交时需要滑块验证码，提交时需要带cookie，提交数据时好像还有加密，需要做到自动提交，信息我会提供

开源众包    44人浏览/11人投稿    854天前    已托管赏金

需要做一个爬虫定期爬取数据

猿急送    49人浏览/42人投稿    855天前    已托管赏金

招聘线上爬虫兼职，熟悉python相关爬虫工具，能提供各种网页的爬虫解决方案，包括登录，文档下载，文档解析等。需定向爬取100+网站，大部分通过翻页和对方的搜索接口完成。 费用: 1-2万 付款方式:按周付款，交付符合要求的代码和数据后付款。 希望你有充分的时间和爬虫经验，主动思考，主动帮忙解决过程中遇到的问题。

开源众包    33人浏览/47人投稿    860天前    已托管赏金

想c#定制一个浏览器，需要有设置带账号、密码的socks5 proxy，截取resp的set-cookie、修改request的cookie，添加自定义脚本。高校应用，非爬虫。具体要求请添加QQ：26365685

开源众包    35人浏览/11人投稿    860天前    已托管赏金

想c#定制一个浏览器，需要有设置带账号、密码的socks5 proxy，截取resp的set-cookie、修改request的cookie，添加自定义脚本。高校应用，非爬虫。具体要求请添加QQ：26365685

开源众包    40人浏览/19人投稿    861天前    已托管赏金

爬虫抓取UID信息，需要熟悉得高手操作，联系QQ：19841130，报价后平台担保交易

开源众包    44人浏览/8人投稿    863天前    已托管赏金

爬虫项目技术方案项目目标爬取指定网站的目录结构、catalog等内容。分析网站的技术栈，基于wappalyzer.csv文件中的信息，优化爬虫策略。技术栈和工具Python：使用Python 3.x版本，利用其强大的库支持完成爬虫开发。Scrapy或BeautifulSoup：用于抓取网页内容和解析HTML。Pandas：处理和分析wappalyzer.csv中的数据，辅助优化爬虫策略。Requests：发送HTTP请求。Selenium或Puppeteer（如果需要处理JavaScript渲染的页面）。功能要求目录和内容爬取：爬取网站的目录结构，包括所有页面的URLs。根据目录结构，爬取每个页面的具体内容，尤其是catalog部分。技术栈分析与应用：使用Pandas分析wappalyzer.csv，确定目标网站使用的关键技术栈。根据技术栈特点调整爬虫策略，例如处理SPA（单页面应用）或解析JSON API。数据存储：爬取的目录结构和页面内容应存储在适当的格式中，如CSV文件或数据库。反反爬虫机制：实现IP轮换、设置合理的请求间隔、使用随机User-Agent等策略，避免被封禁。错误处理和日志记录：实现错误处理机制，确保爬虫稳定运行。记录日志，包括爬取过程中的关键信息和可能的错误信息。交付物完整的爬虫源代码。爬取到的数据文件。实施报告，包含爬取策略、遇到的问题、解决方案及优化建议。

猿急送    36人浏览/8人投稿    864天前    已托管赏金

功能大概： 1.按关键词搜人 2.按公司名字搜 3.按职业名字搜人 4.按领英id搜个人详细资料 5. 需要详细交谈 大概是要做浏览器扩展加后台形式 上面相关的功能api可提供

开源众包    53人浏览/32人投稿    865天前    已托管赏金

应用于亚马逊、沃尔玛、乐天、Noon等境外电商网站，提供某品类或产品关键字字段，爬取该品类或关键字字段一段时间内搜索量、卖家数、销售总量等指标。需求和预算详谈。