logo科技微讯

关于 IP 代理池

作者:科技微讯
日期:2022-09-11
📝 笔记

这个网站可以领取一定额度的免费 IP 代理。

拿到的代理搭配 got 的使用方法。got-scraping 不支持传入 IP 代理,需要用 http url 代理。crawlee 用的是 got-scraping,所以也不能直接传入 IP 地址。

RSSHub 支持传入多种代理 URI,包括 http、socks 等,RSSHub 作者分享了 socks 代理可以使用 WARP 生成。

有一篇文章分享了如何用 ipv6 搭建代理池,非常值得一看。该文章作者提到了他的师兄,他的代理池项目值得一看,这位师兄还写了很多 spider,还分享了 js 爬虫的相关工具,提到了 crawlee、proxy-chain。

另一个从免费地理池网站爬取代理的项目也可以看看。

RSSHub 作者在轻松创建一万个 Twitter 账号这篇文章提到了一个叫 proxy-cheap 的收费代理池服务。

donation赞赏
thumbsup0
thumbsdown0
暂无评论