您的位置:首页 > 新闻资讯 > 文章内容
如何异步验证IP代理池?
来源:互联网 作者:admin 时间:2020-04-27 14:16:59

  想知道如何异步验证IP代理池?万变ip这里有一个教程可以提供给大家。

  Docker部署:

  1、Docker安装

  2、docker-compose 安装(建议采用pip安装方式)

  3、下载当前仓库代码到本地

  git clone https://github.com/Hogan-TR/ProxyPool.git

  4、修改 ./proxypool/config.py 中的配置

  REDIS_HOST = "127.0.0.1" # 将 REDIS_HOST 的内容替换为当前机器的内网ip

  # 其他配置可按需修改

  5、修改 docker-compose.yml 中的配置

  可修改main中ports的端口映射,从而更改 api 的本地调用接口,默认5000端

  6、执行 docker-compose up 命令,启动代理池

  基于本机环境部署(仅支持类Unix系统)

  1、准备:Python3 + Redis 环境

  2、下载当前仓库代码到本地

  git clone https://github.com/Hogan-TR/ProxyPool.git

  3、创建虚拟环境,安装依赖

  cd ProxyPool

  python3 -m venv venv

  source ./venv/bin/activate

  pip install -r requirements.txt

  4、根据系统 Redis 配置修改 ./proxypool/config.py 中 Redis 相关参数REDIS_HOST,REDIS_PORT,REDIS_PASSWORD

  5、执行 sudo python run.py 命令,启动代理池

  注:代理池首次启动后需十分钟左右,进行数据的抓取、清洗,才可开始提供高质代理

  功能实现图:

如何异步验证IP代理池

相关文章内容简介
推荐阅读
  • 15 2020-04
    网速慢如何提升?

    为什么有的时候我们使用网络会延迟,甚至会明显感受到网络速率很慢呢?要解决网速慢的问题,我们可以有这些方法来操作。

  • 04 2020-08
    自己怎么建立代理ip池

    如何搭建一个合格的代理ip池?只要跟着这几个步骤来走,大家就能够自己建立一个代理ip池来使用。

  • 23 2020-04
    玩b站为什么用代理ip?

    现在b站的用户以及日活不断增加,特别是最近非常火的罗翔老师,进驻b站迅速获得500多万粉丝。那么有一些海外网友想要做b站up主,可以怎么办。

  • 09 2020-12
    网络代理ip软件派上用场的地方

    网络工作者会经常接触到代理服务器,现在的互联网开始进入大数据时代,使用代理IP访问网页真的安全吗?

  • 02 2021-02
    更换代理ip来采集

    凭借代理ip,我们能够顺利的进行网络数据的抓取工作,这是很便利的操作

  • 25 2020-05
    代理ip匿名程度的几个分类

    ip代理根据不同的隐匿程度划分,其使用效果也是非常不同的。透明代理、匿名代理、高匿代理之间的效果区别,让万变ip给大家介绍一下吧。