您的位置:首页 > 新闻资讯 > 文章内容
如何异步验证IP代理池?
来源:互联网 作者:admin 时间:2020-04-27 14:16:59

  想知道如何异步验证IP代理池?万变ip这里有一个教程可以提供给大家。

  Docker部署:

  1、Docker安装

  2、docker-compose 安装(建议采用pip安装方式)

  3、下载当前仓库代码到本地

  git clone https://github.com/Hogan-TR/ProxyPool.git

  4、修改 ./proxypool/config.py 中的配置

  REDIS_HOST = "127.0.0.1" # 将 REDIS_HOST 的内容替换为当前机器的内网ip

  # 其他配置可按需修改

  5、修改 docker-compose.yml 中的配置

  可修改main中ports的端口映射,从而更改 api 的本地调用接口,默认5000端

  6、执行 docker-compose up 命令,启动代理池

  基于本机环境部署(仅支持类Unix系统)

  1、准备:Python3 + Redis 环境

  2、下载当前仓库代码到本地

  git clone https://github.com/Hogan-TR/ProxyPool.git

  3、创建虚拟环境,安装依赖

  cd ProxyPool

  python3 -m venv venv

  source ./venv/bin/activate

  pip install -r requirements.txt

  4、根据系统 Redis 配置修改 ./proxypool/config.py 中 Redis 相关参数REDIS_HOST,REDIS_PORT,REDIS_PASSWORD

  5、执行 sudo python run.py 命令,启动代理池

  注:代理池首次启动后需十分钟左右,进行数据的抓取、清洗,才可开始提供高质代理

  功能实现图:

如何异步验证IP代理池

相关文章内容简介
推荐阅读
  • 22 2020-07
    互联网用代理ip的设置

    互联网中要使用代理ip,可以怎么设置?手动操作可以按照以下步骤来解决:

  • 29 2018-10
    认识代理ip服务商官网上的词语

    大家对于代理ip的了解有多少呢?一般我们上网时必须使用到TCP/IP协议,也就是说你必须有一个IP地址才能访问互联网,而这个ip地址是唯一,每个人只有一个。但是我们的ip是可以改变的,无论是

  • 18 2020-04
    线程ip代理软件有什么不同?

    代理ip软件最近出现了一种线程ip软件,那么这个线程ip跟我们一般使用的换ip软件有什么不同?会影响到我们正常使用代理ip吗?

  • 16 2020-04
    使用需求让网络代理ip软件发展

    网络ip,你掌握得有多少?你知道ip是可以更换的吗?更换又是经过什么来操作的?

  • 25 2020-08
    手动改ip的操作

    网络ip代理的使用途径有很多种,可以由大家自主选择。手动使用代理ip怎么操作?

  • 30 2020-07
    爬虫配合换ip的使用

    了解爬虫会遇到的阻碍​,对于大数据工作者来说是很有帮助的。因为这样我们就能够更合理地配合代理ip的使用。