# dynamic_ip_proxys_pools

**Repository Path**: mason101/dynamic_ip_proxys_pools

## Basic Information

- **Project Name**: dynamic_ip_proxys_pools
- **Description**: 动态IP代理池，通过爬取代理网站，将爬取到的可用ip加入到redis里，每20分钟检测一次代理池，剔除无效IP，同时不足200个则重新爬取
- **Primary Language**: Python
- **License**: Apache-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 3
- **Forks**: 1
- **Created**: 2020-07-27
- **Last Updated**: 2022-08-18

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# dynamic_ip_proxys_pools

#### 介绍
动态IP代理池，通过爬取代理网站，正则解析ip，将可用ip加入到redis里，每20分钟检测一次代理池，剔除无效IP，同时不足200个则重新爬取

#### 软件架构
python3.6 + re + requests


#### 使用说明

python agent_server.py 即可运行程序