采集代理池和其他采集相关基础服务

dzr 79eab6e34a 更新配置 8 ay önce
common 8154544c67 乐观锁更新配置 11 ay önce
conf 79eab6e34a 更新配置 8 ay önce
services 79eab6e34a 更新配置 8 ay önce
.gitignore 463057f971 提交项目 1 yıl önce
Dockerfile 53213fc9d5 fix:更新yum源 8 ay önce
README.md 85ea4ee5da 更新注释 1 yıl önce
base_server.py 463057f971 提交项目 1 yıl önce
docker-compose.yml 72ff4c329c fix:重构代理池 8 ay önce
gunicorn.conf.py 72ff4c329c fix:重构代理池 8 ay önce
produce_task.py 0644c90957 代理池新增代理分类属性,便于不同采集场景灵活切换 1 yıl önce
pytools_main.py 72ff4c329c fix:重构代理池 8 ay önce
requirements.txt 463057f971 提交项目 1 yıl önce
routes.py 72ff4c329c fix:重构代理池 8 ay önce
setting.py 79eab6e34a 更新配置 8 ay önce

README.md

pyspider - 通用采集服务

创建docker容器

docker build -t pytools:latest .

创建容器并启动

docker-compose up -d

销毁容器并关闭

docker-compose down

重启全部容器服务

docker-compose restart