dzr
c67c884001
添加新的代理检测机制
|
il y a 4 mois | |
|---|---|---|
| common | il y a 4 mois | |
| conf | il y a 4 mois | |
| services | il y a 4 mois | |
| .gitignore | il y a 1 an | |
| Dockerfile | il y a 8 mois | |
| README.md | il y a 8 mois | |
| base_server.py | il y a 8 mois | |
| docker-compose.yml | il y a 8 mois | |
| gunicorn.conf.py | il y a 8 mois | |
| produce_task.py | il y a 8 mois | |
| py_proxy_linux | il y a 8 mois | |
| py_proxy_mac | il y a 4 mois | |
| py_proxy_win.exe | il y a 4 mois | |
| pytools_main.py | il y a 8 mois | |
| requirements.txt | il y a 1 an | |
| routes.py | il y a 8 mois | |
| setting.py | il y a 4 mois |
README.md
pyspider - 通用采集服务
创建docker容器
docker build -t pytools:latest .
创建容器并启动
docker-compose up -d
销毁容器并关闭
docker-compose down
重启全部容器服务
docker-compose restart
配置说明
conf/config.yaml - py_proxy_linux
conf/dev.yaml - pytools_main.py
conf/test.yaml - pytools_main.py