码迷,mamicode.com
首页 > Web开发 > 详细

WEB - 定时获取代理池(简单方法)

时间:2018-10-04 22:02:40      阅读:165      评论:0      收藏:0      [点我收藏+]

标签:pre   代理   read   text   后台   import   pen   param   with   

import requests
import time
from read_ip_pool import read_ip_pool

PROXIES_URL = ‘‘


def get_ip_pool(url=PROXIES_URL):
    """ 根据URL构造代理池

    :param PROXIES_URL:
    :return: []
    """
    response = requests.get(url)
    with open(‘IP_POOL‘, ‘w‘) as f:
        f.write(response.text)
    print(‘get_ip_pool is done‘)

# Unix, 后台运行脚本: <script_name> &
while True:
    get_ip_pool()
    read_ip_pool()
    # time+死循环, 实现定时功能。
    time.sleep(10)
    print("")

WEB - 定时获取代理池(简单方法)

标签:pre   代理   read   text   后台   import   pen   param   with   

原文地址:https://www.cnblogs.com/allen2333/p/9743525.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!