特牛生活网

爬取小舒代理免费代理IP,并验证IP是否有效_小舒http-CSDN博客

网友收藏
文章浏览阅读5.7k次。爬虫爬取免费代理ip,验证代理ip有效性,保存到本地txt,建立代理池使用多线程+队列+正则匹配,对免费代理ip网站和查询自身ip网站(验证代理ip是否有效)发送请求,如果代理ip为有效,保存至本地txt文件中,建立自己的私人有效代理ip池。代码:#!/usr/bin/env python# -*- coding: utf-8 -*-# 爬取小舒代理,并检验代理IP是否可用,将可用IP保存为TXTimport requestsimport threadingfrom queue import_小舒http
标签:小舒http