def ipinfocip(ip): # 获得 输入框中的信息 url = "http://www.cip.cc/%s" % ip # 模拟浏览器请求网络 headers={'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKi... ...
分类：
编程语言 时间：
2019-08-02 00:06:26
阅读次数：
153
这是一个分析IP代理网站，通过代理网站提供的ip去访问CSDN博客，达到以不同ip访同一博客的目的，以娱乐为主，大家可以去玩一下。 首先，准备工作，设置User-Agent: 然后百度一个IP代理网站，我选用的是https://www.kuaidaili.com/free，解析网页，提取其中的ip、 ...
分类：
编程语言 时间：
2019-07-28 20:08:19
阅读次数：
147
import urllib import os,refrom urllib import request, parseimport requestsimport randomimport timefrom bs4 import BeautifulSoup user_agent_list = [ "M ...
分类：
编程语言 时间：
2019-07-27 23:52:19
阅读次数：
166
网站通过一个符合Robots协议的robots.txt文件来告诉搜索引擎哪些页面可以爬取。Robots.txt协议全称“网络爬虫排除标准”。一般情况下，该文件以一行或多行User-agent记录开始，后面再跟若干行Disallow记录。 User-agent：该项的值用于描述搜索引擎robot的名字 ...
分类：
其他好文 时间：
2019-07-27 17:06:18
阅读次数：
80
import requestsfrom lxml import etreeimport jsonimport timeclass Toutiao(object): def __init__(self): self.headers = { 'user-agent': 'Mozilla/5.0 (Win ...
分类：
其他好文 时间：
2019-07-24 13:16:33
阅读次数：
97
# coding=utf-8import requestsfrom lxml import etreea='https://www.dytt8.net'headers={ 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWeb ...
分类：
其他好文 时间：
2019-07-20 10:10:13
阅读次数：
156
server { listen 80; set $mobile_rewrite do_not_perform; if ( $http_user_agent ~* "(android|bb\d+|meego).+mobile|avantgo|bada\/|blackberry|blazer|compa... ...
分类：
其他好文 时间：
2019-07-20 00:10:57
阅读次数：
118
点开 一个警告然后告诉我们不被允许进入，需要我们安装.net framework 9.9,在英国，使用ie浏览器。。。。。。 看到第一条和第三条我本以为是真的，但看到英国就肯定这是欺骗我们的信息，所以我们要欺骗系统或则绕过系统 这里就直接bp抓包然后传入repeater中 在user-agent一栏 ...
分类：
其他好文 时间：
2019-07-16 08:21:03
阅读次数：
90
HTTP请求格式 <!--[endif]--> URL包含：/index/index2?a=1&b=2；路径和参数都在这里。 请求头部： · content-length表示请求体里面的数据长度； · user-agent：告诉服务端，用什么发送的请求 ...
分类：
Web程序 时间：
2019-07-14 00:19:44
阅读次数：
196
HTTP协议概述 HTTP是一个客户端终端（用户）和服务器端（网站）请求和应答的标准（TCP）。通过使用网页浏览器、网络爬虫或者其它的工具，客户端发起一个HTTP请求到服务器上指定端口（默认端口为80）。我们称这个客户端为用户代理程序（user agent）。应答的服务器上存储着一些资源，比如HTM ...
分类：
Web程序 时间：
2019-07-14 00:03:39
阅读次数：
125
