有些网站设置了权限,只有在登录了之后才能爬取网站的内容,如何模拟登录,目前的方法主要是利用浏览器cookie模拟登录。 浏览器访问服务器的过程 在用户访问网页时,不论是通过URL输入域名或IP,还是点击链接,浏览器向WEB服务器发出了一个HTTP请求(Http Request),WEB服务器接收到客 ...
分类:
编程语言 时间:
2018-03-29 16:01:48
阅读次数:
132
在WEB开发中,服务器可以为每个用户浏览器创建一个会话对象,即session对象,注意:一个浏览器独占一个session对象(默认情况下)。因此,在需要保存用户数据时,服务器程序可以把用户数据写到用户浏览器独占的session中,当用户使用浏览器访问其它程序时,其它程序可以从用户的session中取 ...
分类:
其他好文 时间:
2018-03-24 14:56:09
阅读次数:
106
首先,客户端通过URl访问服务器,服务器找到响应的项目,项目里面有web.xml,然后扫描web.xml 在servlet-mapping标签的url-pattern标签中找到在通过url-pattern的兄弟标签servlet-name找到servlet标签的servlet-name, 在通过se ...
分类:
其他好文 时间:
2018-03-23 14:18:29
阅读次数:
155
nginx的多域http、https同时访问配置及http重定向https1、关于ssl服务证书的申请或生成就略过2、nginx关于多域名访问服务器(1)配置nginx中conf文件夹下的nginx.conf加入代码(环境是windows2008server+upupw_np7.0)includevhosts.conf;(2)conf文件夹下新建vhost.conf,加入以下内容:server{l
分类:
Web程序 时间:
2018-03-16 20:23:03
阅读次数:
309
一,概念 cookie会话可简单理解为:用户开一个浏览器,点击多个超链接,访问服务器多个web资源,然后关闭浏览器,整个过程称之为一个会话。有状态会话:一个同学来过教室,下次再来教室,我们会知道这个同学曾经来过,这称之为有状态会话。 二、会话过程中要解决的一些问题? 每个用户在使用浏览器与服务器进行 ...
分类:
其他好文 时间:
2018-03-10 18:12:57
阅读次数:
139
反向代理 客户端 A 出于某种原因(如 GFW)无法访问服务器 B,但它能访问服务器 C,服务器 C 能访问服务器 A,那么客户端 A 可通过服务器 C 来访问服务器 B。此时服务器 C 就是一个代理服务器(即正向代理)。 首先将请求发送到服务器 C,服务器 C 将请求转发到服务器 B 并接收服务器 ...
分类:
其他好文 时间:
2018-03-10 00:16:41
阅读次数:
205
11.14/11.15Apache和PHP结合Windows访问服务器网站解析phpvim/usr/local/apache2.4/conf//httpd.conf//修改一下四个地方第一个地方报ServerName错误及解决如下图用Windows访问服务器的ip,出现下图是正确的,如果不正确看是否服务器的80端口没有开启如下第二个地方requirealldenied第三个地方修改php相关的。A
分类:
其他好文 时间:
2018-03-04 21:16:43
阅读次数:
187
一、session一致性问题 使用集群方案解决网站高并发问题时,就会部署多台应用服务器。当用户第一次通过客户端(如:浏览器)访问服务器时,服务器会创建对应的session, 使用Nginx反向代理,假如用户A第一次访问站点,被反向代理到服务器一处理,服务器一创建对应sessionA记录信息,用户A再 ...
分类:
其他好文 时间:
2018-03-03 19:25:51
阅读次数:
152
一、session一致性问题 使用集群方案解决网站高并发问题时,就会部署多台应用服务器。当用户第一次通过客户端(如:浏览器)访问服务器时,服务器会创建对应的session, 使用Nginx反向代理,假如用户A第一次访问站点,被反向代理到服务器一处理,服务器一创建对应sessionA记录信息,用户A再 ...
分类:
系统相关 时间:
2018-03-03 15:28:37
阅读次数:
242
SFTP在Linux下是一个很方便很安全的文件传输工具,我常常用它在Linux服务器上替代传统的ftp来传输文件。众所周知SFTP账号是基于SSH账号的,默认情况下访问服务器的权限很大,下面的教程就是教你像ftp那样限制SFTP账号相关的访问权限。 必要条件: 你的openssh-server版本至 ...
分类:
其他好文 时间:
2018-03-02 18:49:51
阅读次数:
1203