近日本人维护的一个客户网站打开非常慢，于是便按照以往的排查步骤进行排查1，登录服务器top命令查看负载ＩＯ情况发现负载有点高并有很多php进程占了很大的资源2，进入mysql服务器查看数据库线程，并没有发现锁表情况。3，打开web访问日志发现有很多百度爬虫访问。导致点了很多..
分类：
Web程序 时间：
2014-09-18 16:51:24
阅读次数：
207
转载:http://www.floatinglife.cn/关于heritrix安装配置时出现必须限制口令文件读取访问最近开始写一个RSS聚合程序，需要爬虫支持，于是就整来heritrix，没想到，这东西还挺拽，费了老衲好几个小时来安装配置这个heritrix。最后经过不懈努力，终于起来了，具体步骤...
分类：
其他好文 时间：
2014-09-18 00:38:12
阅读次数：
369
?? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?Python 实现 CNKI批量下载 和FireFox Extension 入门学习笔记? ? ? ? 由于需要也是为了督促自己学习新的东西，我原本想要尝试着写一个爬虫程序，能够在...
分类：
编程语言 时间：
2014-09-17 19:01:42
阅读次数：
269
FAT（FileAllocationTable）这个网页的目的是帮助你理解怎么样在微软FAT32文件系统下取得数据，处理的硬盘的大小通常在500M到几百G之间。FAT是一个相对简单和纯净的文件系统。大多数文件系统都支持FAT，包括Linux和MacOS。所以也是需要访问硬盘的底层固件项目的常用文件系...
分类：
其他好文 时间：
2014-09-17 18:16:32
阅读次数：
272
XSScrapy是一个快速、直接的XSS漏洞检测爬虫，你只需要一个URL，它便可以帮助你发现XSS跨站脚本漏洞。XSScrapy的XSS漏洞攻击测试向量将会覆盖Http头中的Referer字段User-Agent字段Cookie表单（包括隐藏表单）URL参数RUL末尾，如www.example.co...
分类：
其他好文 时间：
2014-09-17 11:45:42
阅读次数：
204
python真是一门非常优秀的语言，非常适合初学者，也非常适合写一些原型程序。这篇文章总结了下以前做的各种和网络相关的东西：自动登录、提取信息、模拟点击、模拟上传、取号等等，多亏了python才使世界变得那么美好！ 本次我们主要是模拟浏览器下载网页，学会了下载网页其他的下载图片什么的都是一样的套路。...
分类：
编程语言 时间：
2014-09-16 21:48:21
阅读次数：
310
设计一个结构，利用Berkeley DB完成大数据的存储，备份，查询功能。已有的储备： 1.Berkeley DB的基本操作。 2.数据转存后数据不丢失。 3.过百GB以上数据的存储。数据流如下，个人称为数据流，具体跟其他术语冲突不在考虑范围。各部分功能： A：负责将数据存进Berkeley...
分类：
数据库 时间：
2014-09-16 20:32:21
阅读次数：
293
最近互联网思维这个词很火，各种产品被包装成了高大上，然后一群神棍把小白们忽悠的昏天黑地。到处都是小米，黄太吉，马佳佳，雕爷牛腩的成功案例。但是今天，我的文章与互联网思维没有半毛线关系，前面也都是废话。我用最真实最新鲜热乎的数据来告诉你，真正的互联网安全套行业是什么样的。
======华丽的分割线===========
数据来源：通过爬虫技术对主流的套套平台的公开页面进行大量的数据抓取。
数据...
分类：
其他好文 时间：
2014-09-16 10:51:35
阅读次数：
445
如今互联网已经成为大家日常工作生活中不可缺少的部分，而作为信息的中继站，路由器承担着非常繁重的数据处理任务，小到在住宅中几个人或几台设备使用一个网络，大到公司里几十号上百人共用一个网络。可以说，上网体验的好坏，很大程度上是由路由器决定的。 然而，对于普通网民来说，随手购买的路由器，带来的不仅有便捷....
分类：
其他好文 时间：
2014-09-16 10:36:40
阅读次数：
165
在业务制定的时候很少会切入缓存设计这一环节,毕竟在指标不明确的情况这属于一种过渡设计.毕竟缓存切入有很多手段,在很多时候直接在WEB进行一个页面缓存就有着非常高收益的效果.缓存是一种横向的数据处理应用,一般在设计中引入AOP,ICO的应用组件都可以在后期切入添加.但AOP,ICO在没有比较丰...
分类：
其他好文 时间：
2014-09-15 22:45:39
阅读次数：
370
