今天来讲如何利用Python爬虫下载文章，拿韩寒的博客为例来一步一步进行详细探讨。。。
韩寒的博客地址是：http://blog.sina.com.cn/s/articlelist_1191258123_0_1.html
可以看出左边是文章列表，而且不止一页，我们先从最简单的开始，先对一篇文章进行下载，再研究对一页所有的文
章进行下载，最后再研究对所有的文章下载。...
分类：
编程语言 时间：
2014-07-22 22:59:35
阅读次数：
330
我买的书或借的 没看的计算机方面： 深入浅出MFC vc++深入详解 算法入门 算法入门训练指南
大话数据结构 C++ 第6版本图像处理与机器视觉： 机器视觉 张广军 数字图像处理疑难解析 图像处理与计算机视觉算法应用 opencv2 图像配准技术模式识别：
机器学习实战 模式分类 神经网络设计 斯...
分类：
其他好文 时间：
2014-05-02 20:00:42
阅读次数：
323
CentOS修改IP地址# ifconfig eth0
192.168.1.80这样就把IP地址修改为192.168.1.80(如果发现上不了网了，那么你可能需要把网关和DNS也改一下，后面会提到)，但是当你重新启动系统或网卡之后，还是会变回原来的地址，这种修改方式只适用于需要临时做IP修改。要想永...
分类：
其他好文 时间：
2014-05-02 18:51:19
阅读次数：
411
上一篇中，使用客户端jJSAjaxFileUploader插件实现单文件异步上传，本篇实现多文件异步上传。本篇源码在github,先看效果：●
上传文件显示进度条。 ● 停止上传按钮和关闭缩略图按钮。 ● 限制上传文件的类型。 ● 限制上传文件的尺寸。 ●同时上传多个文...
分类：
Web程序 时间：
2014-05-02 13:11:17
阅读次数：
611
有时，花上几个小时阅读、调试、跟踪优秀的源码程序，能够更快地掌握某些技术关键点和精髓。当然，前提是对这些技术大致上有一个了解。 我通过几个采用 CSocket
类编写并基于 Client/Server （客户端 / 服务端）的网络聊天和传输文件的程序 ( 详见： 源代码参考 ) ，在调试这些程序的....
分类：
其他好文 时间：
2014-05-02 13:04:50
阅读次数：
392
前段时间做了几个关于图片、文件上传的Demo，使用客户端Query-File-Upload插件和服务端Badkload组件实现多文件异步上传，比如"MVC文件上传04-使用客户端jQuery-File-Upload插件和服务端Backload组件实现多文件异步上传",就Demo而言，效果还算不错，但...
分类：
Web程序 时间：
2014-05-02 12:49:41
阅读次数：
565
要判断客户端是否使用代理服务器，可以从客户端所发送的环境变量信息来判断。具体来说，就是看HTTP_VIA字段，如果这个字段设置了，说明客户端使用了代理服务器。匿名级别可以参考下表来判断。给出一个应用例子，可以挂上代理试试效果:
http://ip.mixsec.org/一、没有使用代理服务器的情况：...
分类：
Web程序 时间：
2014-05-02 00:21:59
阅读次数：
321
DNS 解析是高性能网络爬虫的瓶颈，主要是因为：1.
由于域名服务的分布式的特性，DNS解析可能需要多次的请求转发，有时需要几秒甚至更长的时间来解析出相应的IP 地址。2.
现有的标准库对DNS解析的实现是同步的。JAVA中InetAddress.getByName是线程阻塞的。并且JAVA中实现的...
分类：
其他好文 时间：
2014-05-02 00:20:56
阅读次数：
349
在windows 8.1下安装VS2005或VS2008时出提示在线安装.NET framework 3.5 ，但是大家都知道在线安装时坑爹的，无论网络多好，都显示Internet不能连接
解决方法是：将windows 8.1的安装镜像载入虚拟光驱或者将windows8.1插入光驱，用管理员身份打开cmd窗口，写进下列字符串：Dism /online /enable-feature /featu...
生命在于折腾，前段时间把服务器代码收拾的差不多了，现在又来开始捣鼓我们可爱的Android了。当第一眼看到这长长的USB连接线我就烦躁，无线网络都那么普遍了，为什么我调试个程序还得连着USB线呢？现在连无线鼠标都甩开了，就剩个无线电源了。现在搞跟长长的USB线连着电脑，用着非常不爽。本着一颗不爽的心就尝试查找了下如何利用wifi调试我们的代码。结果还真找到了。步骤如下：1、在android手机里安...
分类：
移动开发 时间：
2014-05-01 08:31:54
阅读次数：
362
