来源:http://www.douban.com/note/302711300/http://pypi.douban.com/simple/ 虽然用easy_install和pip来安装第三方库很方便 它们的原理其实就是从Python的官方源pypi.python.org/pypi 下载到本地,然后...
分类:
编程语言 时间:
2015-08-10 17:53:19
阅读次数:
139
分享到一键分享QQ空间新浪微博百度云收藏人人网腾讯微博百度相册开心网腾讯朋友百度贴吧豆瓣网搜狐微博百度新首页QQ好友和讯微博更多...百度分享python实现爬取千万淘宝商品的方法作者:mingaixin 字体:[增加 减小] 类型:转载这篇文章主要介绍了python实现爬取千万淘宝商品的方法,涉及...
分类:
编程语言 时间:
2015-08-10 01:54:24
阅读次数:
460
★记录:Evernote 从2014.02.24开始★记账:挖财 从2015.02.24开始★GTD:OmniFocus 从2015.08.08开始☆书/电影:豆瓣 从2014.02.08开始文件:百度云 工作前的资料:137****3193账号 工作后的资料:139****3254账号...
分类:
其他好文 时间:
2015-08-08 13:30:44
阅读次数:
93
豆瓣Redis解决方案Codis源码剖析:Dashboard1.不只是Dashboard虽然名字叫Dashboard,但它在Codis中的作用却不可小觑。它不仅仅是Dashboard管理页面,更重要的是,它负责监控和指挥各个Proxy的负载均衡(数据分布和迁移)。并且,所有API都以RESTFul接口的形式对外提供,供Proxy和codis-config(Codis的命令行工具)调用。下面就来看一下...
分类:
其他好文 时间:
2015-08-08 12:11:59
阅读次数:
250
Redis实现分析浏览次数:1018次 KITERUNNER_T 2014年10月19日 字号: 大 中 小 分享到: QQ空间 新浪微博 腾讯微博 人人网 豆瓣网 开心网 更多 1 1 环境准备从2.6.4版本为基础了解redis的设计与实现,首先搭建一个原始模型,以便根据这个模型分析其代码的设计...
分类:
其他好文 时间:
2015-08-07 19:28:06
阅读次数:
2660
Python爬虫,下载豆瓣小组图片
# -*- coding: utf-8 -*-
# -----------------------------------------------
# 程序:豆瓣小组图片爬虫
# 版本:1.0
# 语言:Python 3.4
# 作者:gdp12315
# 操作:输入豆瓣小组讨论版块地址、起始页面、终止页面
# 功能:下载小组帖子里发布...
分类:
编程语言 时间:
2015-08-06 22:22:33
阅读次数:
194
持续更新中......原始数据包含了豆瓣上22652个影人信息,不包括许多粉丝数为0和信息不全的影人。总榜(包括中外影人)人气TOP10中国榜人气TOP10
分类:
其他好文 时间:
2015-08-03 18:54:45
阅读次数:
279
众所周知,很多网站都设置了登录之后才能获取查看页面的权利,因此模拟登录成了爬取信息的第一步,这一步成功了,嘿嘿,just do it!
好,废话不多说,直接说重点:
首先,你应该要了解网站登录的流程以及你需要post的信息,以豆瓣为例:
这就是你需要提交的信息了,包括用户名和密码,以及验证码和验证码的ID,看到这可能有人会想我怎么知道验证码的ID,各位放心,在页面加载时就已经到客户端这边来了,也就是说你可以直接从浏览器中看到,是不是很炫酷!
第二步,需要了解一些requests这个库了,因为reque...
分类:
编程语言 时间:
2015-08-03 14:42:55
阅读次数:
183
以下对书籍的评价只代表个人观点,仅供参考。(不断更新) 首先借某神的一句话:书和资料只是学习的工具,不能为了读书而读书,只要能学到东西可以"不择手段",实践才是检验真理的唯一标准。 已经看过的书(值得一提的书):《数据结构(C语言版)》 严蔚敏 豆瓣书评7.1这本书是学校数据结构的教材,典型的教科....
分类:
其他好文 时间:
2015-08-01 21:53:26
阅读次数:
106
转载于豆瓣,观山居士(http://www.douban.com/note/320140839/)。你应该掌握的Java技术当我们在技术线路中选择了Java,也就选择了你必须持续学习,经常关注最新的技术,了解它们,看是否适合你的需要,然后学习使用它们。Java基础:◆Java原理和使用,包括基本的语...
分类:
编程语言 时间:
2015-07-30 12:45:51
阅读次数:
150