码迷,mamicode.com
首页 > 其他好文
Scrapy系列教程(2)------Item(结构化数据存储结构)
Items 爬取的主要目标就是从非结构性的数据源提取结构性数据,例如网页。 Scrapy提供 Item 类来满足这样的需求。 Item 对象是种简单的容器,保存了爬取到得数据。 其提供了 类似于词典(dictionary-like) 的API以及用于声明可用字段的简单语法。 声明Item Item使用简单的class定义语法以及 Field 对象来声明。例如: ...
分类:其他好文   时间:2014-11-20 12:04:35    阅读次数:383
1《大话操作系统——做坚实的工程实践派》(8.1)(指令集未完待续)
大多数情况,操作系统内核用纯C语言是写不了的,因为有些关键功能,重要代码段,还是得用汇编指令干上一把才行, 本书不会过于详细的介绍ARM920T处理器所有的指令以及每条指令所有的详细使用方式。因为,一、篇幅所限,二、本书不是介绍某一特定处理器的指令集的专著。但是也不用害怕,笔者会尽量做到写操作系统内核时足够使用。...
分类:其他好文   时间:2014-11-20 12:03:13    阅读次数:144
西门子PLC学习笔记九-(CPU时钟存储器)
CPU可以设置多种存储器,从而得到多种脉冲...
分类:其他好文   时间:2014-11-20 12:01:45    阅读次数:355
一次性打开多个应用程序
我大程序员每次开机都需要打开很多软件,设为开机启动又影响开机速度,怎么办呢? 那就写一个脚本吧,只需要点击一次,就可以打开多个应用程序了。 :: open some software @echo off start "title" "C:\Program Files (x86)\Netease\POPO\Start.exe" start "title" "C:\Program Files (x...
分类:其他好文   时间:2014-11-20 12:02:31    阅读次数:132
Scrapy系列教程(6)------如何避免被禁
避免被禁止(ban) 有些网站实现了特定的机制,以一定规则来避免被爬虫爬取。 与这些规则打交道并不容易,需要技巧,有时候也需要些特别的基础。 如果有疑问请考虑联系 商业支持 。 下面是些处理这些站点的建议(tips): 使用user agent池,轮流选择之一来作为user agent。池中包含常见的浏览器的user agent(google一下一大堆)禁止cookies(参考 ...
分类:其他好文   时间:2014-11-20 12:02:41    阅读次数:239
Triangle
题目描述: Given a triangle, find the minimum path sum from top to bottom. Each step you may move to adjacent numbers on the row below. For example, given the following triangle [ [2], ...
分类:其他好文   时间:2014-11-20 12:03:48    阅读次数:157
fzu 2150 Fire Game 【技巧BFS】
题目: fzu 2141 Sub-Bipartite Graph (贪心)...
分类:其他好文   时间:2014-11-20 12:01:17    阅读次数:186
HDU 2825 Wireless Password (AC自动机,DP)
题意: 给出m个模式串,要求构造一长度为n的文本串,至少包括k种模式串,求有多少种可能的模式串。 分析: m个模式串构建AC自动机,然后要在这AC自动机中走n步,至少经过k个单词结点。因为m<=10,显然可以用状压表示已经有哪几个单词结点。用dp[i][j][k]表示走了i步到AC自动机中的第j个结点,单词状态为k,由计数原理可推出状态转移方程:dp[i][j][k]=sum(dp[i-1][last_j][last_k]),last_j表示可以抵达第j个结点的上一个结点,last_k表示上一步的状态;因为...
分类:其他好文   时间:2014-11-20 12:01:10    阅读次数:242
创始人股份分配方法
对于初创者来说,利益的分配十分重要。 任何团队瑕疵,都会是致命的,有一句话,亘古不变——“成事在人”,而人最关心的就是利益。你可以用“兴趣”,“理想”在别人面前打着幌子,但是这始终是你最基本的追求。作为团队的CEO,你也应该记住这个真理,没有人愿意免费帮你干活。一点点的利益分配不均,埋下隐患,终将使公司分崩离析。...
分类:其他好文   时间:2014-11-20 12:01:16    阅读次数:183
HDU 2553 N皇后问题 (回溯法)
题意  中文n*n的棋盘放n个皇后(攻击同行/列/主副对角线)  使任何两个都不互相攻击  有多少种方法 枚举每一行  用vis[3][i]记录列 主对角线 副对角线是否被占  同列和对角线都没被占就继续枚举下一行  当枚举到n+1行的时候就是一个合法答案了  注: n*n的方阵中主对角线可以用(i-j+n)标号  副对角线可以用(i+j)标号 //ans[]={0,1,0,0,2,10,4...
分类:其他好文   时间:2014-11-20 12:00:27    阅读次数:192
easyui导出excel无法弹出下载框的解决办法
之前用ajax做的,代码如下(ActionUrl为一般处理程序ashx的路径): $.ajax({ url: ActionUrl + '?action=export&ID=' + $('#fm_ID').val(), dataType: 'json', success: function (jsonstr) ...
分类:其他好文   时间:2014-11-20 12:00:45    阅读次数:162
input.c中的resume会补发一个释放事件
问题描述和分析: 在手机休眠状态下通过按键唤醒手机的过程中getevent获取到的event事件信息和正常状态下信息不一致,导致某应用程序出现异常。 正常状态下按下power key的log信息和其对应的event事件: [   45.663482] c0 [SPRD_EIC_KEYS_INFO] Pressed!  Key:Power Key ScanCode:116 value:1 0...
分类:其他好文   时间:2014-11-20 12:00:41    阅读次数:245
获取不到方法的注解
注解是不干扰原来的代码的执行的,起到一种标识作用,让第三方的注解工具来提 取注解,来完成所需的任务。package two.zj; import java.lang.annotation.Documented; import java.lang.annotation.ElementType; import java.lang.annotation.Retention; import java....
分类:其他好文   时间:2014-11-20 12:01:52    阅读次数:315
看看样条插值区间查找函数写的多细腻
优秀的程序员光是有深厚理论基础,更要有缜密的思维, 一个简单的函数, 有很多人都写不好,为什么,     不是做不到,不是想不到,  往往是由于懒而不愿意深入思考.  有句话叫, 天下大事, 必做于细.     int Spline::findTimeInterval(Number time, int startIndex)     {          int len...
分类:其他好文   时间:2014-11-20 12:01:03    阅读次数:147
SVN中branch的合并和打patch
最近要在hadoop2.4上面上线hdfs raid,但是之前hdfs raid是作为svn 的branch开发的,领导希望通过patch的方式将hdfs raid功能打进trunk里面去,这里涉及到svn branch和trunk的合并问题,以下是hdfs raid 打patch的具体过程。...
分类:其他好文   时间:2014-11-20 11:58:52    阅读次数:237
nginx各版本变化说明
from: http://nginx.org/en/CHANGES 使用nginx cache,想要配置cache数据自动清理时间,发现一个参数 clean_time ,但发现很早这个参数就从稳定版本中 清除了。目前来看,只能用purge指令控制。 以下是 nginx 各个版本的 changes 说明。 Changes with nginx 1.7.7 ...
分类:其他好文   时间:2014-11-20 11:59:02    阅读次数:281
with as
with as 短语,也叫做子查询部分(subquery factoring)公用表达式(CTE)。使用范围:sql2005及以上版本有效。作用:1、提高可读性-- 表名v_OrdersWITH tableBase AS (SELECT ROW_NUMBER() OVER (ORDER BY Id)...
分类:其他好文   时间:2014-11-20 11:59:02    阅读次数:179
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!