码迷,mamicode.com
首页 >  
搜索关键字:爬虫 数据处理    ( 15133个结果
数据挖掘:概念与技术(原书第3版) 电子书 PDF 下载 制作 定制 服务
Hadoop大数据处理
分类:其他好文   时间:2014-05-09 15:42:46    阅读次数:315
【课程分享】基于Lucene4.6+Solr4.6+Heritrix1.14+S2SH实战开发从无到有垂直搜索引擎
对这个课程有兴趣的朋友,可以加我的QQ2059055336和我联系,可以和您分享。  课程介绍:最有前途的软件开发技术——搜索引擎技术  搜索引擎作为互联网发展中至关重要的一种应用,已经成为互联网各个领域的制高点,其重要性不言而喻。搜索引擎领域也是互联网应用中不多见的以核心技术作为其命脉的领域,搜索引擎各个子系统是如何设计的?这成为广大技术人员和搜索引擎优化人员密切关注的内容。  随着互...
分类:其他好文   时间:2014-05-09 15:24:17    阅读次数:322
Oracle PL/SQL 语言(Procedural Language/SQL)
Oracle PL/SQL 语言(Procedural Language/SQL)是结合了结构化查询与 Oracle 自身过程控制为一体的强大语言,PL/SQL 不但支持更多的数据类型,拥有自身的变量声明、赋值语句,而且还有条件、循环等流程控制语句。过程控制结构与 SQL 数据处理能力无缝的结合形成...
分类:数据库   时间:2014-05-09 07:50:36    阅读次数:446
python爬duitang的摄影类图片
这几天闲着没事,写了个python爬虫,专把堆糖上的摄影类图片扒下来...
分类:编程语言   时间:2014-05-09 01:05:09    阅读次数:295
python列表里__setslices__方法函数解析a
先看看列表里的__setslice__方法函数的帮助文档 help(list.__setslice__)      帮助文档如下所示: __setslice__(...) x.__setslice__(i, j, y) x[i:j]=y Use of negative indices is not supported.      从帮助文档可以看出这个方法函数可...
分类:编程语言   时间:2014-05-09 01:01:56    阅读次数:326
htmlunit教程
最近写爬虫的时候,利用httpclient抓取一些网页出现一些问题,就是抓取回来的内容都含有大量的加密文本(通过javascript脚本),无法获得真实的内容(也就是用浏览器打开网页呈现的内容)。所以,一般需要配合js引擎来解决这个问题,搜索了下,发现htmlunit这个工具就可以帮忙。了解和使.....
分类:Web程序   时间:2014-05-08 22:54:09    阅读次数:1123
SQL行转列
之前在处理数据时,没有考虑过使用行转列,更多的是使用创建临时表,用过之后销毁,今天碰到了棘手的问题,采用临时表很复杂,所以采用行转列来实现。先描述一下问题,当下做的人事考核系统中,分为上半年、下半年的考核,考核类型有多种,查询出来的数据如下:可以看出来,这样数据处理的效果并不好,而从MSSQL200...
分类:数据库   时间:2014-05-08 18:26:31    阅读次数:343
or1200处理器的数据流图
以下内容摘自《步步惊芯——软核处理器内部设计分析》一书       完整的OR1200处理器流水线数据通路图,如图9.12所示,图中显示了数据处理类、特殊寄存器访问类、转移类、异常处理类、乘法除法类、加载存储类指令处理过程中流水线各个阶段的数据流转。       (1)取指阶段:GENPC模块计算指令地址,然后通过指令Wishbone总线从指令存储器中取得指令,...
分类:其他好文   时间:2014-05-08 17:23:32    阅读次数:323
JAVA IO流详解
一、流的概念和作用。 流是一种有顺序的,有起点和终点的字节集合,是对数据传输的总成或抽象。即数据在两设备之间的传输称之为流,流的本质是数据传输,根据数据传输的特性讲流抽象为各种类,方便更直观的进行数据操作。 二、IO流的分类。 根据数据处理类的不同分为:字符流和字节流。 根据数据流向不同分为:输入流和输出流。 三、字符流和字节流。 字符流的由来:因为数据编码的不同,而有了对字符进行高效...
分类:编程语言   时间:2014-05-08 17:19:38    阅读次数:510
《R语言实战》学习笔记fifth
总算到了第5章—高级数据管理了啊作为这本书第一部分—入门的收官之章,本章还是挺重要的呢这章可以分为三个部分,第一部分:快速浏览R 中的多种数学、统计和字符处理函数,第二部分:如何编写函数来完成数据处理和分析任务,第三部分:了解数据的整合和概数方法,以及数据集的重塑和重构方法> 学生姓名 数学 科.....
分类:其他好文   时间:2014-05-08 07:45:26    阅读次数:533
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!