Pig Pig是一种编程语言，它简化了Hadoop常见的工作任务。Pig可加载数据、表达转换数据以及存储最终结果。Pig内置的操作使得半结构化数据变得有意义（如日志文件）。同时Pig可扩展使用Java中添加的自定义数据类型并支持数据转换。 Hive Hive在Hadoop中扮演数据仓库的角色。Hiv ...
分类：
其他好文 时间：
2017-08-20 00:47:57
阅读次数：
215
MapReduce&HDFS简介一、Hadoop简介: 结构化数据：表,关系型数据库//有严格的约束 半结构化数据：html,json,yaml,有元数据//有约束，缺少严格的约束 非结构化数据：没有预定义的模型,元数据//日志数据等 搜索引擎：搜索组件、索引组件 网络爬虫：爬到的内容多为半结构化或..
分类：
其他好文 时间：
2017-07-03 15:07:36
阅读次数：
173
在实际应用中，我们会遇到各式各样的数据库如nosql非关系数据库（memcached，redis。mangodb）。RDBMS关系数据库（oracle，mysql等），另一些其他的数据库如hbase，在这些数据库中。又会出现结构化数据。非结构化数据。半结构化数据，以下列出各种数据类型： 结构化数据： ...
分类：
其他好文 时间：
2017-05-27 19:18:24
阅读次数：
186
在实际应用中，我们会遇到各式各样的数据库如nosql非关系数据库（memcached，redis，mangodb），RDBMS关系数据库（oracle，mysql等），还有一些其它的数据库如hbase，在这些数据库中，又会出现结构化数据，非结构化数据，半结构化数据，下面列出各种数据类型： 结构化数据 ...
分类：
其他好文 时间：
2017-04-27 12:37:19
阅读次数：
123
概念 概念 概念 结构化数据：即行数据，存储在数据库里，可以用二维表结构来逻辑表达实现的数据。 半结构化数据：介于完全结构化数据（如关系型数据库、面向对象数据库中的数据）和完全无结构的数据（如声音、图像文件等）之间的数据，HTML文档就属于半结构化数据。它一般是自描述的，数据的结构和内容混在一起，没 ...
分类：
其他好文 时间：
2017-03-14 10:32:13
阅读次数：
134
MySQL基础（二）==============================================================================概述：==============================================================================MySQL1.数据结构：★分类：结构化数据：关系型数据库半结构化数据：YAML、XML、JSON非..
分类：
数据库 时间：
2016-11-24 21:55:50
阅读次数：
264
大数据分析工具使用户能够分析各种各样的信息——包括结构化事务数据和社交媒体帖子、Web服务器日志文件及其他形式的非结构化和半结构化数据。一旦组织决定要购买一个大数据分析工具，下一步就是制定一个流程，评估可用的产品，然后从中找到一个最适合你需求和要求的产品。 下面我们将介绍在评估各种大数据分析工具符合 ...
分类：
其他好文 时间：
2016-11-01 16:47:05
阅读次数：
163
DBMS层次模型网状模型关系模型RDBMS文件：数据冗余不一致性数据访问困难数据孤立完整性问题原子性问题并发访问异常安全性问题文件：表示层逻辑层文件系统：存储引擎物理层元数据数据：数据块E-R：实体关系模型关系模型----实体，关系模型---对象关系模型---半结构化数据模型关..
分类：
数据库 时间：
2016-09-06 01:22:46
阅读次数：
167
Lucene 简述
Lucene是一个开放源代码的全文检索引擎工具包，但它不是一个完整的全文检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引擎。数据可以三种：
结构化数据（具有固定格式或有限长度的数据）
非结构化数据
半结构化数据
对于结构化数据一般使用SQL语句查询，而非结构化数据有顺序扫描和全文检索。Lucene 文件结构
层次结构：索引 -> 段 ->...
分类：
Web程序 时间：
2016-08-17 12:25:00
阅读次数：
234
概述 相对于结构化数据（即行数据，存储在数据库里，可以用二维表结构来逻辑表达实现的数据）而言，不方便用数据库二维逻辑表来表现的数据即称为非结构化数据，包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音频/视频信息等等。 非结构化数据库是指其字段长度可变，并且每个字段的记录又可以 ...
分类：
其他好文 时间：
2016-07-24 16:26:17
阅读次数：
197
