Distributed File System 数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，因此迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统 。 是一种允许文件通过网络在多台主机上分享的文件系统，可让多机器上的多
分类：
其他好文 时间：
2016-03-15 06:10:44
阅读次数：
195
一、Hadoop是什么？ Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop框架最核心的设计包含两个方面，一是分布式文件系统（Hadoop Distributed File System），简称HDFS；二是分布式计算框架MapReduce。简单来说，HDFS为海量的数据
分类：
其他好文 时间：
2016-03-11 13:46:40
阅读次数：
186
1.RDD（Resilient Distributed DataSet）是Spark生态系统中最基本的抽象，代表不可变的、可并行操作的分区元素集合。RDD这个类有RDD系列所有基本的操作，比如map、filter、persist.另外，org.apache.spark.rdd.PairRDDFunc
分类：
其他好文 时间：
2016-03-10 00:07:31
阅读次数：
233
1. 开通分布式查询权限 exec sp_configure 'show advanced options',1 reconfigure exec sp_configure 'Ad Hoc Distributed Queries',1 reconfigure 2. 查询 select * from
分类：
数据库 时间：
2016-03-07 10:29:22
阅读次数：
204
1、HDFS简介 HDFS（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错、高可靠性、高可扩展性、高获得性、高吞吐率等特征
分类：
其他好文 时间：
2016-03-03 11:25:47
阅读次数：
197
启用Ad Hoc Distributed Queries： exec sp_configure 'show advanced options',1 reconfigure exec sp_configure 'Ad Hoc Distributed Queries',1 reconfigure 关闭A
分类：
其他好文 时间：
2016-03-02 00:07:02
阅读次数：
158
转载自 http://www.cnblogs.com/xia520pi/archive/2012/05/28/2520813.html , 感谢虾皮工作室这一系列精彩的文章. Hadoop集群（第8期）_HDFS初探之旅 1、HDFS简介 HDFS（Hadoop Distributed File S
分类：
其他好文 时间：
2016-03-01 23:57:19
阅读次数：
466
2015.07.12笔记 1.HDFS Distributed File System（操作系统实现人机交互，最重要的功能是文件管理，使用文件管理系统，windows、Linux文件管理系统有共性：用户可创建文件/夹，删除，修改权限，修改源数据信息（创建、修改、访问时间等）。在操作系统中的文件或者数...
分类：
其他好文 时间：
2016-02-29 23:03:52
阅读次数：
279
cache fusion . grd . drm . gcs . ges cache fusion 1.RAC是一个数据库执行在多个实例上。通过DLM(Distributed Lock Management):分布式锁管理器 来解决并发问题。RAC各个节点间的共享资源，为了保证每一个节点訪问数据的一
分类：
系统相关 时间：
2016-02-28 19:45:11
阅读次数：
310
Spark依赖于一个很特别的数据抽象，叫做弹性分布式数据集（resilient distributed datasets），也就是RDD，它是一个被集群分区（partitioned）的in-memory read-only对象。每一个RDD都是根据range（partitioning of cons
分类：
其他好文 时间：
2016-02-26 16:57:57
阅读次数：
186
