码迷,mamicode.com
首页 >  
搜索关键字:hdfs architecture    ( 6541个结果
开源应用架构之?Selenium WebDriver(上)
前不久,InfoQ向大家推荐了几本有关 软件架构的新书,引起了国内读者的广泛兴趣。其中一本是《 开源应用架构(The Architecture of Open ?Source ?Applications)》, 来自知名开源项目的各位作者对软件的设计进...
分类:Web程序   时间:2014-11-29 00:20:51    阅读次数:246
Xcode添加静态库以及编译选项配置常见问题
一,Xcode编译出现Link错误,出现"duplicate symbols for architecture i386 clang"提示. 问题:链接时,项目有重名文件. 解决: 根据错误提示,做如下检查: 1.Taraget->Build Settings->Link Binary With Libraries检查...
分类:其他好文   时间:2014-11-28 10:32:38    阅读次数:193
hbase shell基础和常用命令详解
HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。1. 简介HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtab...
分类:系统相关   时间:2014-11-27 22:00:10    阅读次数:291
分布式内存文件系统Tachyon
UCBerkeley研发的Tachyon(超光子['tæki???n],名字要不要这么太嚣张啊:)是一款为各种集群并发计算框架提供内存数据管理的平台,也可以说是一种内存式的文件系统吧。如下图,它就处于这样一个层次:在现有存储系统如HDFS之上,在Spark,MapReduce,Impala等各种计算框架之下。为什么要有这么一个框架呢?MapReduce就不说了,但像Spark这种内存计算框架,为什...
分类:其他好文   时间:2014-11-27 20:29:10    阅读次数:287
史上最牛hadoop2.2伪分布式hdfs数据迁移
hadoop2.2伪分布式hdfs数据迁移...
分类:其他好文   时间:2014-11-27 18:26:42    阅读次数:179
深入理解openstack网络架构(1)
原文地址: https://blogs.oracle.com/ronen/entry/diving_into_openstack_network_architecture前言openstack网络功能强大同时也相对更复杂。本系列文章通过Oracle OpenStack TechPreview介绍openstack的配置,通过各种场景和例子说明openstack各种不同的网络组件。本文的目的在于提供...
分类:其他好文   时间:2014-11-26 22:38:54    阅读次数:286
论文学习 - 《Hadoop平台下的海量数据存储技术研究》
摘要 研究背景: 1. 互联网的图片数据急剧膨胀 2. Hadoop平台下的Hdfs分布式文件系统能够很好的处理海量数据 研究内容: 1. Hadoop平台工作原理 2. Hadoop平台下图片存储系统的设计与实现 3. Hadoop平台与Web的整合 创新点: ...
分类:其他好文   时间:2014-11-26 20:41:31    阅读次数:286
HDFS读写数据块--${dfs.data.dir}选择策略
最近工作需要,看了HDFS读写数据块这部分。不过可能跟网上大部分帖子不一样,主要写了${dfs.data.dir}的选择策略,也就是block的放置策略。我主要是从我们工作需要的角度来读这部分代码的。 创建文件总共有两步: 1、在写block之前,需要与NameNode通信来生成文件(INo...
分类:其他好文   时间:2014-11-26 20:33:43    阅读次数:367
hive的数据导入与数据导出(本地,云hdfs),load加载
1数据导入-------------- CREATE EXTERNAL TABLE wizad_mdm_dev_lmj_edition_20141120 ( cookie_id STRING, guid STRING  ) ROW FORMAT DELIMITED  FIELDS TERMINATED BY ','  LINES TERMINATED BY '\n' stored a...
分类:其他好文   时间:2014-11-26 18:54:52    阅读次数:272
数据库
http://www.cnblogs.com/gaochundong/p/everyone_is_a_dba_sqlserver_architecture.html
分类:数据库   时间:2014-11-26 17:58:20    阅读次数:136
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!