前不久,InfoQ向大家推荐了几本有关 软件架构的新书,引起了国内读者的广泛兴趣。其中一本是《 开源应用架构(The Architecture of Open ?Source ?Applications)》, 来自知名开源项目的各位作者对软件的设计进...
分类:
Web程序 时间:
2014-11-29 00:20:51
阅读次数:
246
一,Xcode编译出现Link错误,出现"duplicate symbols for architecture i386 clang"提示. 问题:链接时,项目有重名文件. 解决: 根据错误提示,做如下检查: 1.Taraget->Build Settings->Link Binary With Libraries检查...
分类:
其他好文 时间:
2014-11-28 10:32:38
阅读次数:
193
HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。1. 简介HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtab...
分类:
系统相关 时间:
2014-11-27 22:00:10
阅读次数:
291
UCBerkeley研发的Tachyon(超光子['tæki???n],名字要不要这么太嚣张啊:)是一款为各种集群并发计算框架提供内存数据管理的平台,也可以说是一种内存式的文件系统吧。如下图,它就处于这样一个层次:在现有存储系统如HDFS之上,在Spark,MapReduce,Impala等各种计算框架之下。为什么要有这么一个框架呢?MapReduce就不说了,但像Spark这种内存计算框架,为什...
分类:
其他好文 时间:
2014-11-27 20:29:10
阅读次数:
287
原文地址: https://blogs.oracle.com/ronen/entry/diving_into_openstack_network_architecture前言openstack网络功能强大同时也相对更复杂。本系列文章通过Oracle OpenStack TechPreview介绍openstack的配置,通过各种场景和例子说明openstack各种不同的网络组件。本文的目的在于提供...
分类:
其他好文 时间:
2014-11-26 22:38:54
阅读次数:
286
摘要 研究背景: 1. 互联网的图片数据急剧膨胀 2. Hadoop平台下的Hdfs分布式文件系统能够很好的处理海量数据 研究内容: 1. Hadoop平台工作原理 2. Hadoop平台下图片存储系统的设计与实现 3. Hadoop平台与Web的整合 创新点: ...
分类:
其他好文 时间:
2014-11-26 20:41:31
阅读次数:
286
最近工作需要,看了HDFS读写数据块这部分。不过可能跟网上大部分帖子不一样,主要写了${dfs.data.dir}的选择策略,也就是block的放置策略。我主要是从我们工作需要的角度来读这部分代码的。 创建文件总共有两步: 1、在写block之前,需要与NameNode通信来生成文件(INo...
分类:
其他好文 时间:
2014-11-26 20:33:43
阅读次数:
367
1数据导入--------------
CREATE EXTERNAL TABLE wizad_mdm_dev_lmj_edition_20141120 (
cookie_id STRING,
guid STRING
) ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
stored a...
分类:
其他好文 时间:
2014-11-26 18:54:52
阅读次数:
272
http://www.cnblogs.com/gaochundong/p/everyone_is_a_dba_sqlserver_architecture.html
分类:
数据库 时间:
2014-11-26 17:58:20
阅读次数:
136