码迷,mamicode.com
首页 >  
搜索关键字:hdfs architecture    ( 6541个结果
iOS 二维码扫描 zBarsdk 不支持64位 missing required architecture x86_64 in file
闲话少讲,实际上ios7以上是支持原生api扫描二维码的,所以我觉得这就是为什么zbarsdk没有继续更新的原因。 百度一下,说修改架构什么的还是有的,但貌似没说到点子上,还是老外的解决方法牛逼。 第一:问题的提出,给了很多解决方法: http://stackoverflow.com/questions/12506671/zbar-sdk-is-not-working-in-ios6/127...
分类:移动开发   时间:2014-09-04 19:10:10    阅读次数:203
Vhost Architecture
在前面的文章中在介绍virtio机制中,可以看到在通常的应用中一般使用QEMU用户态程序来模拟I/O访问,而Guest中的数据要通过Guest到Host Userspace的第一次拷贝,再经过Host userspace的第二次拷贝,这种多次的数据拷贝和CPU特权级的切换对性能有相当大的影响。为加速virtio设备的I/O性能,VHOST通过driver的形式在Host Kernel中直接实现...
分类:其他好文   时间:2014-09-04 11:47:39    阅读次数:280
hadoop2的产生背景
Hadoop1的HDFS和Mapreduce在高可用和拓展性方面存在问题。 HDFS存在的问题: Namenode单点故障,难以应用于在线场景。 Namenode压力过大,且内存受限,影响系统扩展性。 Mapreduce存在问题: Jobtracker单点故障 ...
分类:其他好文   时间:2014-09-04 10:40:49    阅读次数:254
hadoop学习笔记之--- HDFS原理学习
HDFSHDFS设计基础与目标:冗余:硬件错误是常态流式数据访问。即数据比量读取而非随机读写,Hadoop擅长做的是数据分析而不是事务处理。大规模数据集简单一致性模型。为了降低系统复杂程度,对文件采用一次性写多多次读的逻辑设置,即是文件一经写入,关闭,再也不能修改。程序采..
分类:其他好文   时间:2014-09-04 02:58:58    阅读次数:277
游戏运维
最主要的是:配置 调度 作业信息孤岛DevOps: Development和Operations的组合SOA: 面向服务的体系结构(service-oriented architecture,SOA)是一个组件模型,它将应用程序的不同功能单元(称为服务)通过这些服务之间定义良好的接口和契约联系起来。...
分类:其他好文   时间:2014-09-03 16:24:26    阅读次数:217
CDH文件系统垃圾间隔设置
今天在删除一个hive表的时候,发现hdfs的空间没有释放,刚开始一直觉得是自己删除有问题,结果在hdfs上也没有查到,最后发现是CDH的namenode有一个文件系统垃圾间隔设置,默认设置一天,也就是说删除的文件需要一天才能被删掉。配置如图,希望能帮助要有同样疑惑的人。还有这个..
分类:其他好文   时间:2014-09-03 02:48:26    阅读次数:249
MapReduce(十五): 从HDFS读取文件的源码分析
从HDFS读取文件的源码分析...
分类:其他好文   时间:2014-09-02 21:29:55    阅读次数:281
MapReduce(十六): 写数据到HDFS的源码分析
对写数据到HDFS的源码分析...
分类:其他好文   时间:2014-09-02 21:29:25    阅读次数:293
HBase Shell操作
Hbase 是一个分布式的、面向列的开源数据库,其实现是建立在google 的bigTable 理论之上,并基于hadoop HDFS文件系统。 Hbase不同于一般的关系型数据库(RDBMS)。是一种适用于非结构化数据存储的数据库,且Hbase是基于列的数据库。 下面的内容基于我们已经安装好h.....
分类:其他好文   时间:2014-09-02 19:37:55    阅读次数:217
Hadoop介绍及最新稳定版Hadoop 2.4.1下载地址及单节点安装
Hadoop介绍 Hadoop是一个能对大量数据进行分布式处理的软件框架。其基本的组成包括hdfs分布式文件系统和可以运行在hdfs文件系统上的MapReduce编程模型,以及基于hdfs和MapReduce而开发的一系列上层应用软件。 hdfs是在一个网络中以流式数据访问模式来存储超大文件的跨.....
分类:其他好文   时间:2014-09-02 15:22:34    阅读次数:365
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!