(1)以怎样的方式从分片中读取一条记录,每读取一条记录都会调用RecordReader类;(2)系统默认的RecordReader是LineRecordReader,如TextInputFormat;而SequenceFileInputFormat的RecordReader是SequenceFile...
分类:
其他好文 时间:
2014-11-07 23:27:35
阅读次数:
263
#本次配置时间为2014-11-06软件版本为:mongodb-linux-x86_64-2.4.3.tgzlinux:centos5.964bit##############################################################本次部署分片的方式,只为测试环境:#10.8.10.23410.8.10.23510.8.10.236#shard1分片masterslaverarbiterOnly#shard..
分类:
数据库 时间:
2014-11-07 06:27:49
阅读次数:
321
课程目录:01-mongodb文档型数据库特点介绍02-mongodb安装过程03-mongo库表操作语句04-CURD操作详解05-深入查询表达式06-游标操作07-索引08-用户管理09-mongoDB备份与恢复10-replication复制集11-shard分片12-手动预先分片13-replcation与shard分片结合使用14-PHP-Mongo扩展编..
分类:
数据库 时间:
2014-11-06 15:11:48
阅读次数:
268
本章将介绍在阿里云的 Centos6.5 模板上安装 Docker 以及在 Ubuntu 14.04 模板上安装 Docker 的过程Centos 6.5 模板上使用Docker首先,通过 ssh 登陆阿里云的服务器,查看系统版本号以及内核版本。Welcome to aliyun Elastic Compute Service!
# lsb_release -a
LSB Version: :...
分类:
其他好文 时间:
2014-11-05 23:17:50
阅读次数:
215
python基本数据结构序列 ,六种内建序列类型:列表 元组字符串 Unicode字符串 buff对象和xrange对象 序列通用操作: 索引:元素的编号是从 0开始的 到索引号为负数时 查找方式是从右到左的 索引写在[]中分片:类似索引的操作可以指定范围,当为一个对象创造副本时可以用 b = a[...
分类:
编程语言 时间:
2014-11-05 19:31:20
阅读次数:
193
杂谈之SolrCloud这个坑货 看《Solr In Action》时候看到对Solr不足的介绍有这么一段话:“One final limitation of Solr worth mentioning is its elastic scalability: the ability to aut.....
分类:
其他好文 时间:
2014-11-05 00:16:42
阅读次数:
1439
作者:阿里云用户 云郎弹性伸缩服务ESS之试用初体验作者:云郎 2014/10/15阿里云弹性伸缩服务(Elastic Scaling Service)是根据用户的业务需求和策略,自动调整其弹性计算服务器(ECS)的管理服务。其能够在业务增长时自动增加ECS实例,并在业务下降时自动减少ECS实例。收...
分类:
其他好文 时间:
2014-10-28 17:02:29
阅读次数:
189
大数据日知录:架构与算法
跳转至:
导航、
搜索
目录
1
当谈论大数据时我们在谈论什么2
数据分片与路由3
数据复制与一致性4
大数据常用算法与数据结构5
集群资源管理与调度6
分布式协调系统7
分布式通信8
数据通道9
分布式文件系统10
内存KV11
列式数据库12
大规模批处理13
流式计算14
交互式数据分...
分类:
编程语言 时间:
2014-10-27 21:24:29
阅读次数:
341
(1)key-value到map端比较容易,每个分片都会交由一个MapTask,而每个分片由InputFormat(一般是FileInputFormat)决定(一般是64M), 每个MapTask会调用N次map函数,具体是多少次map函数呢? 由job.setInputForm...
分类:
其他好文 时间:
2014-10-22 23:30:18
阅读次数:
371