大数据日知录:架构与算法
跳转至:
导航、
搜索
目录
1
当谈论大数据时我们在谈论什么2
数据分片与路由3
数据复制与一致性4
大数据常用算法与数据结构5
集群资源管理与调度6
分布式协调系统7
分布式通信8
数据通道9
分布式文件系统10
内存KV11
列式数据库12
大规模批处理13
流式计算14
交互式数据分...
分类:
编程语言 时间:
2014-10-27 21:24:29
阅读次数:
341
一、环境说明zabbix2.2inCentos6.464bit二、MPM(MySQLPerformanceMonitor)安装1.依赖模块yuminstallperl-File-Whichperl-libwww-perlperl-Digest-SHA1perl-DBD-MySQLperl-Time-HiResperl-Crypt-SSLeay2.MPM安装部署wget-chttp://www.shinguz.ch/download/mysql_performance_mon..
分类:
数据库 时间:
2014-10-27 19:49:50
阅读次数:
453
在RAC的安装部署过程中,并不仅仅是简单的安装完成了事,整个安装过程要考虑可能出现的单点问题,其中比较重要的是私有网络。
私有网络是RAC节点间通信的通道,包括节点间的网络心跳信息、Cache fusion传递数据块都需要通过私有网络。而很多的私有网络都仅仅是一块单独的网卡连接上交换机就完成了,更有甚者,直接使用服务器间网卡互连的方式配置私有网络。这种部署方式简单,但RAC投入使用后风险非常大,...
分类:
其他好文 时间:
2014-10-25 14:30:06
阅读次数:
346
Zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。Zabbix能监视各种网络参数,保证服务器系统的安全运营;并提供灵活的通知机制以让系统管理员快速定位、解决存在的各种问题。Zabbix监控平台部署安装zabbix之前需要LAMP架构,为了快速上手..
分类:
其他好文 时间:
2014-10-24 19:10:27
阅读次数:
285
文件系统中metadata是一个关键元素,每一个分布式文件系统的核心所在就是mds的设计。类似HDFS,Clustre,FastDFS等等分布式文件系统采用的是独立的mds架构,Ceph采用的是讲mds也分布开的设计架构,Gluster的设计是将metadata跟数据文件结合方式来存储,基本上只存跟本地文件有..
分类:
其他好文 时间:
2014-10-24 16:48:38
阅读次数:
1220
第二部分 ArcGIS Server的安装、部署 注意:需关闭电脑防火墙,否则arcgis manager可能登陆不上去! 1、ArcGIS Server的安装 (1)双击打开安装程序,选择ArcGIS for Server,安装 接受许可,进入下一步; 选择安装目录,进入下一步。 给arcgism...
分类:
其他好文 时间:
2014-10-24 12:37:21
阅读次数:
348
一、centos5.4_x64 默认安装后会集成jdk1.6java -version如果显示当前安装的版本号为1.6,则不需要再安装。二、安装Red51.创建临时目录:cd /usr/localmkdir temp2.下载red5包wgethttp://www.red5.org/downloads...
分类:
其他好文 时间:
2014-10-23 14:05:36
阅读次数:
208
sqoop是hadoop项目中一个插件,可以把分布式文件系统hdfs中内容导入到mysql指定表里面,也可以把mysql中内容导入到hdfs文件系统中进行后续操作。测试环境说明:hadoop版本:hadoop-0.20.2sqoop版本:sqoop-1.2.0-CDH3B4java版本:jdk1.7.0_67mysql版本:5.1.65特别说明:因为我..
分类:
其他好文 时间:
2014-10-22 18:31:34
阅读次数:
345
先上拓扑图吧0、使用虚拟机做实验的规划
1、ip地址的规划,模板练习机器1对应10.0.0.11,依次类推
2、所有的服务器配置好epel源
3、所有的服务器都要做内核优化(基本)
4、每个实验都要有详细的文档
5、模拟实验故障,并做记录
6、所用系统均为centos6.5for64bit内核版本号为2.6..
分类:
其他好文 时间:
2014-10-22 10:12:46
阅读次数:
471
一、介绍通过安装部署PuppetC/S模型,实现Puppet
Server端管理所有被控制机的整个生命周期:从初始化到软件升级、从配置文件创建到测试部署、从系统维护到服务器迁移等。Puppet能够持续化的与
被控制机进行交互,从而实现配置文件的及时检测更新。结合SVN版本控制系统,puppet..
分类:
其他好文 时间:
2014-10-21 02:28:47
阅读次数:
182