码迷,mamicode.com
首页 >  
搜索关键字:kettle hbase    ( 4514个结果
kettle的jdk1.7环境变量配置
1).到官网下载需要安装的kettle版本,目前最新版本4.2,官网地址:http://kettle.pentaho.org,我们是使用的版本是kettle3.22).本地安装jdk 1.4或以上版本。3).配置java环境变量a).打开我的电脑--属性--高级--环境变量b).新建系统变量JAVA...
分类:其他好文   时间:2015-03-30 18:05:48    阅读次数:2527
HBase1.0.0的RPC机制分析与源码解读(一)
HBase的RPC机制,除了使用protocal buf的工具之外都是利用java的原生API进行构造,RPC机制的解读包括客户端和服务器端两个部分,本文主要就服务器端的服务运行机制以及工作流程进行简要分析. 首先我们来分析一下一个典型的RPC服务器短的处理流程,如下图所示: 从图中可以清楚的看到当客户端向服务器端发送一个请求的时候,最开始是被RPCServer中的Listener所监...
分类:其他好文   时间:2015-03-30 16:34:58    阅读次数:114
kettle的基本使用1
1、Kettle 的几个子程序的功能和启动方式—-windows环境 Spoon.bat: 图形界面方式启动作业和转换设计器。(最常用) Pan.bat: 命令行方式执行转换。 Kitchen.bat: 命令行方式执行作业。 Carte.bat: 启动web服务,用于 Kettle 的远程运行或 集群运行。 Encr.bat: 密码加密—-Linux环境 Spoon.sh: 图形界面方...
分类:其他好文   时间:2015-03-29 09:28:28    阅读次数:139
HBase 实战(2)--时间序列检索和面检索的应用场景实战
前言: 作为Hadoop生态系统中重要的一员, HBase作为分布式列式存储, 在线实时处理的特性, 备受瞩目, 将来能在很多应用场景, 取代传统关系型数据库的江湖地位. 本篇主要讲述面向时间序列/面检索的应用场景时, 如何利用HBase的特性去处理和优化.构造应用场景 某气象局对各个站点的信息.....
分类:其他好文   时间:2015-03-28 21:38:26    阅读次数:191
Hadoop、Hbase完全分布式搭建
一、Hadoop1.0到2.0的架构变化1、Hadoop2.0由HDFS、MapReduce和YARN三个分支构成2、HDFSNNFederation、HA3、MapReduce运行在YARN上的MR4、YARN资源管理系统二、HDFS2.01、解决HDFS1.0中单点故障和内存受限问题。2、解决单点故障HDFSHA通过主备NameNode解决如果主NameNode发生故..
分类:其他好文   时间:2015-03-21 21:29:17    阅读次数:356
在linux+eclipse+maven环境下调试Hbase服务源码,启动Hmaster
由于论文工作,想在regionserver的ipcserver和hregionserver等类进行修改源码的工作。所以我需要在我的虚拟机中,我的虚拟机环境是32位centos中安装eclipse,调试Hbase的源码。搭建环境主要步骤基本按照http://www.cnblogs.com/shitou...
分类:系统相关   时间:2015-03-21 21:09:33    阅读次数:230
HBase1.0.0版源码分析之HMaster启动代码分析(1)
本文其实还算不上真正的启动代码解析,本文主要还是从启动流程上分析到startHMaster部分,初次之外本文将就HBase的伪分布式调试方式进行相关的介绍. 我们将源码倒入到Intellij IDE之后会得到如下的代码结构: 这里我们进入hbase-server中在src/main下面的resources中添加hadoop-metrics2-hbase.properties,hbase...
分类:其他好文   时间:2015-03-21 11:15:01    阅读次数:237
Hadoop安全性
HBase运行在Hadoop0.20.x上,就可以使用其中的安全特性--只要你用这两个版本0.20S和CDH3B3,然后把hadoop.jar替换掉就可以了.1.3.1.3.ssh必须安装ssh,sshd也必须运行,这样Hadoop的脚本才可以远程操控其他的Hadoop和Hbase进程。ssh之间必须都打通,不用密码都可以登录,详细方..
分类:其他好文   时间:2015-03-20 18:56:47    阅读次数:121
Apache Phoenix JDBC 驱动和Spring JDBCTemplate的集成
介绍:Phoenix查询引擎会将SQL查询转换为一个或多个HBase scan,并编排执行以生成标准的JDBC结果集。直接使用HBase API、协同处理器与自定义过滤器,对于简单查询来说,其性能量级是毫秒,对于百万级别的行数来说,其性能量级是秒。更多参考官网:http://phoenix.apache.org/ Phoenix实现了JDBC的驱动,使用Phoenix JDBC和普通的数据库...
分类:数据库   时间:2015-03-20 18:42:56    阅读次数:423
HBase Java API类介绍
几个相关类与HBase数据模型之间的对应关系 java类 HBase数据模型 HBaseAdmin 数据库(DataBase) HBaseConfiguration HTable 表(Table) HTableDescriptor 列族(Column Family) Put 列修饰符(Column Qualifier)...
分类:编程语言   时间:2015-03-20 16:36:13    阅读次数:147
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!