hadoop hdfs 重新启动或者重新格式话，可能会出现一些数据丢失
清理hbase缓存数据
hbase启动出现错误：2016-05-11 10:01:23,124 ERROR org.apache.hadoop.hbase.master.HMasterCommandLine: Master exiting
java.lang.Run...
分类：
Web程序 时间：
2016-05-12 12:16:07
阅读次数：
797
提示LOGS信息
org.apache.hadoop.yarn.exceptions.YarnRuntimeException: java.net.NoRouteToHostException: No Route to Host from dataNode1/192.168.2.247 to nameNode:8031 failed on socket timeout exception: j...
分类：
编程语言 时间：
2016-05-12 12:14:53
阅读次数：
1208
2、Flume Collector安装（通过extends AbstractSink implements Configurable，直接写入数据库）
2.1 安装环境
系统:
CentOS release 6.6
软件:
flume-collector.tar.gz
2.2 安装步骤
2.2.1 部署Flume Collector
...
分类：
Web程序 时间：
2016-05-12 12:14:32
阅读次数：
254
1、Flume Agent安装（采用spoolDir模式以便获取系统、应用等日志信息）
注：使用jyapp用户安装
一台虚拟机部署了多个JAVA应用同时需要部署多个flume-agent进行监控时，
需要调整如下配置文件：
a flume-agent/conf/app.conf中的spool_Dir参数
b flume-agent/conf/flume-e...
分类：
Web程序 时间：
2016-05-12 12:12:18
阅读次数：
305
MR程序的执行环境有两种：本地测试环境、服务器环境。
1、本地环境执行MR程序的步骤：
（1）在windows下配置hadoop的环境变量
（2）拷贝debug工具(winutils)到HADOOP_HOME/bin
（3）从源码中拷贝org.apache.hadoop.io.nativeio.NativeIO.java到我们的mr的src目录下...
分类：
其他好文 时间：
2016-05-12 12:06:48
阅读次数：
373
概要
为了调查hadoop生态圈里的制品，特地的了解了一下RDBMS和hdfs之间数据的导入和导出工具，并且调查了一些其他同类的产品，得出来的结论是：都是基于sqoop做的二次开发或者说是webUI包装，实质还是用的sqoop。比如pentaho的PDI，Oracle的ODI，都是基于此，另外，Hortnetwork公司的sandbox，Hue公司的Hue webUI，coulder的coul...
分类：
数据库 时间：
2016-05-12 12:04:30
阅读次数：
364
POI简介
Apache POI是Apache软件基金会的开放源码函式库，POI提供API给Java程序对Microsoft Office格式档案读和写的功能。自2009-09-28后，推出了3.5版本，提供了对Office2007的支持；
HSSF概况
HSSF 是Horrible SpreadSheet Format的缩写，通过HSSF，你可以用纯Java代...
分类：
Web程序 时间：
2016-05-12 11:52:34
阅读次数：
215
#!/bin/bash
#
# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements. See the NOTICE file distributed with
# this work for additional information re...
分类：
其他好文 时间：
2016-05-12 11:46:20
阅读次数：
198
2012-8-29 10:30:28 org.apache.catalina.core.StandardContext filterStart
严重: Exception starting filter encodingFilter
java.lang.ClassCastException: org.springframework.web.filter.CharacterEncodingFil...
分类：
编程语言 时间：
2016-05-12 11:42:36
阅读次数：
685
一个全新的构建系统
原文地址：http://tools.android.com/tech-docs/new-build-system/user-guide
Gradle是一个基于Apache Ant和Apache Maven概念的项目自动化建构工具。它使用一种基于Groovy的特定领域语言(DSL)来声明项目设置，抛弃了基于XML的各种繁琐配置。
简介
DSL引用：如果你在寻找build.gradle文件里面所列选项的清单，请移步DSL reference...
分类：
其他好文 时间：
2016-05-12 11:35:56
阅读次数：
277
