最近在搞关于数据分析的项目,做了一点总结。下图是系统的数据流向。容易出现错误的地方。1、数据进入hadoop仓库有四种来源,这四种是最基本的数据,简称ods,original data source,后续 的数据都是有这些组合而来a、日志文件b、http接口c、DB查询d、建表指向最后数据都是以ha...
分类:
其他好文 时间:
2014-10-11 21:06:06
阅读次数:
242
网上管理系统的权限设计似乎都是使用关系数据库的,这次我们的功能权限不再使用关系型数据库,直接使用对象数据库,体会一下面向对象的数据库在权限系统设计中的使用,因此也就不存在传统意义的数据库设计了。直接看类图在使用的时候只需这样User user=new User("E0001");if(user.ha...
分类:
其他好文 时间:
2014-10-11 17:39:55
阅读次数:
224
HDFS权限问题Win下Eclipse提交hadoop程序出错:org.apache.hadoop.security.AccessControlException: Permission denied: user=mango, access=WRITE描述:在window下使用Eclipse进行ha...
分类:
其他好文 时间:
2014-10-10 01:58:53
阅读次数:
138
vSphere HA状况:未知配置错误解决办法...
分类:
其他好文 时间:
2014-10-09 16:02:18
阅读次数:
207
mysql中INSTR函数的用法INSTR(字段名, 字符串)这个函数返回字符串在某一个字段的内容中的位置, 没有找到字符串返回0,否则返回位置(从1开始)SELECT * FROM tblTopic ORDER BY INSTR( topicTitle, 'ha' ) > 0 DESCSELECT...
分类:
数据库 时间:
2014-10-09 00:59:57
阅读次数:
215
Find the contiguous subarray within an array (containing at least one number) which has the largest sum.
For example, given the array [?2,1,?3,4,?1,2,1,?5,4],
the contiguous subarray [4,?1,2,1] ha...
分类:
其他好文 时间:
2014-10-08 18:06:55
阅读次数:
163
先检查vcenter服务是否正常是不是所有的PC的vsphere-clinet链接vcenter都报同样的902错误如果是请继续向下,如果不是请重新安装vsphere-client或者重装系统安装软件重启每台ESXI主机的hostd与vpxa服务命令:/etc/init.d/hostdrestart(请首先开启ssh服务a.打开图形界面->按F..
分类:
其他好文 时间:
2014-10-08 17:40:56
阅读次数:
174
package com.spring.mvc.xls;import java.io.File;import java.io.FileInputStream;import java.text.DecimalFormat;import java.util.Date;import java.util.Ha...
分类:
编程语言 时间:
2014-10-08 17:23:25
阅读次数:
272
详细记录基于Hadoop2.5.1的集群的安装过程,集群组件包含:JDK、Hadoop、Hive、ZK、MySql、Sqoop,并记录安装过程中遇到的问题及解决方案。...
分类:
其他好文 时间:
2014-10-08 14:14:35
阅读次数:
373