最近在搞关于数据分析的项目，做了一点总结。下图是系统的数据流向。容易出现错误的地方。1、数据进入hadoop仓库有四种来源，这四种是最基本的数据，简称ods，original data source，后续 的数据都是有这些组合而来a、日志文件b、http接口c、DB查询d、建表指向最后数据都是以ha...
分类：
其他好文 时间：
2014-10-11 21:06:06
阅读次数：
242
这学期选了门模式识别的课。发现最常见的一种情况就是，书上写的老师ppt上写的都看不懂，然后绕了一大圈去自己查资料理解，回头看看发现，Ah-ha，原来本质的原理那么简单，自己一開始仅仅只是被那些看似formidable的细节吓到了。所以在这里把自己所学的一些点记录下来，供备忘，也供參考。1. K-Ne...
分类：
编程语言 时间：
2014-10-11 20:50:56
阅读次数：
257
网上管理系统的权限设计似乎都是使用关系数据库的，这次我们的功能权限不再使用关系型数据库，直接使用对象数据库，体会一下面向对象的数据库在权限系统设计中的使用，因此也就不存在传统意义的数据库设计了。直接看类图在使用的时候只需这样User user=new User("E0001");if(user.ha...
分类：
其他好文 时间：
2014-10-11 17:39:55
阅读次数：
224
HDFS权限问题Win下Eclipse提交hadoop程序出错：org.apache.hadoop.security.AccessControlException: Permission denied: user=mango, access=WRITE描述：在window下使用Eclipse进行ha...
分类：
其他好文 时间：
2014-10-10 01:58:53
阅读次数：
138
vSphere HA状况：未知配置错误解决办法...
分类：
其他好文 时间：
2014-10-09 16:02:18
阅读次数：
207
mysql中INSTR函数的用法INSTR(字段名, 字符串)这个函数返回字符串在某一个字段的内容中的位置, 没有找到字符串返回0，否则返回位置（从1开始）SELECT * FROM tblTopic ORDER BY INSTR( topicTitle, 'ha' ) > 0 DESCSELECT...
分类：
数据库 时间：
2014-10-09 00:59:57
阅读次数：
215
Find the contiguous subarray within an array (containing at least one number) which has the largest sum.
For example, given the array [?2,1,?3,4,?1,2,1,?5,4],
the contiguous subarray [4,?1,2,1] ha...
分类：
其他好文 时间：
2014-10-08 18:06:55
阅读次数：
163
package com.spring.mvc.xls;import java.io.File;import java.io.FileInputStream;import java.text.DecimalFormat;import java.util.Date;import java.util.Ha...
分类：
编程语言 时间：
2014-10-08 17:23:25
阅读次数：
272
详细记录基于Hadoop2.5.1的集群的安装过程，集群组件包含：JDK、Hadoop、Hive、ZK、MySql、Sqoop，并记录安装过程中遇到的问题及解决方案。...
分类：
其他好文 时间：
2014-10-08 14:14:35
阅读次数：
373
