今天在centos6.3上搭建了hadoop+hive＋spark系统，在运行/usr/local/spark-1.0.0/bin/spark-shell出现找不到hive相关的类，于是修改了spark-env.sh在spark_classpath里添加了hive的库路径exportSPARK_CLASSPATH=/usr/local/spark-1.0.0/lib_managed/jars/spark-assembly-1.0.0-..
分类：
其他好文 时间：
2014-08-28 15:00:30
阅读次数：
339
orderby sort by distribute by的优化...
分类：
其他好文 时间：
2014-08-28 13:19:09
阅读次数：
294
以前做NDK开发时留下来的笔记，希望对后继开发人员有所帮助，在开放给大家使用，有不对的地方请留，扔砖头都可以的。 为了方便在Win32下开发android C++ 程序，我们作了如下配制：1、Android 开发环境搭建下载 JDK下载 Eclipse下载 Android SDK下载 cygwi.....
分类：
移动开发 时间：
2014-08-28 12:55:49
阅读次数：
308
学习web开发，环境搭建是必不可少的一个环节。你可以使用wamp一键安装包，或者使用sae、bae、gae这种PaaS平台来部署，或者安装*nix系统在本地部署。对于一个希望体验LAMP式建站的新手而言，一个简单可行的方案是：虚拟机中安装Linux，在Wi...
分类：
Web程序 时间：
2014-08-28 00:52:38
阅读次数：
329
http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_design.html#%E7%A1%AC%E4%BB%B6%E9%94%99%E8%AF%AF
分类：
其他好文 时间：
2014-08-27 23:25:09
阅读次数：
203
******************************************************************* 转自http://www.cnblogs.com/rophie/p/3226543.html?ADUIN=2625726808&ADSESSION=14085369...
分类：
移动开发 时间：
2014-08-27 21:58:18
阅读次数：
186
前提你得安装有Hadoop 我的版本hadoop2.3-cdh5.1.01、下载maven包2、配置M2_HOME环境变量，配置maven 的bin目录到path路径3、export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCa...
分类：
其他好文 时间：
2014-08-27 18:37:18
阅读次数：
252
自从三大数据库厂商甲骨文、IBM和微软在2011年不约而同地宣布支持Hadoop后，在企业级市场上，Hadoop基本上也充当着大数据的代名词。时至今日，这种状况或许应该改变了。NoSQL日渐重要 由于Hadoop的高调，很少有人注意到，在宣布支持Hadoop的同一年，这三大关系型数据库厂商还分...
分类：
其他好文 时间：
2014-08-27 18:04:38
阅读次数：
127
