安装mysql mysql装在了master节点上 1)卸载系统自带的mysql相关安装包，仅卸载 mysql 开头的包 rpm -qa|grep -i mysql -i 作用是不区分大小写 可以看到有两个安装包 MySQL-server-5.6.19-1.linux_glibc2.5.x86_64
分类：
其他好文 时间：
2016-03-21 21:36:46
阅读次数：
252
Hive自身查询语言HQL能完毕大部分的功能，但遇到特殊需求时，须要自己写UDF实现。下面是一个完整的案例。 1、eclipse中编写UDF 当我们在hive中使用自己定义的UDF的时候，hive会调用类中的evaluate方法来实现特定的功能 ③导出项目为jar文件。 注：项目的jdk与集群的jd
分类：
其他好文 时间：
2016-03-21 19:55:39
阅读次数：
114
Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flu
分类：
其他好文 时间：
2016-03-20 21:14:09
阅读次数：
253
使用Sqoop把oracle数据库中的一张表，这里假定为student，当中的数据导入到hdfs中，然后再创建hive的external表，location到刚才保存到hdfs中数据的位置。最后发现对hive中表特定条件进行count时结果和oracle中结果不一致。 sqoop import --
分类：
数据库 时间：
2016-03-19 01:01:14
阅读次数：
1031
学习Hive需要，闲话不说 本文的内容： 1、下载Mysql for Mac 下载地址：http://dev.mysql.com/downloads/ 注意，下载末尾是 .dmg格式的文件，这要下错。。。。。 2、下载Mysql Workbench 下载地址：http://dev.mysql.com
分类：
数据库 时间：
2016-03-18 00:20:35
阅读次数：
211
（一）Hive+Solr简介Hive作为Hadoop生态系统里面离线的数据仓库，可以非常方便的使用SQL的方式来离线分析海量的历史数据，并根据分析的结果，来干一些其他的事情，如报表统计查询等。Solr作为高性能的搜索服务器，能够提供快速，强大的全文检索功能。（二）为什么需要hive集成s..
分类：
其他好文 时间：
2016-03-17 19:53:12
阅读次数：
357
（一）Hive+Solr简介 Hive作为Hadoop生态系统里面离线的数据仓库，可以非常方便的使用SQL的方式来离线分析海量的历史数据，并根据分析的结果，来干一些其他的事情，如报表统计查询等。 Solr作为高性能的搜索服务器，能够提供快速，强大的全文检索功能。 （二）为什么需要hive集成solr
分类：
其他好文 时间：
2016-03-17 16:37:12
阅读次数：
347
1. 创建azure hadoop，记住创建时填的管理员密码2. 创建可能需要10-15分钟。创建好了之后，去dashboard选择创建好的hadoop—>选中cluster3.登录azure hdinsight，输入刚才填的管理员密码，用户名是admin。 进入hive editor页面，使用测试数据进行查询4. 进入Job History，选中一个job，可以查看job output这些job...
分类：
其他好文 时间：
2016-03-17 14:49:42
阅读次数：
199
使用多少个mapreduce来进行移植数据，例如：./sqoopimport--create-hive-table--hive-import--hive-overwrite--connectjdbc:oracle:thin:@XXX.XXX.XXX.XXX:1521:orcl--usernamename--passwordpwd--tabletablename--hive-databasehivedatabasename-m5上面使用了5个任务，然后数..
分类：
其他好文 时间：
2016-03-16 19:23:58
阅读次数：
222
http://blog.itpub.net/22778222/viewspace-1119892/ 官方文档翻译 http://blog.csdn.net/hguisu/article/details/7256833 http://www.cnblogs.com/linjiqin/arch
分类：
其他好文 时间：
2016-03-15 19:06:34
阅读次数：
122
