在日常的程序开发过程中，很多情况下，用户单位给予开发人员的数据往往是execl或者是access数据，如何把这些数据转为企业级是数据库数据呢，下面就利用sqlserver自带的功能来完成此项任务。 首先打开数据库，右键点击数据库，选择任务、 选择导入数据 弹出导入数据对话框 点击下一步，在数据源下拉...
分类：
数据库 时间：
2014-08-23 08:48:10
阅读次数：
381
1、如果你装了带有zookeeper的Hbase版本，先把hbase-env.sh export HBASE_MANAGES_ZK=false 设置为false 见下图
2、下载安装zookeeper（地址:http://www.apache.org/dyn/closer.cgi/zookeeper/）
3、解压包到指定的目录（例如：/usr/zookeeper）tar X...
分类：
其他好文 时间：
2014-08-22 16:20:59
阅读次数：
250
在一个项目里用到HBase做底层存储，使用maven来管理相关Jar包依赖，用maven来管理依赖包，特别不爽的就是他会将你引入Jar包自己的依赖都搞进来，经常会出现一些类和方法冲突找不到等状况。这次，也被这个搞了一阵子。我依赖了HBase jar之后，tomcat启动后，访问Web页面（使用JSP...
分类：
其他好文 时间：
2014-08-22 12:21:16
阅读次数：
204
1、准备数据2、转换成要素类，名称为xy13、定义投影至此，将excel点数据导入的工作已经完成。接下来，生成等值线：1、克里金插值（Kriging）2、生成等值线
分类：
其他好文 时间：
2014-08-21 22:42:54
阅读次数：
1205
HBase和Solr可以通过协处理器Coprocessor的方式向Solr发出请求，Solr对于接收到的数据可以做相关的同步：增、删、改索引的操作，这样就可以同时使用HBase存储量大和Solr检索性能高的优点了，更何况HBase和Solr都可以集群。这对海量数据存储、检索提供了一种方式，将存储与索...
分类：
其他好文 时间：
2014-08-21 21:05:04
阅读次数：
295
Hive是为了简化编写MapReduce程序而生的，使用MapReduce做过数据分析的人都知道，很多分析程序除业务逻辑不同外，程序流程基本一样。在这种情况下，就需要Hive这样的用戶编程接口。Hive本身不存储和计算数据，它完全依赖于HDFS和MapReduce，Hive中的表纯逻辑，就是些表的定义等，也就是表的元数据。使用SQL实现Hive是因为SQL大家都熟悉，转换成本低，类似作用的Pig就...
分类：
其他好文 时间：
2014-08-21 19:27:44
阅读次数：
148
需求
将Oracle中的业务基础表增量数据导入Hive中，与当前的全量表合并为最新的全量表。
设计
涉及的三张表：
全量表：保存了截止上一次同步时间的全量基础数据表
增量表：增量临时表
更新后的全量表：更新后的全量数据表
步骤：
通过Sqoop将Oracle中的表导入Hive，模拟全量表和增量表
通过Hive将“全量...
分类：
数据库 时间：
2014-08-21 19:22:14
阅读次数：
455
HBase分布式集群环境搭建成功后，连续4、5天实验客户端Map/Reduce程序开发，这方面的代码网上多得是，写个测试代码非常容易，可是真正运行起来可说是历经挫折。下面就是我最终调通并让程序在集群上运行起来的一些经验教训。 一、首先说一下我的环境： 1，集群的环境配置请见这篇博文。 2，...
分类：
其他好文 时间：
2014-08-21 16:26:54
阅读次数：
366
本系列文章只是记录了笔者本人在学习实验安装和使用基于CDH5.0.2的HBASE集群过程中的一些经验教训和心得，绝不是详细的安装过程，因本人不过一初学者，很多方面不甚了了，如果能让不幸读到的人有所得则不胜欣喜，否则大家一笑置之即可。通过tarball形式安装HBASE Cluster（CDH5......
分类：
其他好文 时间：
2014-08-21 09:41:03
阅读次数：
187
很少摸 Windows 环境下的东西，最近被个 MS SQL Server 的数据库搞得头大。实在不像 MySQL 那样用起来轻车熟路， OrZ ...本来以为企业管理器里面既然提供了 DTS 数据导入/导出 的功能，直接使用 DTS 指定源和目标库就可以完全复制数据库到远程服务器上了。结果发现除了...
分类：
数据库 时间：
2014-08-21 09:36:23
阅读次数：
240
