数据仓库可以作为数据挖掘和OLAP等分析工具的资料来源，由于存放于数据仓库中的资料，必需经过筛选与转换，因此可以避免分析工具使用错误的资料，而得到不正确的分析结果。数据挖掘和OLAP同为分析工具，其差别在于OLAP提供用户一便利的多维度观点和方法，以有效率的对数据进行复杂的查询动作，其预设查询条件由...
分类：
其他好文 时间：
2014-07-22 22:46:53
阅读次数：
248
1、筹划数据库，确定数据库的使用目的，根据这一目的来觉得数据库的类型。是选择联机事务处理系统（OLTP）还是决策支持系统（DSS数据 仓库系统）。这两类系统是完全不同的系统，其调优策略是背道而驰的。在选择数据库的类型是最好不要选择通用型的general purpose，因为这种类型的数据库在管理和维...
分类：
数据库 时间：
2014-07-19 21:01:35
阅读次数：
316
前沿: Hive也采用类SQL的语法, 但其作为数据仓库, 与面向OLTP的传统关系型数据库(Mysql/Oracle)有着天然的差别. 它用于离线的数据计算分析, 而不追求高并发/低延时的应用场景. 最显著的特别是, Hive的数据是Schema On Read, 对数据的写入非常的自由和松散,....
分类：
其他好文 时间：
2014-07-07 09:53:53
阅读次数：
262
测试参数：sysbench--test=/root/sysbench0.5/sysbench/tests/db/insert.lua
--mysql-table-engine=innodb--oltp-table-size=1000000
--max-requests=0--max-time=300--num-threads=16
--oltp-tables-count=10--report-interval=10
--mysql-host=10.8.8.100--mysql-port=3312--..
分类：
数据库 时间：
2014-07-02 06:44:36
阅读次数：
280
如何梳理BI技术框架？ 首先，我们需要从各个菜市场（数据源）挑选我们需要的蔬菜、肉类、水果，然后我们开始挑拣、清洗，并根据菜式的要求，将各种原材料切好（ETL），摆放到厨房（数据仓库）；然后厨师根据不同的菜式及口味，将原材料进行必要的搭配（OLAP），最后辅以调料，通过炒、焖、炖等不同烹饪的手法制....
分类：
其他好文 时间：
2014-06-28 11:17:17
阅读次数：
422
一。说明：
OLTP中有些表数据量大，而且会对历史数据进行迁移至OLAP中做数据挖掘。对这种历史数据迁移的操作，较好的办法是该表采用分区表。比如按时间分区后，可以对分区进行迁移。
通过分区交换和表空间传输会很容易完成，而且性能上影响很小。
关于分区表更多内容：http://blog.csdn.net/tanqingru/article/category/1397435
关于表空间传...
分类：
其他好文 时间：
2014-06-24 17:21:12
阅读次数：
260
一 Hbase是个啥东东？
在说Hase是个啥家伙之前，首先我们来看看两个概念，面向行存储和面向列存储。面向行存储，我相信大伙儿应该都清楚，我们熟悉的RDBMS就是此种类型的，面向行存储的数据库主要适合于事务性要求严格场合，或者说面向行存储的存储系统适合OLTP，但是根据CAP理论，传统的RDBMS，为了实现强一致性，通过严格的ACID事务来进行同步，这就造成了系统的可用性和伸缩性方面大大折扣...
分类：
数据库 时间：
2014-06-22 17:58:25
阅读次数：
291
Mondrian架构的官网翻译。其中省略了MDX介绍和MOLAP,ROLAP介绍。Mondrian的OLAP系统由4层组成，参见下图。从终端用户到数据中心内核，四层架构分别是：展现层（presentation layer）、维度层（dimensional layer）、星层（star layer）和存储层。...
分类：
其他好文 时间：
2014-06-18 07:23:06
阅读次数：
278
下面内容摘自互联网并作了整理。名词：BI(Business Intelligence)：商业智能，DW(Data Warehouse)：数据仓库，详见正文Q1部分。OLTP(On-Line Transaction Processing)：联机事务处理也称为面向交易的处理系统，其基本特征是顾客的原始数...
分类：
其他好文 时间：
2014-06-17 00:38:42
阅读次数：
337
补上作业，MariaDB10和MySQL5.6社区版压力测试，见下图：sysbench（10.8.8.43）MySQL5.6和MariaDB10.0.11（10.8.8.100）压力测试参数：sysbench--test=oltp--mysql-table-engine=innodb
--oltp-table-size=10000000--max-requests=0--max-time=900
--num-threads=512--mysql-ho..
分类：
数据库 时间：
2014-06-10 18:52:48
阅读次数：
384
