数据仓库和数据挖掘基础知识 一、数据仓库 相比数据库，数据仓库增加了决策分析功能 OLAP：联机分析处理，用于数据挖掘，从数据仓库中分析数据，要求相应时间合理 OLTP：联机事务处理，用于更新事务，将数据写入数据库，面向操作人员，要求响应速度快 二、数据仓库的体系结构 1.组成：底层的数据仓库服务器 ...
分类：
数据库 时间：
2018-03-06 10:48:44
阅读次数：
195
Stream Computing 概念对比 静态数据和流数据 静态数据，例如数据仓库中存放的大量历史数据，特点是不会发生更新，可以利用数据挖掘技术和 OLAP（On-Line Analytical Processing）工具从静态数据中找到有价值的信息 流数据，例如 Web 应用和电信金融等领域产生 ...
分类：
其他好文 时间：
2018-03-04 14:40:17
阅读次数：
159
一.大数据的5个特征（IBM提出）： Volume（大量） Velocity（高速） Variety（多样） Value（价值） Varacity（真实性） 二.OLTP与OLAP 1.OLTP：联机事务处理过程，也称面向交易的处理过程，是对用户操作快速响应的方式之一。OLTP是传统的关系型数据库的 ...
分类：
其他好文 时间：
2018-02-20 20:42:01
阅读次数：
178
OLTP和OLAP的区别 联机事务处理OLTP（on-line transaction processing） 主要是执行基本日常的事务处理，比如数据库记录的增删查改。比如在银行的一笔交易记录，就是一个典型的事务。 OLTP的特点一般有： 1.实时性要求高。我记得之前上大学的时候，银行异地汇款，要隔 ...
分类：
其他好文 时间：
2018-02-18 11:17:48
阅读次数：
183
堆组织表就不说了，其索引中记录了记录所在位置的rowid，查找的时候先找索引，然后再根据索引rowid找到块中的行数据索引组织表，其行数据以索引形式存放，因此找到索引，就等于找到了行数据。 -- 堆组织表的数据是散放的，索引和表的数据是分离的索引组织表的索引和数据是在一起的 -- -- 堆组织表（h ...
分类：
其他好文 时间：
2018-02-13 13:36:19
阅读次数：
244
CarbonData是一种高性能大数据存储方案，支持快速过滤查找和即席OLAP分析，已在20+企业生产环境上部署应用，其中最大的单一集群数据规模达到几万亿。针对当前大数据领域分析场景需求各异而导致的存储冗余问题，业务驱动下的数据分析灵活性要求越来越高，CarbonData提供了一种新的融合数据存储方 ...
分类：
Web程序 时间：
2018-02-09 15:34:41
阅读次数：
1179
转:http://blog.csdn.net/yu616568/article/details/48103415 Kylin是ebay开发的一套OLAP系统，与Mondrian不同的是，它是一个MOLAP系统，主要用于支持大数据生态圈的数据分析业务，它主要是通过预计算的方式将用户设定的多维立方体缓存 ...
分类：
其他好文 时间：
2018-01-25 15:52:18
阅读次数：
1214
最近在开发一个 App 的时候用到了数据库，可是在使用数据库的时候就出现了一些问题，在我查询表中的一些信息时出现了一下问题： 刚开始遇到的时候也是比较懵，不知道为什么应用就闪退了，刚开始也没看到错误提示，这看了之后就想会不会是因为我在某个地方把数据库链接关了所以才出现这样的情况，然后就发现还真是，我 ...
分类：
移动开发 时间：
2018-01-21 13:43:36
阅读次数：
1568
探索数据数据探索有助于选择合适的数据预处理和数据分析技术。它甚至可以处理一些通常由数据挖掘解决的问题，例如，有时可以通过对数据进行直观检查来发现模式。此外数据探索中使用的某些技术（如可视化）可以用于理解和解释数据挖掘结果。本章包括三个主题：汇总统计、可视化和联机分析处理（OLAP）.汇总统计（如值集... ...
分类：
其他好文 时间：
2018-01-20 16:23:17
阅读次数：
219
背景： OceanBase是阿里巴巴、蚂蚁金服自主研发的可扩展的分布式关系数据库，实现了数千亿条记录、数百 TB 数据上的跨行跨表事务，主要支持支付宝核心的交易、支付、会员和账务系统等 OLTP 和 OLAP 在线业务。 在2017年双11期间，OceanBase承担了100%的交易，全球支付总笔数 ...
分类：
其他好文 时间：
2018-01-16 18:37:56
阅读次数：
1073
