企业从事数据仓库项目时，往往会遇到多个数据仓库软件供应商。各供应商除了推销相关的软件工具外，同时会向企业灌输许多概念，其中，数据仓库和数据集市是最常见的。由于术语定义不统一，另外各个供应商销售策略不一样，往往会给企业带来很大的混淆。最典型的问题是：到底是先上一个企业级的数据仓库呢？还是先上一个部门级 ...
分类：
其他好文 时间：
2018-08-23 19:22:12
阅读次数：
3713
数据处理大致可以分成两大类：联机事务处理OLTP（on-line transaction processing）、联机分析处理OLAP（On-Line Analytical Processing）。OLTP是传统的关系型数据库的主要应用，主要是基本的、日常的事务处理，例如银行交易。OLAP是数据仓库 ...
分类：
其他好文 时间：
2018-08-23 10:48:09
阅读次数：
160
Hive函数大全（部分） 现在虽然有很多SQL ON Hadoop的解决方案，像Spark SQL、Impala、Presto等等，但就目前来看，在基于Hadoop的大数据分析平台、数据仓库中，Hive仍然是不可替代的角色。尽管它的相应延迟大，尽管它启动MapReduce的时间相当长，但是它太方便、 ...
分类：
其他好文 时间：
2018-08-19 23:26:33
阅读次数：
239
1. Hive是什么 Hive是基于Hadoop的数据仓库解决方案。由于Hadoop本身在数据存储和计算方面有很好的可扩展性和高容错性，因此使用Hive构建的数据仓库也秉承了这些特性。 这是来自官方的解释。 简单来说，Hive就是在Hadoop上架了一层SQL接口，可以将SQL翻译成MapReduc ...
分类：
其他好文 时间：
2018-08-19 23:21:17
阅读次数：
203
数据仓库 Hive是建立在Hadoop HDFS上的数据仓库基础架构 Hive可以用来进行数据提取转化加载（ETL） Hive定义了见到那的类似SQL查询语言，称为HQL它允许熟悉SQL的用户查询数据 Hive允许熟悉MapReduce开发者的开发自定义的mapper和reducer来处理内建的ma ...
分类：
其他好文 时间：
2018-08-18 21:21:41
阅读次数：
157
第1章课程介绍【赠送相关电子书+随堂代码】本章首先介绍本课程是什么，有什么特色，能学习到什么，内容如何安排，需要什么基础，是否适合学习这门课程等。然后对数据分析进行概述，让大家对数据分析的含义和作用有一个整体的认知，让大家对自己接下来要做的事情，有一个基本的概念与了解。...1-1课程导学1-2数据分析概述第2章数据获取数据从哪里来？怎么来？这一章，我们会介绍数据获取的一般手段。主要包括数据仓库、
分类：
编程语言 时间：
2018-08-18 00:53:42
阅读次数：
290
Presto可以作为数据仓库，能够连接多种数据库和NoSql，同时查询性能很高；
Superset提供了Presto连接，方便数据可视化和dashboard生成。
基于Presto和superset搭建数据分析平台。 ...
分类：
其他好文 时间：
2018-08-17 15:31:34
阅读次数：
1097
一、安装并使用MariaDB作为Ambari、Hive、Hue的存储数据库。 启动、查看状态，检查mariadb是否成功安装 二、配置mariadb 1，首先停止MariaDb 服务的运行 2，编辑/etc/my.cnf 在[mysqld]段下，添加如下几行行配置： 保存退出后，配置mariadb服 ...
分类：
数据库 时间：
2018-08-14 14:46:50
阅读次数：
444
架构 1.hive是数据仓库，在hadoop基础上处理结构化数据；它驻留在hadoop之上，用户对数据的统计，查询和简单的分析操作。 2.hive不是 a.关系型数据库 b.OLTP c.实时查询和行级更新操作 3.hive特点 a.表模型存储在database(关系型)中，处理的数据存储在HDFS ...
分类：
其他好文 时间：
2018-08-13 14:58:10
阅读次数：
151
一 数据仓库的概念 1 什么是数据仓库 数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它出于分析性报告和决策支持目的而创建。为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。 ...
分类：
其他好文 时间：
2018-08-12 20:15:19
阅读次数：
196
