1. sysbench 介绍 sysbench是一个模块化的、跨平台、多线程基准测试工具，主要用于评估测试各种不同系统参数 下的数据库负载情况。 它主要包括以下几种方式的测试： cpu性能 磁盘io性能 调度程序性能 内存分配及传输速度 POSIX线程性能 数据库性能(OLTP基准测试) 目前sys ...
分类：
其他好文 时间：
2020-04-22 16:26:52
阅读次数：
63
衡量指标 IOPS (Input/Output Per Second)即每秒的输入输出量(读写次数)，是衡量磁盘性能的主要指标之一。IOPS是指单位时间内系统能处理的I/O请求数量，一般以每秒处理的I/O请求数量为单位，I/O请求通常为读或写数据操作请求。随机读写频繁的应用，如OLTP(Online ...
分类：
其他好文 时间：
2020-04-19 12:57:17
阅读次数：
55
背景 最近花了些时间看了下ClickHouse文档，发现它在OLAP方面表现很优异，而且相对也比较轻量和简单，所以准备入门了解下该数据库系统。在介绍了安装和用户权限管理之后，本文对其配置文件做下相关的介绍说明。 说明 ClickHouse的配置文件是config.xml，默认在/etc/clickh ...
分类：
其他好文 时间：
2020-04-11 18:44:37
阅读次数：
224
一、数据仓库的设计基本思想 1. 数据仓库的特点：①面向主题②随时间变化而变化③数据集成④信息相对稳定 2. 数据仓库的技术要求：①数据模型设计②ETL设计③存储管理④报表设计 3. 常见设局仓库体系的架构 ①相关数据仓库的概念 元数据，商业智能，数据挖掘，联机处理分析（OLAP），维度，度量，聚合 ...
分类：
其他好文 时间：
2020-04-11 12:43:58
阅读次数：
67
不止我有这种感觉：https://blog.nfz.moe/archives/coolapk in my mind.html 为什么那么多人退酷安：https://www.zhihu.com/question/286300925/answer/1006997826 3年前还是很和气的 自18年，许多 ...
分类：
其他好文 时间：
2020-04-01 10:28:41
阅读次数：
96
一、数据仓库的概念: 数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持（Decision Support）。它出于分析性报告和决策支持目的而创建。 数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的 ...
分类：
其他好文 时间：
2020-03-31 14:45:16
阅读次数：
77
用于数据分析的 OLAP 系统的主要特点就是数据量非常大，并发访问不多，但每次访问所需要检索的数据量都比较多，而且数据访问相对较为集中，没有什么比较明显的活跃数据概念。 OLAP 即联机分析处理，是数据仓库的核心部心，所谓数据仓库是对于大量已经由 OLTP 形成的数据的一种分析型的数据库，用于处理商 ...
分类：
其他好文 时间：
2020-03-28 19:52:06
阅读次数：
71
在常见的互联网业务中，数据库读写比例通常为4：1至10：1之间。在这类业务场景下，数据库的读负载远高于写负载，在遇到因为数据库读取压力大导致性能瓶颈的一个常见的解决方案就是增加只读实例（仅提供读功能）。用户只需要将业务中的读请求分担到只读实例上，就可以缓解主库查询压力，同时也可以把一些OLAP的分析查询放到另外的只读实例上，减小复杂统计查询对主库的冲击。只读实例无法单独存在，必须隶属于某个数据库主
分类：
数据库 时间：
2020-03-24 11:02:09
阅读次数：
95
1、概念 presto是一个开源的分布式SQL查询引擎 数量支持GB到PB字节 主要用来处理秒级查询的场景 注意： 虽然presto可以解析SQL，但它不是一个标准的数据库不是mysql，oracle的代替品，也不能用来处理在线事务（OLTP） 2、Presto架构 presto由一个coordin ...
分类：
其他好文 时间：
2020-03-19 15:23:35
阅读次数：
57
什么是ClickHouse？ 毛子开源的一个列式存储数据库(DBMS), 主要用于OLAP, 能使用SQL查询实时生成分析数据报告。 可以类比HBase 数据类型 与其他框架比较 | MySQL | Hive | ClickHouse | | | | | | byte | TINYINT | Int ...
分类：
其他好文 时间：
2020-03-17 19:30:21
阅读次数：
51
