迄今，相信大家肯定听说过 HBase，但是对于 HBase 的了解可能仅仅是它是 Hadoop 生态圈重要的一员，是一个大数据相关的数据库技术。 今天我带你们一起领略一下 HBase 体系架构，看看它是如何大规模处理海量数据。 一、什么是 HBase？ 关于 HBase 的实现，是基本遵循 Bigt ...
分类：
其他好文 时间：
2019-01-19 21:07:14
阅读次数：
186
分区(Partition)一直是Oracle数据库引以为傲的一项技术，正是分区的存在让Oracle高效的处理海量数据成为可能，在Oracle 11g中，分区技术在易用性和可扩展性上再次得到了增强。在10g的Oracle版本中，要对分区表做调整，尤其是对RANGE分区添加新的分区都需要DBA手动定期添 ...
分类：
数据库 时间：
2019-01-15 14:27:58
阅读次数：
228
计算机也就我们所说的电脑，是现代一种用于高速运算的电子计算机器，可以进行数值计算，有可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动高速处理海量数据的现代化智能电子设备。现在的计算机已经成为人们生活中不可或缺的一部分了。 我与计算机接触的时候是在小学，那个时候计算机好像在农村刚刚流行起 ...
分类：
其他好文 时间：
2019-01-12 21:42:17
阅读次数：
216
上个月参加了一个云存储的技术讨论会。这一个月里，陆续收到几位同学讨论大数据保存和处理的邮件。今天是周末，索性把这个月的交流内容整理写下来，供各位参考。 目前大数据存储有两种方案可供选择：行存储和列存储。业界对两种存储方案有很多争持，集中焦点是: 谁能够更有效地处理海量数据，且兼顾安全、可靠、完整性。 ...
分类：
其他好文 时间：
2018-12-19 12:57:10
阅读次数：
178
使用Redis构建处理海量数据的大型购物网站,本章主要关注如何处理海量数据,将从三个方面使用Redis优化,分别是使用Redis构建Token,使用Redis构建购物车,使用Redis构建数据缓存等...... ...
分类：
Web程序 时间：
2018-11-24 22:30:56
阅读次数：
288
Hadoop 两个核心模块： （1）计算模块 MapReduce （2）存储模块 分布式文件系统 Hadoop解决了什么问题？ 海量数据需要及时分析和处理 海量数据需要深入分析和挖掘 数据需要长期保存 海量数据需要及时分析和处理 海量数据需要深入分析和挖掘 数据需要长期保存 MapReduce引入： ...
分类：
其他好文 时间：
2018-11-18 13:07:00
阅读次数：
207
用户喜好 为了不断优化推荐效果，今日头条每天要存储和处理海量数据。假设有这样一种场景：我们对用户按照它们的注册时间先后来标号，对于一类文章，每个用户都有不同的喜好值，我们会想知道某一段时间内注册的用户（标号相连的一批用户）中，有多少用户对这类文章喜好值为k。因为一些特殊的原因，不会出现一个查询的用户 ...
分类：
其他好文 时间：
2018-11-13 12:16:03
阅读次数：
175
1、什么是大数据 基本概念 《数据处理》 在互联网技术发展到现今阶段，大量日常、工作等事务产生的数据都已经信息化，人类产生的数据量相比以前有了爆炸式的增长，以前的传统的数据处理技术已经无法胜任，需求催生技术，一套用来处理海量数据的软件工具应运而生，这就是大数据！ 处理海量数据的核心技术： 海量数据存 ...
分类：
其他好文 时间：
2018-09-22 19:42:10
阅读次数：
142
在参与实际项目中，当 MySQL 表的数据量达到百万级时，普通的 SQL 查询效率呈直线下降，而且如果 where 中的查询条件较多时，其查询速度无法容忍。想想可知，假如我们查询淘宝的一个订单详情，如果查询时间高达几十秒，这么高的查询延时，任何用户都会抓狂。因此如何提高 SQL 语句查询效率，显得十 ...
分类：
数据库 时间：
2018-09-14 17:20:58
阅读次数：
189
计算机发展史。。。。 计算机（computer）俗称电脑，是现代一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。 在古时候，人们最早使用的计算工具可能是手指，英文单词“digit”既有“数字”的 ...
分类：
其他好文 时间：
2018-08-29 10:52:06
阅读次数：
248
