布隆过滤器 Bloom Filter 过滤器的作用：判断元素在还是不在。（如图查询 w 在不在集合中） 布隆过滤器：?个很长的二进制向量和一系列随机映射函数。 布隆过滤?可以用于检索一个元素是否在?个集合中（如果检测出元素不在集合中，那一定不在；如果检测出元素在集合中，有一定可能判断错误）。 它的优 ...
分类：
其他好文 时间：
2019-08-13 00:31:18
阅读次数：
87
Bloom的原理很简单，主要是提取渲染图像中的亮部区域，并对亮部区域进行模糊处理，再与原始图像混合而成。 一般对亮部进行模糊处理的部分采用高斯模糊，关于高斯模糊，详见之前的另一篇博客： https://www.cnblogs.com/koshio0219/p/11152534.html 计算方法： ...
分类：
编程语言 时间：
2019-07-11 12:56:06
阅读次数：
591
1.什么是缓存击穿 一般是指，通过高并发一些无效的数据访问你的数据库，缓存没有，直接访问你的数据库，大量恶意的攻击，造成数据库的查询变慢； 2，有效解决办法， 布隆过滤器（Bloom Filter）是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以用于检索一 ...
分类：
其他好文 时间：
2019-06-16 00:28:09
阅读次数：
154
前言 redis在4.0版本以后可通过插件的形式添加布隆过滤器，以下为具体操作。 操作 在下载最新的release源码，在编译服务器进行解压编译： tar zxvf RedisBloom 1.1.1.tar.gz cd RedisBloom 1.1.1 make 得到动态库rebloom.so 启动 ...
分类：
其他好文 时间：
2019-05-24 15:43:31
阅读次数：
456
布隆过滤器 布隆过滤器（Bloom Filter）是一种概率空间高效的数据结构。它与hashmap非常相似，用于检索一个元素是否在一个集合中。它在检索元素是否存在时，能很好地取舍空间使用率与误报比例。正是由于这个特性，它被称作概率性数据结构（probabilistic data structure） ...
分类：
其他好文 时间：
2019-03-28 09:59:54
阅读次数：
167
（一）string：文本常量和模板 1.函数 2.模板 ...
分类：
编程语言 时间：
2019-02-26 13:50:21
阅读次数：
199
搜索是大数据领域里常见的需求。Splunk和ELK分别是该领域在非开源和开源领域里的领导者。本文利用很少的Python代码实现了一个基本的数据搜索功能，试图让大家理解大数据搜索的基本原理。 布隆过滤器 （Bloom Filter） 第一步我们先要实现一个布隆过滤器。 布隆过滤器是大数据领域的一个常见 ...
分类：
编程语言 时间：
2019-01-24 13:22:49
阅读次数：
218
0 引言 和其他数据库一样，优化IO也是HBase提升性能的不二法宝，而提供缓存更是优化的重中之重。 根据二八法则，80%的业务请求都集中在20%的热点数据上，因此将这部分数据缓存起就可以极大地提升系统性能。 HBase在实现中提供了两种缓存结构：MemStore和BlockCache。其中MemS ...
分类：
系统相关 时间：
2018-12-17 02:02:51
阅读次数：
271
https://blog.csdn.net/a1368783069/article/details/52137417 ...
分类：
编程语言 时间：
2018-12-13 21:46:50
阅读次数：
330
海量数据处理面试题六大套路：1、分而治之/hash映射 + hash统计 + 堆/快速/归并排序 2、多层划分 3、Bloom filter/Bitmap 4、Trie树/数据库/倒排索引 5、外排序 6、Map Reduce ...
分类：
其他好文 时间：
2018-12-02 16:48:07
阅读次数：
172
