讲解分布式数据存储的核心算法，数据分布的算法 hash算法 -> 一致性hash算法（memcached） -> redis cluster，hash slot算法 一、概述 1、我们的memcache客户端（这里我看的spymemcache的源码），使用了一致性hash算法ketama进行数据存储 ...
分类：
其他好文 时间：
2018-11-30 13:43:42
阅读次数：
248
完整代码 样本训练数据分布如下 输出结果如下 结论 通过打印结果可以看到W已经非常接近初始给定的3，b也非常接近给定的0.8 (误差不可避免) ...
分类：
其他好文 时间：
2018-11-18 14:17:57
阅读次数：
227
StatefulComputationsoverDataStreams(在数据流的有状态计算)ApacheFlink是一个用于分布式流和批处理数据的开源平台。Flink的核心是一个流数据流引擎，它为数据流上的分布式计算提供数据分布、通信和容错能力。Flink在流引擎之上构建批处理，覆盖本地迭代支持、托管内存和程序优化。通常在程序中的转换和数据流中的操作符之间存在一对一的对应关系。然而，有时一个转换
分类：
其他好文 时间：
2018-11-13 20:15:26
阅读次数：
197
问题 训练神经网络是一个很复杂的过程，在前面提到了深度学习中常用的激活函数，例如ELU或者Relu的变体能够在开始训练的时候很大程度上减少梯度消失或者爆炸问题，但是却不能保证在训练过程中不出现该问题，例如在训练过程中每一层输入数据分布发生了改变了，那么我们就需要使用更小的learning rate去 ...
分类：
其他好文 时间：
2018-11-07 20:42:25
阅读次数：
212
大数据分布式存储的部署模式：分离式or超融合 数据中心内部系统的核心要求是“稳定可靠”，一是指系统在运行过程中有能力提供连续可靠的服务，长时间无故障运行；二是指当故障发生之后，有能力快速定位，及时排查，故障范围不蔓延。 分离式部署的方式，使得系统与云平台系统相独立，避免了计算和存储争抢CPU/内存/ ...
分类：
其他好文 时间：
2018-11-07 11:24:59
阅读次数：
201
What is stored in ibdata1?当启用innodb_file_per_table时，表存储在它们自己的表空间中，但共享表空间仍用于存储其他InnoDB的内部数据： 数据字典也就是InnoDB表的元数据 改变缓冲区 双写缓冲区 撤消日志其中一些可以在Percona Server上配 ...
分类：
数据库 时间：
2018-11-06 17:49:53
阅读次数：
234
结果： 一层神经网络： 二层神经网络： 神经网络计算图： 神经元输出的分布： 数据分布直方图： 数据可视化： ...
分类：
其他好文 时间：
2018-11-05 19:22:59
阅读次数：
211
一 简介 1.1 概述 Mysql内建的复制功能是构建大型，高性能应用程序的基础。将Mysql的数据分布在多个系统之上，这种分布的机制，是通过将Mysql的某一台主机的数据复制到其它主机（slaves）上，并重新执行一遍来实现的。复制过程中一个服务器充当主服务器，而一个或多个其它服务器充当从服务器。 ...
分类：
数据库 时间：
2018-11-05 13:35:55
阅读次数：
164
最近特别喜欢一句话：实践是最好的成长，发表是最好的记忆。 笔者在今年国庆7天没有回家，累计有6天的时间是在公司度过，要么写博客，要么看书。我记得当时写的关于分布式系统一致性的原理和实践。作者是倪超。书名《从Paxos到Zookeeper分布式一致性原理与实践》。当时就想要通过发表Paxos来跟自己做 ...
分类：
编程语言 时间：
2018-11-02 20:22:07
阅读次数：
171
Ceph简介 Ceph是一个分布式存储系统, 具有高扩展性, 高可靠性, 高性能的存储集群, 它目前提供对象存储, 块设备存储, 文件系统存储三种存储应用 高扩展性：使用普通x86服务器，支持TB到PB级的扩展。 高可靠性：多数据副本，没有单点故障，自动管理，自动修复。 高性能：数据分布均衡，并行化 ...
分类：
其他好文 时间：
2018-11-02 11:09:39
阅读次数：
173
