最近（以及预感接下来的一年）会读很多很多的paper......不如开个帖子记录一下读paper心得 New Hardware / non volatile memory .... Streaming .... Cloud / Distributed PolarFS: An Ultra-low La ...
分类：
数据库 时间：
2020-04-02 00:54:56
阅读次数：
96
/******************************************************************* Copyright(c) 2016, Harry He All rights reserved. Distributed under the BSD licens ...
分类：
其他好文 时间：
2020-04-01 11:21:28
阅读次数：
66
一、什么是RDD A Resilient Distributed Dataset (RDD), the basic abstraction in Spark. Represents an immutable, partitioned collection of elements that can b ...
分类：
其他好文 时间：
2020-03-29 17:56:53
阅读次数：
80
将深度学习模型的训练从单GPU扩展到多GPU主要面临以下问题：(1)训练框架必须支持GPU间的通信，(2)用户必须更改大量代码以使用多GPU进行训练。为了克服这些问题，本文提出了Horovod，它通过Ring Allreduce实现高效的GPU间通信，而且仅仅更改少量代码就可以实现多GPU训练。 T ...
分类：
其他好文 时间：
2020-03-28 13:04:36
阅读次数：
91
Hadoop 02 核心介绍 1. HDFS HDFS（Hadoop Distributed File System） 是一个 Apache Software Foundation 项目, 是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB ...
分类：
其他好文 时间：
2020-03-27 11:15:08
阅读次数：
64
阅读 817 维基百科中对伪共享的定义如下： In computer science, false sharing is a performance-degrading usage pattern that can arise in systems with distributed, coheren ...
分类：
编程语言 时间：
2020-03-26 19:58:52
阅读次数：
92
一、认识etcd 1.1 etcd 概念 从哪里说起呢？官网第一个页面，有那么一句话： "A distributed, reliable key-value store for the most critical data of a distributed system" 即 etcd 是一个分布式 ...
分类：
其他好文 时间：
2020-03-23 18:56:52
阅读次数：
132
HDFS写数据流程 1.客户端通过Distributed FileSystem模块向NameNode请求上传文件，NameNode检查目标文件是否已经存在，父目录是否存在； 2.NameNode返回是否可以上传文件； 3.客户端请求一个block上传到指定的那个DataNode服务器上； 4.Nam ...
分类：
其他好文 时间：
2020-03-20 19:52:48
阅读次数：
56
在配置和使用SharPoint Farm的分布式缓存时，首先需要检查服务器上各参数运行正常，然后在进行cache cluster的配置。下面是各检查步骤： 一、 检查服务器场中需要启用Distributed Cache服务的每台服务器上的注册表中的AppFabric注册表配置信息，注册表路径："HK... ...
分类：
其他好文 时间：
2020-03-13 13:06:22
阅读次数：
127
官网的介绍是这样的： Docker is an open platform for developers and sysadmins to build, ship, and run distributed applications…. 其实看完这句话还是不明白究竟是啥的，下面就慢慢解释。不过长话短说 ...
分类：
其他好文 时间：
2020-03-11 19:27:47
阅读次数：
42
