主要内容 1. 使用zookeeper原生 API 实现分布式锁2. 分析Curator实现分布式锁的原理3. 实现带注册中心的RPC框架 使用zookeeper原生 API 实现分布式锁 Synchronized或者Lock zookeeper 、redis、数据库 在使用ZooKeeper进行分 ...
分类：
其他好文 时间：
2021-02-16 11:58:30
阅读次数：
0
参数服务器训练基本理论 参数服务器训练是分布式训练领域普遍采用的编程架构，主要解决以下两类问题： 模型参数过大：单机内存空间不足，需要采用分布式存储。 训练数据过多：单机训练太慢，需要加大训练节点,来提高并发训练速度。 如图所示，参数服务器主要包含Server和Worker两个部分，其中Server ...
分类：
其他好文 时间：
2021-02-16 11:42:24
阅读次数：
0
前言 我们以javaweb为例，来搭建一个简单的电商系统，看看这个系统可以如何一步步演变。 该系统具备的功能： 用户模块：用户注册和管理 商品模块：商品展示和管理 交易模块：创建交易和管理 阶段一、单机构建网站 网站的初期，我们经常会在单机上跑我们所有的程序和软件。此时我们使用一个容器，如tomca ...
分类：
Web程序 时间：
2021-02-15 11:40:49
阅读次数：
0
一、概述 1.1、Kafka Streams Kafka Streams。Apache Kafka开源项目的一个组成部分。是一个功能强大，易于使用的库。用于在Kafka上构建高可分布式、拓展性，容错的应用程序。 1.2、Kafka Streams特点 功能强大 高扩展性，弹性，容错 轻量级 轻量级 ...
分类：
其他好文 时间：
2021-02-10 13:05:33
阅读次数：
0
在现代分布式系统中被广泛使用的一个设计模式的例子就是三层系统模式。三层模式对很多类型的系统都是很合适的，可以分散用户处理需求，存储和检索大量数据，如科学研究，银行，电子商务和跨领域的预订系统。 三层系统的架构模式 第一层通常指前端或者客户层，包含访问系统服务所需的功能，通常由人来访问，因此前端包含系 ...
分类：
其他好文 时间：
2021-02-10 12:52:34
阅读次数：
0
原文地址：https://martinfowler.com/articles/patterns-of-distributed-systems/wal.html Write-Ahead log 预写日志 预写日志（WAL，Write-Ahead Log）将每次状态更新抽象为一个命令并追加写入一个日志中 ...
分类：
其他好文 时间：
2021-02-09 12:34:16
阅读次数：
0
什么是认证（Authentication） 通俗地讲就是验证当前用户的身份，证明“你是你自己”（比如：你每天上下班打卡，都需要通过指纹打卡，当你的指纹和系统里录入的指纹相匹配时，就打卡成功） 互联网中的认证： 用户名密码登录 邮箱发送登录链接 手机号接收验证码 只要你能收到邮箱/验证码，就默认你是账 ...
分类：
Web程序 时间：
2021-02-08 12:17:23
阅读次数：
0
前言 近段时间在了解分布式时，经常绕不开一个算法: 一致性哈希算法。于是在了解并实践这个算法后，就有了此文章。 算法间的对比 在分布式分片中，存在着几种算法: 取模，分段，一致性 hash。 取模 分段 一致性哈希 上层是否感知 是 是 否 迁移成本 高 高 低，只涉及相邻节点 单点故障影响 高 高 ...
分类：
编程语言 时间：
2021-02-04 12:15:26
阅读次数：
0
单点上传文件 原先来的单点上传文件就是在同一个系统内上传 graph LR A(图片系统) -->B[图片服务器] C(支付系统) -->D[支付服务器] E(后台系统) -->F[后台服务器] 使用FastDFS分布式文件上传 FastDFS:使用C语音编写的一款分布式文件系统,FastDFS充分 ...
分类：
其他好文 时间：
2021-02-03 10:30:31
阅读次数：
0
Git基本操作命令合集 平时自己敲敲代码，使用Git命令也渐渐多了起来。使用起来的确很方便，今天来分享下Git基本概念和本地代码提交到github上的过程，很简单的，多操作几次就会了。 1|0Git定义 Git 是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。 Git 与常用的 ...
分类：
其他好文 时间：
2021-02-03 10:29:50
阅读次数：
0
