1、Spark组件之间使用RPC机制进行通信。RPC的客户端在本地编写并调用业务接口，接口在本地通过RPC框架的动态代理机制生成一个对应的实现类，在这个实现类中完成soket通信、远程调用等功能的逻辑包装，而在RPC的服务端既编写业务接口也编写了具体的业务实现类，通过RPC框架以接口的方式暴露出来， ...
分类：
其他好文 时间：
2020-02-20 20:17:31
阅读次数：
57
在本版本中引入了SPI机制，关于Java的SPI机制与Dubbo的SPI机制在以前的文章中介绍过。 传送门： "Dubbo的SPI机制与JDK机制的不同及原理分析" 因为设计的RPC框架是基于Spring的，时常会遇到依赖注入问题。Spring中也有SPI机制，但是它有有个缺点，就是在利用SPI机制 ...
分类：
其他好文 时间：
2020-02-20 00:16:42
阅读次数：
67
在最近一段时间里，通过搜集有关资料加上自己的理解，设计了一款轻量级RPC,起了一个名字 lightWeightRPC 。它拥有一个RPC常见的基本功能。主要功能和特点如下： 利用Spring实现依赖注入与参数配置 利用Netty来实现客户端与服务端的远程通信 利用Hessian来实现序列化 设置Zo ...
分类：
其他好文 时间：
2020-02-20 00:13:39
阅读次数：
83
在上一个版本中利用netty实现了简单的一对一的RPC，需要手动设置服务地址，限制性较大。 在本文中，利用zookeeper作为服务注册中心，在服务端启动时将本地的服务信息注册到zookeeper中，当客户端发起远程服务调用时，先从zookeeper中获取该服务的地址，然后根据获得的这个地址来利用n ...
分类：
其他好文 时间：
2020-02-19 23:54:43
阅读次数：
114
什么是RPC RPC (Remote Procedure Call Protocol), 远程过程调用，通俗的解释就是：客户端在不知道调用细节的情况下，调用存在于远程计算机上的某个对象，就像调用本地应用程序中的对象一样，不需要了解底层网络技术的协议。 简单的整体工作流程 请求端发送一个调用的数据包， ...
分类：
其他好文 时间：
2020-02-19 23:52:43
阅读次数：
71
在前两个版本中，每次发起请求一次就新建一个netty的channel连接，如果在高并发情况下就会造成资源的浪费，这时实现 异步请求 就十分重要，当有多个请求线程时，需要设计一个 线程池 来进行管理。除此之外，当前方法过于依赖注册中心，在高并发情况下对注册中心造成了压力；另外如果注册中心出现宕机等情况 ...
分类：
其他好文 时间：
2020-02-19 23:44:01
阅读次数：
58
nfs主机 step1:安装软件 yum y install nfs utils rpcbind step2:配置/etc/exports /data/zookeeper/log 11.0.183.24(ro,sync,no_root_squash) 11.0.183.21(ro,sync,no_r ...
分类：
其他好文 时间：
2020-02-19 18:49:05
阅读次数：
86
1.在管理机生成密钥 2.在 管理机 上下发公钥给 nfs服务端 3.管理机 通过ssh命令连接nfs服务器,如果能实现免密码登陆则ok 4.将ssh登陆主机的信息放入一个文件,当我执行文件时就自动的链接到该主机了..... 5.将从WIndows下复制好的公钥粘贴至跳板机~/.ssh/author ...
分类：
其他好文 时间：
2020-02-19 17:03:18
阅读次数：
123
主要是做了一个，基于Nfs服务的PV，空间分配。和StorageClass自动创建PV.
分类：
其他好文 时间：
2020-02-17 09:18:33
阅读次数：
95
1、关于RPC服务 远程过程调用 (RPC) 的服务：RPC服务拿到NFS的server端的端口号，然后推给NFS的client这个端口号，完成NFS客户端到服务端的连接； （要注意，要启动 NFS 之前，RPC 就要先启动了，否则 NFS 会无法向 RPC 注册。 另外，RPC 若重新启动时，原本 ...
分类：
其他好文 时间：
2020-02-16 17:57:52
阅读次数：
101
