曹工说mini-dubbo（1）--为了实践动态代理，我写了个简单的rpc框架
三国梦回 人气:1
#相关背景及资源：
之前本来一直在写spring源码解析这块，如下，aop部分刚好写完。以前零散看过一些文章，知道rpc调用基本就是使用动态代理，比如rmi，dubbo，feign调用等。自己也就想着试一下，于是有了mini-dubbo这个东西，暂时也不能称为一个框架，因为还不是生产级的，目前只是实现了一部分小功能，也没有监控，也没有xxx，反正就是缺的比较多。
[曹工说Spring Boot源码（22）-- 你说我Spring Aop依赖AspectJ，我依赖它什么了](https://www.cnblogs.com/grey-wolf/p/12418425.html)
我就说下，里面用到的知识点吧，有兴趣的，可以克隆源码下来看看：
1. 动态代理
2. 服务注册和消费，使用redis作为注册中心，其中使用了redisson作为redis客户端，其中涉及到BeanFactoryPostProcessor的使用
3. 因为传输层使用netty和mina，是异步的，但是上层又需要等待结果，所以用到了同步转异步
4. spring的xml解析，bean definition注册，spring 扩展xml 命名空间
5. 自定义的spi的相关知识
6. 分层思想，从dubbo借鉴了其分层，但是mini-dubbo要少几层，因为我暂时不是很清楚dubbo的每一层的具体职责，所以我按我自己理解分的层。上层依赖下层，只通过下层的接口，查找下层接口时，直接在spring容器中查找bean即可，类似于spring mvc的设计。当下层有多个实现时，通过类似spi机制来指定具体要使用的下层实现。
7. 基于第5点，所以本框架非常容易替换各层的实现，只要自己自定义一个spring bean，实现对应的接口，然后在spi文件中指定本实现的类名即可。
8. netty和mina的tcp粘包拆包工作。
# 概要
代码我放在了如下位置：
我介绍下代码的整体结构：
服务端聚合工程比较简单，目前也没时间去仔细弄，包含了如下module：
```xml
../mini-dubbo-api
../mini-dubbo-server
../mini-dubbo-core
../mini-dubbo-common
```
目前的大部分实现，是在客户端，包含了如下module：
```xml
../mini-dubbo-api
../mini-dubbo-client
../mini-dubbo-core
../mini-dubbo-common
../mini-dubbo-registry-layer
../mini-dubbo-cluster-layer
../mini-dubbo-exchange-layer
../mini-dubbo-transport-layer-netty
../mini-dubbo-transport-layer-mina
```
其中，模块间的依赖关系如下：
业务模块，一般只需要依赖mini-dubbo-core模块，mini-dubbo-core主要依赖了如下模块：
为什么这么划分，因为mini-dubbo-core模块，其实主要是完成解析业务模块（比如client）中的xml，根据其xml配置，注册对应的bean到spring 容器中，而具体的bean实现，就是放在各个模块的，比如，xml里配置netty作为传输层实现，那么mini-dubbo-core就得解析为mini-dubbo-transport-layer-netty中的一个实现类作为bean，注册到spring容器，供上层使用。
目前的分层，只是暂时的，后续可能会略有调整。
#一次客户端调用的大体思路
1. 业务module中，配置xml，示例如下：
```xml
providerList, RpcContext rpcContext);
}
```
* exchange层，上层集群层，会替我们选好某一台具体的服务提供者，然后让我们去调用，本层完成同步转异步
```java
public interface ExchangeLayerRpcInvoker {
/**
*
* @param providerHostAndPort 要调用的服务提供者的地址
* @param rpcContext rpc上下文，包含了要调用的参数等
* @return rpc调用的结果
*/
Object invoke(ProviderHostAndPort providerHostAndPort, RpcContext rpcContext);
}
```
* 传输层，本层目前有两个简单实现，netty和mina。
```java
/**
*
* 本层为传输层，上层为exchange层。
* 上层exchange，目前有一个默认实现，主要是完成同步转异步的操作。
* 上层将具体的传输工作交给底层的传输层，比如netty和mina，然后在一个future上等待传输层完成工作
*
* 本层会完成实际的发送工作和接收返回响应的工作
*/
public interface TransportLayerRpcInvoker {
/**
*
* @param providerHostAndPort 要调用的服务提供者的地址
* @param rpcContext rpc上下文，包含了要调用的参数等
* @return rpc调用的结果
*/
Object invoke(ProviderHostAndPort providerHostAndPort, RpcContext rpcContext);
}
```
其中，我们的最上边的动态代理层，只依赖于下层，其中，示例代码如下：
```java
@Override
public Object invoke(Object proxy, Method method, Object[] args) {
// 1.从spring容器中，获取下层的实现bean；如果有多个，则根据spi文件中指定的为准
RegistryLayerRpcInvoker registryLayerRpcInvoker =
SpiServiceLoader.loadService(RegistryLayerRpcInvoker.class);
RpcContext rpcContext = new RpcContext();
rpcContext.setProxy(proxy);
rpcContext.setMethod(method);
rpcContext.setArgs(args);
rpcContext.setServiceName(method.getDeclaringClass().getName());
// 2.调用下层
Object o = registryLayerRpcInvoker.invoke(rpcContext);
return o;
}
```
这里1处，可以看到，我们通过SpiServiceLoader.loadService(RegistryLayerRpcInvoker.class)去获取具体的下层实现，这是我们自定义的一个工具类，其内部实现一会再说。
2处调用下层实现，获取结果。
4. registry，注册中心层的实现
```java
@Service
public class RedisRegistryRpcInvoker implements RegistryLayerRpcInvoker {
@Autowired
private RedisRegistry redisRegistry;
@Override
public Object invoke(RpcContext rpcContext) {
//1.获取集群层实现
ClusterLayerRpcInvoker clusterLayerRpcInvoker = SpiServiceLoader.loadService(ClusterLayerRpcInvoker.class);
//2.从redis中，根据服务名，获取服务提供者列表
List list = redisRegistry.getServiceProviderList(rpcContext.getServiceName());
if (CollectionUtils.isEmpty(list)) {
throw new RuntimeException();
}
//2.调用集群层实现，获取结果
Object o = clusterLayerRpcInvoker.invoke(list, rpcContext);
return o;
}
}
```
5. 集群层实现，本层我也不算懂，模仿dubbo实现了一下。
主要实现了以下两种：
* Failover，出现失败，立即重试其他服务器。可以设置重试次数。
* Failfast，请求失败以后，返回异常结果，不进行重试。
以failover为例：
```java
@Slf4j
@Service
public class FailoverClusterLayerRpcInvoker implements ClusterLayerRpcInvoker {
@Autowired
private LoadBalancePolicy loadBalancePolicy;
@Override
public Object invoke(List providerList, RpcContext rpcContext) {
ExchangeLayerRpcInvoker exchangeLayerRpcInvoker =
SpiServiceLoader.loadService(ExchangeLayerRpcInvoker.class);
int retryTimes = 3;
for (int i = 0; i < retryTimes; i++) {
// 1.根据负载均衡策略，选择1台服务提供者
ProviderHostAndPort providerHostAndPort = loadBalancePolicy.selectOne(providerList);
try {
// 调用下层，获取结果
Object o = exchangeLayerRpcInvoker.invoke(providerHostAndPort, rpcContext);
return o;
} catch (Exception e) {
log.error("fail to invoke {},exception:{},will try another",
providerHostAndPort,e);
// 2.如果调用失败，进入下一次循环
continue;
}
}
throw new RuntimeException("fail times extend");
}
}
```
其中，一共会尝试3次，每次的逻辑：根据负载均衡策略，选择1台去调用；如果有问题，则换一台。
调用下层时，获取了下层的接口：ExchangeLayerRpcInvoker
6. exchange层，这层完成同步转异步的操作，目前只有一个实现：
```java
@Service
public class Sync2AsyncExchangeImpl implements ExchangeLayerRpcInvoker {
public static ConcurrentHashMap> requestId2futureMap =
new ConcurrentHashMap<>();
@Override
public Object invoke(ProviderHostAndPort providerHostAndPort, RpcContext rpcContext) {
String requestId = UUID.randomUUID().toString();
rpcContext.setRequestId(requestId);
rpcContext.setRequestId2futureMap(requestId2futureMap);
CompletableFuture
加载全部内容