Netty-12-handler调用机制

Netty-12-handler调用机制

前言

  • netty的组件设计:Netty的主要组件有Channel、EventLoop、ChannelFuture、ChannelHandler、ChannelPipe
  • 我们先来复习一下ChannelHandlerChannelPipeline的关系。示例图如下:我们可以将pipeline理解为一个双向链表,ChannelHandlerContext看作链表中的一个节点,ChannelHandler则为每个节点中保存的一个属性对象。

mark

  • ChannelHandler充当了处理入站和出站数据的应用程序逻辑的容器。
    • 例如,实现ChannelInboundHandler接口(或ChannelInboundHandlerAdapter),你就可以接收入站事件和数据,这些数据会被业务逻辑处理。
    • 要给客户端发送响应时,也可以从ChannelInboundHandler冲刷数据。业务逻辑通常写在一个或者多个ChannelInboundHandler中。
  • ChannelPipeline提供了ChannelHandler链的容器。
    • 如果事件的运动方向是从客户端到服务端的,那么我们称这些事件为出站的,即客户端发送给服务端的数据会通过pipeline中的一系列ChannelOutboundHandler,被这些Handler处理
    • 反之则称为入站的

下面,来看看我们常用的Handler的关系图:Inbound处理入站,Outbound处理出站

mark

一般来说,在我们接收数据时将数据解码后,就进行业务的相关处理,所以上图的入站的常用类更多(服务端到客户端)在数据出站时(客户端到服务端),一般我们只需要将数据编码后直接发出。

1. Handler 链式调用

  • Pipeline中的Handler可以当作一个双向链表。

  • 但是Handler却又存在着入站和出站之分。那么Netty是如何将两种类型的Handler保存在一个链表中,却又能够入站的时候调用InboundHandler,出栈的时候调用OutBoundHandler

  • 看下图,黄色的表示入站,以及入站的Handler,绿色的表示出站,以及出站的Handler

mark

1
2
3
4
5
6
7
8
@Override
protected void initChannel(SocketChannel ch) throws Exception {
ChannelPipeline pipeline = ch.pipeline();
pipeline.addLast(new LongToByteEncoder()); //out
pipeline.addLast(new ByteToLongDecoder()); //in
pipeline.addLast(new OutBoundHandler()); //out
pipeline.addLast(new InBoundHandler()); //in
}

请求处理流程

  • 当一个请求来了的时候,首先会将请求发给pipeline中位于链表首部的Handler
  • 首先由队列第一个handler 进行处理,如果接受类型不匹配,那么跳过,直接转发给下一个handler 进行处理
  • 如果需要返回数据,我们就调用writeAndFlush方法,这个方法可不简单,当他一被调用,就会触发出站请求,然后就由当前所在的handler 节点往回调用

通过上面的描述,我们可以总结添加Handler的以下节点总结:

  • 调用InboundHandler的顺序和添加的顺序是一致的。
  • 调用OutboundHandler的顺序和添加它的顺序是相反的。
  • 链表的末尾不能有 OutHandler,因为如果最后是 OutHandler的话,当他前面的 Inhandler 处理完数据返回消息调用writeAndflush 方法后,它就直接在前面进行反向调用了。那么就无法调用到这个 OutHandler
  • 所以,平常会把 OutHandler写在前面,InHandler 一般放在链表的末尾
  • InHandler 一旦进行了 writeAndFlush ,那么只有这个Inhandler 之前添加的 Outhandler 才能正确的处理数据

2. Handler 编解码器

  • Netty发送或者接受一个消息的时候,就将会发生一次数据转换。入站消息会被解码:从字节转换为另一种格式(比如java对象);如果是出站消息,它会被编码成字节。

  • Netty提供一系列实用的编解码器,他们都实现了ChannelInboundHadnler或者ChannelOutboundHandler接口。在这些类中,channelRead方法已经被重写了

  • 以入站为例,对于每个从入站Channel读取的消息,这个方法会被调用。随后,它将调用由解码器所提供的decode()方法进行解码,并将已经解码的字节转发给ChannelPipeline中的下一个ChannelInboundHandler

2.1 解码器-ByteToMessageDecoder

  • 由于不可能知道远程节点是否会一次性发送一个完整的信息,tcp有可能出现粘包拆包的问题,这个类会对入站数据进行缓冲,直到它准备好被处理。

下面是段示例代码:

1
2
3
4
5
6
7
8
public class ToIntegerDecoder extends ByteToMessageDecoder {
@Override
protected void decode(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
if (in.readableBytes() >= 4) {
out.add(in.readInt());
}
}
}

这个例子中

  1. 每次入站从ByteBuf中读取4字节,将其解码为一个int
  2. 然后将它添加到下一个List中。当没有更多元素可以被添加到该List中时,它的内容将会被发送给下一个ChannelInboundHandler
  3. int在被添加到List中时,会被自动装箱为Integer

在调用readInt()方法前必须验证所输入的ByteBuf是否具有足够的数据

mark

2.2 解码器 - ReplayingDecoder

  • public abstract class ReplayingDecoder<S> extends ByteToMessageDecoder{ }
  • ReplayingDecoder扩展了ByteToMessageDecoder类,使用这个类,我们不必调用readableBytes()方法。参数S指定了用户状态管理的类型,其中Void代表不需要状态管理
  • 下面是代码示例:这段代码起到了上面ByteToMessageDecoder一样的作用
1
2
3
4
5
6
public class ByteToLongDecoder2 extends ReplayingDecoder<Void> {
@Override
protected void decode(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
out.add(in.readLong());
}
}
  • ReplayingDecoder使用方便,但它也有一些局限性:
    • 并不是所有的 ByteBuf 操作都被支持,如果调用了一个不被支持的方法,将会抛出一个 UnsupportedOperationException
    • ReplayingDecoder 在某些情况下可能稍慢于 ByteToMessageDecoder,例如网络缓慢并且消息格式复杂时,消息会被拆成了多个碎片,速度变慢

其他的解码器

  • LineBasedFrameDecoder:这个类在Netty内部也有使用,它使用行尾控制字符(\n或者\r\n)作为分隔符来解析数据。
  • DelimiterBasedFrameDecoder:使用自定义的特殊字符作为消息的分隔符。
  • HttpObjectDecoder:一个HTTP数据的解码器
  • LengthFieldBasedFrameDecoder:通过指定长度来标识整包消息,这样就可以自动的处理黏包和半包消息。

3. 简单实例

实例要求:

  • 使用自定义的编码器和解码器来说明Netty的handler 调用机制
  • 客户端发送long -> 服务器
  • 服务端发送long-> 客户端

mark

注意 : 这里只展示,Handler相应的代码和添加Handler的关键代码。

  1. Decoder
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
public class ByteToLongDecoder extends ByteToMessageDecoder {
/**
* decode 方法会根据接收到的数据,被调用多次,知道确定没有新的元素被添加到list,或者是ByteBuf 没有更多的可读字节为止
* 如果 list out不为空,就会将list的内容传递给下一个 Handler 进行处理,该处理器的方法也会被调用多次。
* @param ctx 上下文对象
* @param in 入栈的 ByteBuf
* @param out list集合,将解码后的数据传给下一个Handler
* @throws Exception
*/
@Override
protected void decode(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
//因为long为8个字节,所以需要8个字节才能读取成一个long类型的数据
System.out.println("ByteToLongDecoder:入栈数据被解码");
if (in.readableBytes() >= 8){
out.add(in.readLong());
}
}
}
  1. Encoder
1
2
3
4
5
6
7
public class LongToByteEncoder extends MessageToByteEncoder<Long> {
@Override
protected void encode(ChannelHandlerContext ctx, Long msg, ByteBuf out) throws Exception {
System.out.println("LongToByteEncoder: 出栈数据,msg = " + msg);
out.writeLong(msg);
}
}
  1. 服务器端添加Handler
1
2
3
4
5
6
7
@Override
protected void initChannel(SocketChannel ch) throws Exception {
ChannelPipeline pipeline = ch.pipeline();
pipeline.addLast(new LongToByteEncoder()); //编码器,出站
pipeline.addLast(new ByteToLongDecoder()); //解码器,入站
pipeline.addLast(new ServerInBoundHandler()); //业务处理,入站
}
  1. 客户端添加Handler
1
2
3
4
5
6
7
@Override
protected void initChannel(SocketChannel ch) throws Exception {
ChannelPipeline pipeline = ch.pipeline();
pipeline.addLast(new LongToByteEncoder()); //编码器,出站
pipeline.addLast(new ByteToLongDecoder()); //解码器,入站
pipeline.addLast(new ClientInBoundHandler()); //业务处理,入站。
}

注意:

  • 这里当客户端和服务端接收消息的时候
    • 首先会调用入站的解码器,然后进行业务的处理
    • 然后在调用出站的解码解码器再返回消息
  • 后面可以在业务处理类中,增加发送消息的代码,此处省略。

4. Netty整合 log4j

  1. 添加依赖
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
<dependency>
<groupId>log4j</groupId>
<artifactId>log4j</artifactId>
<version>1.2.17</version>
</dependency>
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>slf4j-api</artifactId>
<version>1.7.25</version>
</dependency>
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>slf4j-log4j12</artifactId>
<version>1.7.25</version>
<scope>test</scope>
</dependency>
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>slf4j-simple</artifactId>
<version>1.7.25</version>
<scope>test</scope>
</dependency>
  1. 添加配置文件

resource目录下新建log4j.properties即可

1
2
3
4
log5j.rootLogger=DEBUG, stdout
log4j.appender.stdout=org.apache.log4j.ConsoleAppender
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
log4j.appender.stdout.layout.ConversionPattern=[%p] %C{1} - %m%n

本文档整理自 尚硅谷韩顺平Netty 相关课程。

参考博客 : https://dongzl.github.io/netty-handbook/#/README

打赏
  • 版权声明: 本博客所有文章除特别声明外,均采用 Apache License 2.0 许可协议。转载请注明出处!
  • © 2019-2022 Zhuuu
  • PV: UV:

请我喝杯咖啡吧~

支付宝
微信