Netty简介

本文转载自本人个人博客CSDN

1.简介

在本文中,我们将介绍Netty - 一个异步事件驱动的网络应用程序框架。

Netty的主要目标是构建基于NIO(或可能是NIO.2)的高性能协议服务器,以及使网络和业务逻辑组件分离和松耦合。它可以实现广泛使用的协议,例如HTTP或你自己的特定协议。

2.核心概念

Netty是一个非阻塞框架。与阻塞IO相比具有高吞吐量。了解非阻塞IO对于理解Netty的核心组件及其关系至关重要。

2.1 Channel

Channel是Java NIO的基础。它代表一个能够执行诸如读写之类的IO操作的开放式连接。

2.2 Future

Netty中Channel上的每个IO操作都是非阻塞的。

这意味着在调用后立即返回每个操作。标准Java库中有一个Future接口,但它对Netty来说并不方便 —— 我们只能询问Future有关操作的完成情况,或者阻塞当前线程直到操作完成。

这就是Netty拥有自己的ChannelFuture接口的原因。我们可以将回调传递给ChannelFuture,它将在操作完成时调用。

2.3 Events和Handler

Netty使用事件驱动的应用程序范式,因此数据处理的管道是通过处理程序的一系列事件。事件和处理程序可以与入站和出站数据流相关。入站事件可以是以下内容:

  • Channel激活和停用
  • 读取操作事件
  • Exception事件
  • 用户事件

出站事件更简单,通常与打开/关闭连接和写入/刷新数据有关。

Netty应用程序包含几个网络和应用程序逻辑事件及其handler。Channnel事件处理程序的基接口是ChannelHandler及其祖先ChannelOutboundHandler和ChannelInboundHandler。

Netty提供了一个庞大的ChannelHandler实现层次结构。值得注意的是只是空实现的适配器,例如ChannelInboundHandlerAdapter和ChannelOutboundHandlerAdapter。当我们只需要处理所有事件的一部分时,我们可以扩展这些适配器。

此外,还有许多特定协议的实现,例如HTTP,例如HttpRequestDecoder,HttpResponseEncoder,HttpObjectAggregator。在Netty的Javadoc中熟悉它们会很好。

2.4 编码器和解码器

在我们使用网络协议时,我们需要执行数据序列化和反序列化。为此,Netty 为解码器引入了ChannelInboundHandler的特殊扩展,这些解码器能够解码传入数据。大多数解码器的基类是ByteToMessageDecoder。

为了编码传出的数据,Netty有很多扩展了ChannelOutboundHandler的类,称为编码器。MessageToByteEncoder是大多数编码器实现的基础。我们可以使用编码器和解码器将消息从字节序列转换为Java对象,反之亦然。

3.示例服务器应用程序

3.1 依赖

首先,我们需要在pom.xml中提供Netty依赖:

<dependency>
    <groupId>io.netty</groupId>
    <artifactId>netty-all</artifactId>
    <version>4.1.10.Final</version>
</dependency>

我们可以在Maven Central上找到最新版本。

3.2 数据模型

请求数据类将具有以下结构:

public class RequestData {
    private int intValue;
    private String stringValue;
     
    // standard getters and setters
}

假设服务器接收请求并返回intValue乘以2.Response将只有单个int值:

public class ResponseData {
    private int intValue;
 
    // standard getters and setters
}

3.3 请求解码器

现在我们需要为协议消息创建编码器和解码器。
应该注意的是,Netty使用套接字接收缓冲区,它不是表示队列,而是表示为一堆字节。这意味着当服务器未收到完整消息时,可以调用我们的入站处理程序。
我们必须确保在处理之前收到了完整的消息,并且有很多方法可以做到这一点。
首先,我们可以创建一个临时的ByteBuf并将所有入站字节附加到它,直到我们得到所需的字节数:

public class SimpleProcessingHandler 
  extends ChannelInboundHandlerAdapter {
    private ByteBuf tmp;
 
    @Override
    public void handlerAdded(ChannelHandlerContext ctx) {
        System.out.println("Handler added");
        tmp = ctx.alloc().buffer(4);
    }
 
    @Override
    public void handlerRemoved(ChannelHandlerContext ctx) {
        System.out.println("Handler removed");
        tmp.release();
        tmp = null;
    }
 
    @Override
    public void channelRead(ChannelHandlerContext ctx, Object msg) {
        ByteBuf m = (ByteBuf) msg;
        tmp.writeBytes(m);
        m.release();
        if (tmp.readableBytes() >= 4) {
            // request processing
            RequestData requestData = new RequestData();
            requestData.setIntValue(tmp.readInt());
            ResponseData responseData = new ResponseData();
            responseData.setIntValue(requestData.getIntValue() * 2);
            ChannelFuture future = ctx.writeAndFlush(responseData);
            future.addListener(ChannelFutureListener.CLOSE);
        }
    }
}

上面显示的示例看起来有点奇怪,但有助于我们了解Netty的工作原理。我们的处理程序的每个方法在其相应的事件发生时被调用。因此,我们在添加处理程序时初始化缓冲区,在接收新字节时填充数据,并在获取足够数据时开始处理它。

我们故意不使用stringValue —— 以这种方式解码会不必要地复杂。这就是为什么Netty提供有用的解码器类,它们是ChannelInboundHandler的实现:ByteToMessageDecoder和ReplayingDecoder 。

如上所述,我们可以使用Netty创建一个Channel处理管道。所以我们可以将解码器作为第一个处理程序,处理逻辑处理程序可以在它之后。

RequestData的解码器如下所示:

public class RequestDecoder extends ReplayingDecoder<RequestData> {
 
    private final Charset charset = Charset.forName("UTF-8");
 
    @Override
    protected void decode(ChannelHandlerContext ctx, 
      ByteBuf in, List<Object> out) throws Exception {
  
        RequestData data = new RequestData();
        data.setIntValue(in.readInt());
        int strLen = in.readInt();
        data.setStringValue(
          in.readCharSequence(strLen, charset).toString());
        out.add(data);
    }
}

这种解码器的想法非常简单。它使用ByteBuf的实现,当缓冲区中没有足够的数据用于读取操作时,它会抛出异常。

当捕获到异常时,缓冲区将重绕到开头,解码器将等待新的数据部分。解码执行后,当out列表不为空时,解码停止。

3.4 响应编码器

除解码RequestData外,我们还需要对消息进行编码。此操作更简单,因为在写操作发生时我们有完整的消息数据。

我们可以在主处理程序中将数据写入Channel,或者我们可以分离逻辑并创建一个扩展MessageToByteEncoder的处理程序,它将捕获写入ResponseData操作:

public class ResponseDataEncoder 
  extends MessageToByteEncoder<ResponseData> {
 
    @Override
    protected void encode(ChannelHandlerContext ctx, 
      ResponseData msg, ByteBuf out) throws Exception {
        out.writeInt(msg.getIntValue());
    }
}

3.5 请求处理

由于我们在单独的处理程序中执行解码和编码,我们需要更改ProcessingHandler:

public class ProcessingHandler extends ChannelInboundHandlerAdapter {
 
    @Override
    public void channelRead(ChannelHandlerContext ctx, Object msg) 
      throws Exception {
  
        RequestData requestData = (RequestData) msg;
        ResponseData responseData = new ResponseData();
        responseData.setIntValue(requestData.getIntValue() * 2);
        ChannelFuture future = ctx.writeAndFlush(responseData);
        future.addListener(ChannelFutureListener.CLOSE);
        System.out.println(requestData);
    }
}

3.6 Server BootStrap

现在让我们把它们放在一起并运行我们的服务器:

public class NettyServer {
 
    private int port;
 
    // constructor
 
    public static void main(String[] args) throws Exception {
  
        int port = args.length > 0
          ? Integer.parseInt(args[0]);
          : 8080;
  
        new NettyServer(port).run();
    }
 
    public void run() throws Exception {
        EventLoopGroup bossGroup = new NioEventLoopGroup();
        EventLoopGroup workerGroup = new NioEventLoopGroup();
        try {
            ServerBootstrap b = new ServerBootstrap();
            b.group(bossGroup, workerGroup)
              .channel(NioServerSocketChannel.class)
              .childHandler(new ChannelInitializer<SocketChannel>() {
                @Override
                public void initChannel(SocketChannel ch) 
                  throws Exception {
                    ch.pipeline().addLast(new RequestDecoder(), 
                      new ResponseDataEncoder(), 
                      new ProcessingHandler());
                }
            }).option(ChannelOption.SO_BACKLOG, 128)
              .childOption(ChannelOption.SO_KEEPALIVE, true);
 
            ChannelFuture f = b.bind(port).sync();
            f.channel().closeFuture().sync();
        } finally {
            workerGroup.shutdownGracefully();
            bossGroup.shutdownGracefully();
        }
    }
}

上面的ServerBootStrap示例中使用的类的详细信息可以在它们的Javadoc中找到。最有趣的部分是这一行:

ch.pipeline().addLast(
  new RequestDecoder(), 
  new ResponseDataEncoder(), 
  new ProcessingHandler());

在这里,我们定义入站和出站处理程序,它们将以正确的顺序处理请求和输出。

4. 客户端应用

客户端应该执行反向编码和解码,因此我们需要一个RequestDataEncoder和ResponseDataDecoder:

public class RequestDataEncoder 
  extends MessageToByteEncoder<RequestData> {
 
    private final Charset charset = Charset.forName("UTF-8");
 
    @Override
    protected void encode(ChannelHandlerContext ctx, 
      RequestData msg, ByteBuf out) throws Exception {
  
        out.writeInt(msg.getIntValue());
        out.writeInt(msg.getStringValue().length());
        out.writeCharSequence(msg.getStringValue(), charset);
    }
}

public class ResponseDataDecoder 
  extends ReplayingDecoder<ResponseData> {
 
    @Override
    protected void decode(ChannelHandlerContext ctx, 
      ByteBuf in, List<Object> out) throws Exception {
  
        ResponseData data = new ResponseData();
        data.setIntValue(in.readInt());
        out.add(data);
    }
}

此外,我们需要定义一个ClientHandler,它将发送请求并从服务器接收响应:

public class ClientHandler extends ChannelInboundHandlerAdapter {
  
    @Override
    public void channelActive(ChannelHandlerContext ctx) 
      throws Exception {
  
        RequestData msg = new RequestData();
        msg.setIntValue(123);
        msg.setStringValue(
          "all work and no play makes jack a dull boy");
        ChannelFuture future = ctx.writeAndFlush(msg);
    }
 
    @Override
    public void channelRead(ChannelHandlerContext ctx, Object msg) 
      throws Exception {
        System.out.println((ResponseData)msg);
        ctx.close();
    }
}

现在让我们bootstrap客户端:

public class NettyClient {
    public static void main(String[] args) throws Exception {
  
        String host = "localhost";
        int port = 8080;
        EventLoopGroup workerGroup = new NioEventLoopGroup();
 
        try {
            Bootstrap b = new Bootstrap();
            b.group(workerGroup);
            b.channel(NioSocketChannel.class);
            b.option(ChannelOption.SO_KEEPALIVE, true);
            b.handler(new ChannelInitializer<SocketChannel>() {
  
                @Override
                public void initChannel(SocketChannel ch) 
                  throws Exception {
                    ch.pipeline().addLast(new RequestDataEncoder(), 
                      new ResponseDataDecoder(), new ClientHandler());
                }
            });
 
            ChannelFuture f = b.connect(host, port).sync();
 
            f.channel().closeFuture().sync();
        } finally {
            workerGroup.shutdownGracefully();
        }
    }
}

我们可以看到,服务器引导有许多共同点。

现在我们可以运行客户端的main方法并查看控制台输出。正如预期的那样,我们得到的ResponseData的intValue等于246。

总结

在本文中,我们对Netty进行了一个简单的介绍。我们展示它的Channel和ChannelHandler等核心组件。此外,我们做了一个简单的非阻塞协议服务器和客户端。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,117评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,328评论 1 293
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,839评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,007评论 0 206
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,384评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,629评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,880评论 2 313
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,593评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,313评论 1 243
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,575评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,066评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,392评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,052评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,082评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,844评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,662评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,575评论 2 270

推荐阅读更多精彩内容