聊聊分布式架构06——[NIO入门]简单的Netty NIO示例

news2024/11/16 1:37:39

目录

Java NIO和Netty NIO比较

Java NIO:

Netty:

Netty NIO中的主要模块

Transport(传输层)

Buffer(缓冲区)

Codec(编解码器)

Handler(处理器)

EventLoop(事件循环)

Bootstrap和Channel(引导和通道)

Future和Promise(异步编程)

Netty示例

服务端时序图

服务端代码

客户端时序图

客户端代码

总结


Java NIO和Netty NIO比较

Java NIO:
  1. 原生Java库: Java NIO是Java标准库的一部分,提供了非阻塞I/O的核心功能。它是Java平台上的底层API,允许开发者直接操作通道、缓冲区和选择器等组件。

  2. 较低级别: Java NIO是相对较低级别的API,需要开发者编写更多的底层代码来处理网络通信和协议。这可以提供更多的控制权,但也增加了开发复杂性。

  3. 多路复用: Java NIO通过选择器(Selector)实现多路复用,允许一个线程管理多个通道。这对于处理大量并发连接非常有用。

  4. 手动管理缓冲区: Java NIO需要开发者手动管理缓冲区,包括分配、读取、写入和释放缓冲区。这可能导致更复杂的代码结构。

  5. 适用场景: Java NIO适用于需要高度自定义的网络协议网络服务器。它在性能和灵活性方面提供了更多的控制权。

Netty:
  1. 高级别框架: Netty是一个基于Java NIO的高级别框架,它封装了底层的NIO细节,提供了更简单和强大的API来处理网络通信。

  2. 事件驱动: Netty是事件驱动的框架,使用事件处理器(Event Handlers)来处理入站和出站事件。这使得编写网络应用程序更加模块化和可维护。

  3. 自动管理缓冲区: Netty自动管理缓冲区,无需开发者手动分配和释放缓冲区。这减轻了内存管理的负担。

  4. 丰富的功能: Netty提供了丰富的功能,包括HTTP、WebSocket、TLS/SSL支持、UDP通信、拆包和粘包处理等。它还支持异步和同步I/O操作。

  5. 社区和生态系统: Netty拥有强大的社区支持和丰富的生态系统,有大量的扩展和插件可用。这使得开发人员可以更快地构建复杂的网络应用。

  6. 适用场景: Netty适用于构建高性能、可扩展、可维护的网络应用程序,特别是在处理协议复杂、并发连接众多的情况下。

为什么选择Netty?

Java NIONetty NIO
API和类库繁杂麻烦,需掌握Selector、Channel、Buffer等封装简单,门槛低
扩展实现需要熟悉多线程和网络编程保证代码质量通过ChannelHandler对框架灵活扩展
可靠性可靠性能力需手动补齐,工作量和难度大预编码、多协议,功能强,性能高
Bug Fixed臭名昭著的epoll bug(selector空轮询,CPU到100%)1.6版本说修复,1.7版本还在,只是调低了触发率稳定,成熟,修复了所有已发现的Java NIO Bug
社区生态/社区活跃,迭代周期短
生存迭代/经历大规模商业应用考验,质量得到验证

基础篇我们使用Java NIO举例演示了简单的RPC通信。代码的行数和步骤确实挺繁琐,不如来看看Netty 的操作,是骡子是马牵出来溜溜先,就当诸君饭后消个食。

Netty NIO中的主要模块

Netty是一个强大的网络编程框架,它由多个主要模块组成,每个模块负责不同的功能。以下是Netty中的一些主要模块:

  1. Transport(传输层)
    • NIO: 这个模块实现了基于Java NIO的传输层,提供了非阻塞的网络通信功能。它包括NioEventLoopGroupNioServerSocketChannelNioSocketChannel等类,用于创建和管理NIO通道。

  2. Buffer(缓冲区)
    • Java NIO中的ByteBuffer局限性:

      • ByteBuffer长度固定,不能动态伸缩和扩展,编码对象时容易引起索引越界异常

      • ByteBuffer只有一个标识位置的指针position,需要手工调用flip()和rewind(),不方便

      • ByteBuffer的API功能有限,需要使用者自己编程实现一些高级和实用的特性

    • 为了弥补这些不足,Netty NIO提供了自己的实现——ByteBuf:

      Netty提供了高性能的缓冲区实现ByteBuf,用于处理数据的读取和写入。ByteBuf提供了直接和间接缓冲区,并支持池化,以减少内存分配和回收的开销。

  3. Codec(编解码器)
    • 编码器和解码器: 这个模块包括一系列编解码器,用于将数据序列化和反序列化为字节,以便在网络中传输。Netty提供了JSON、Protobuf、HTTP、WebSocket等多种编解码器。

  4. Handler(处理器)
    • ChannelHandler: ChannelHandler是Netty中的核心概念,用于处理事件和数据。它可以自定义,用于构建处理链。Netty提供了各种内置的ChannelHandler,如SimpleChannelInboundHandlerChannelDuplexHandler等。

  5. EventLoop(事件循环)
    • EventLoopGroup: 这个模块包括了EventLoopGroupEventLoop,用于实现事件循环机制。EventLoopGroup管理一组EventLoop,每个EventLoop负责处理一组通道上的事件。事件循环是Netty实现异步和事件驱动的关键。

  6. Bootstrap和Channel(引导和通道)
    • ServerBootstrap和Bootstrap: 这两个类用于引导Netty应用程序的启动。ServerBootstrap用于启动服务器端,而Bootstrap用于启动客户端。

    • Channel和ChannelPipeline: Channel表示通道,它代表了一个网络连接。在Channel接口层,采用Fade模式进行统一封装。ChannelPipeline是处理链,包含一系列ChannelHandler,用于处理事件和数据。

  7. Future和Promise(异步编程)
    • Future: Netty使用Future来表示异步操作的结果,允许开发者异步地等待操作完成。

    • Promise: PromiseFuture的扩展,允许开发者设置操作的结果,使得异步编程更加方便。

Netty示例

服务端时序图

服务端代码
/**
 * Netty Server
 * 开始:需要绑定端口用于启动
 * 1.创建线程组bossGroup用于处理客户端连接
 * 2.创建线程组workGroup用于socket网络读写
 * 3.创建Bootstrap服务启动辅助类,类似serverSocketChannel
 * 4.链式编程,构造线程组、serverChannel、options、channelHandle
 * 5.ChannelHandle继承自ChannelInitializer<SocketChannel>进行功能扩展
 * 结束:优雅退出关闭资源
 */
public class Server {
    public static void main(String[] args) {
        new Server().bind(8088);
    }
​
    /**
     * 绑定端口用于启动
     * @param port 服务端口
     */
    public void bind(int port) {
        // 1.创建线程组bossGroup处理客户端连接
        EventLoopGroup bossGroup = new NioEventLoopGroup();
        // 2.创建线程组workGroup用于socket网络读写
        EventLoopGroup workerGroup = new NioEventLoopGroup();
        try {
            // 3.创建Bootstrap服务启动辅助类,类似serverSocketChannel
            ServerBootstrap server = new ServerBootstrap();
            // 4.链式编程,构造线程组、serverChannel、options、channelHandle
            server.group(bossGroup, workerGroup)
                    .channel(NioServerSocketChannel.class)
                    .option(ChannelOption.SO_BACKLOG, 1024)
                    .childHandler(new ChildChannelHandler());
            System.out.println("server start on port:" + port);
​
            // 绑定端口异步调用连接客户端,同步阻塞等待(连接结果)连接成功
            ChannelFuture channelFuture = server.bind(port).sync();
​
            // 异步调用close关闭链路,同步阻塞等待(关闭结果)关闭成功后退出main函数
            channelFuture.channel().closeFuture().sync();
        } catch (InterruptedException e) {
            e.printStackTrace();
        } finally {
            // 优雅退出关闭资源
            bossGroup.shutdownGracefully();
            workerGroup.shutdownGracefully();
        }
    }
​
    /**
     * 5.ChannelHandle继承自ChannelInitializer<SocketChannel>进行功能扩展
     */
    private class ChildChannelHandler extends ChannelInitializer<SocketChannel> {
​
        @Override
        protected void initChannel(SocketChannel socketChannel) throws Exception {
            socketChannel.pipeline().addLast(new ServerHandler());
        }
    }
​
    private class ServerHandler extends ChannelHandlerAdapter {
        @Override
        public void channelRead(ChannelHandlerContext ctx, Object msg) throws Exception {
            ByteBuf buf = (ByteBuf) msg;
            byte[] req = new byte[buf.readableBytes()]; // 读取缓冲区可读取长度
            buf.readBytes(req);
            String body = new String(req, "UTF-8");
            System.out.println("Server receive msg:" + body);
            String currTime = "query time".equalsIgnoreCase(body) ? new Date(System.currentTimeMillis()).toString() : "error code";
            ByteBuf resp = Unpooled.copiedBuffer(currTime.getBytes());
            ctx.write(resp);
        }
​
        @Override
        public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
            ctx.close();
        }
​
        @Override
        public void channelReadComplete(ChannelHandlerContext ctx) throws Exception {
            ctx.flush(); // 将发送缓冲数组中的消息通过flush()写入socketChannel发送,避免了频繁调用selector进行发送
        }
    }
}
客户端时序图

客户端代码
/**
 * 开始:连接服务端ip:port
 * 1.创建EventLoopGroup管理socket读取
 * 2.创建客户端辅助类Bootstrap,类似于之前的SocketChannel
 * 3.链式编程,构造客户端流程client、option、handler
 * 4.handler使用的是ChannelInitializer<SocketChannel>
 * 结束:优雅的关闭资源
 */
public class Client {
    public static void main(String[] args) {
        new Client().connect("localhost", 8088);
    }
​
    /**
     * 连接服务端ip:port
     * @param ip 服务端地址
     * @param port 服务端端口
     */
    public void connect(String ip, int port) {
        // 1.创建EventLoopGroup管理socket读取
        EventLoopGroup group =new NioEventLoopGroup();
        try {
            // 2.创建客户端辅助类Bootstrap,类似于之前的SocketChannel
            Bootstrap client = new Bootstrap();
            // 3.链式编程,构造客户端流程client、option、handler
            client.group(group).channel(NioSocketChannel.class)
                    .option(ChannelOption.TCP_NODELAY, true)
                    .handler(new ChannelInitializer<SocketChannel>() {
                        @Override
                        protected void initChannel(SocketChannel socketChannel) throws Exception {
                            socketChannel.pipeline().addLast(new ClientHandler());
                        }
                    });
​
            // 发起异步连接操作
            ChannelFuture channelFuture = client.connect(ip, port).sync();
​
            // 等待服务端链路关闭
            channelFuture.channel().closeFuture().sync();
        } catch (InterruptedException e) {
            e.printStackTrace();
        } finally {
            // 优雅退出,释放资源
            group.shutdownGracefully();
        }
    }
​
    /**
     * 4.handler使用的是ChannelInitializer<SocketChannel>
     */
    public class ClientHandler extends ChannelHandlerAdapter {
        @Override
        public void channelRead(ChannelHandlerContext ctx, Object msg) throws Exception {
            ByteBuf buf = (ByteBuf) msg;
            byte[] req = new byte[buf.readableBytes()];
            buf.readBytes(req);
            String body = new String(req, "UTF-8");
            System.out.println("client receive server send:" + body);
            channelActive(ctx);
        }
​
        @Override
        public void channelActive(ChannelHandlerContext ctx) throws Exception {
            Scanner scanner = new Scanner(System.in);
            System.out.println("请输入");
            String clientIn = scanner.nextLine();
            ByteBuf firstMessage = Unpooled.buffer(clientIn.getBytes().length);
            firstMessage.writeBytes(clientIn.getBytes());
            System.out.println("client send:" + clientIn);
            ctx.writeAndFlush(firstMessage);
        }
        @Override
        public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
            ctx.close();
        }
    }
}

运行结果:

总结

不难看出,不管是流程步骤还是实现功能的代码行数,Netty NIO都是优于Java原生NIO的。到此,一个简单的NIO入门示例完成。

资料参考:《Netty权威指南》

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1075218.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

王杰C++day3

#include <iostream>using namespace std;class Per { private:string name;int age;int *height;int *weight; public://有参构造函数Per(string n,int a,int h,int w):name(n),age(a),height(new int(h)),weight(new int(w)){cout << "p有参" <<…

Godot2D角色导航-自动寻路教程(角色随鼠标移动)

文章目录 运行结果2D导航概述开始前的准备2D导航创建导航网格创建角色 其他文章 运行结果 2D导航概述 Godot为2D和3D游戏提供了多个对象、类和服务器&#xff0c;以便于基于网格或基于网格的导航和路径查找。 说到导航&#xff0c;就得说一下导航网格&#xff0c;导航网格定义…

miRNA测序数据生信分析——第一讲,总结概述

miRNA测序数据生信分析——第一讲&#xff0c;总结概述 miRNA测序数据生信分析——第一讲&#xff0c;总结概述1. miRNA提取建库测序2. miRNA的生物学功能3. miRNA的生信分析模块3.1 miRNA鉴定3.2 miRNA表达量计算和差异表达miRNA分析3.3 miRNA靶基因注释3.4 另一个miRNA生信分…

Bridge

Bridge 动机 由于某些类型的固有的实现逻辑&#xff0c;使得它们具有两个变化的维度&#xff0c;乃至多个纬度的变化如何应对这种“多维度的变化”&#xff1f;如何利用面向对象技术来使得类型可以轻松地沿着两个乃至多个方向变化&#xff0c;而不引入额外的复杂度&#xff1…

UML图 - 类图(Class Diagram)

类图是描述系统中的类&#xff0c;以及各个类之间的关系的静态视图。能够让我们在正确编写代码以前对系统有一个全面的认识。类图是一种模型类型&#xff0c;确切的说&#xff0c;是一种静态模型类型。类图表示类、接口和它们之间的协作关系。 类图的结构 类一般由三部分组成&…

很烦的Node报错积累

目录 1. 卡在sill idealTree buildDeps2、Node Sass老是安装不上的问题3、unable to resolve dependency tree4、nvm相关命令5、设置淘宝镜像等基操5.1 镜像 5.2 npm清理缓存6、Browserslist: caniuse-lite is outdated loader 1. 卡在sill idealTree buildDeps 参考&#xf…

【数据库系统概论】SQL是什么?它有什么特点?

SQL是什么SQL的特点SQL的基本概念感谢 &#x1f496; SQL是什么 SQL&#xff08;Structured Query Language&#xff09;即结构化查询语句&#xff0c;是关系数据库的标准语言。它的功能不仅仅是查询&#xff0c;而是包括数据库模式创建、数据库数据的插入和修改、数据库安全性…

【iOS】Fastlane一键打包上传到TestFlight、蒲公英

Fastlane一键打包上传到TestFlight、蒲公英 前言一、准备二、探索一、Fastlane配置1、Fastlane安装2、Fastlane更新3、Fastlane卸载4、查看Fastlane版本5、查看Fastlane位置6、Fastlane初始化 二、Fastlane安装蒲公英插件三、Fastlane文件编辑1、Gemfile文件2、Appfile文件3、F…

虹科方案丨自动驾驶多传感器数据融合方法

文章来源&#xff1a;雅名特自动驾驶 点此阅读原文&#xff1a;https://mp.weixin.qq.com/s/QsPMWZDGZaPdEx47L2VmeA 近年来&#xff0c;深度学习技术在涉及高维非结构化数据领域展现出了最先进的性能&#xff0c;如计算机视觉、语音、自然语言处理等方面&#xff0c;并且开始涉…

Vue3中reactive, onMounted, ref,toRaw,conmpted 使用方法

import { reactive, onMounted, ref,toRaw,conmpted } from vue; vue3中 reactive &#xff0c;ref &#xff0c; toRaw&#xff0c;watch&#xff0c;conmpted 用法 toRaw 返回原响应式对象 用法&#xff1a; const rowList toRaw(row) reactive:ref: ref和reactive都是V…

Microsoft Office 2019 for Mac:提升工作效率的必备办公软件套装

在现代社会&#xff0c;办公软件已经成为我们工作生活中不可或缺的一部分。作为全球领先的办公软件品牌&#xff0c;Microsoft Office 2019 for Mac&#xff08;Office全家桶&#xff09;凭借其强大的功能和稳定性&#xff0c;成为了无数Mac用户提升工作效率的首选。 首先&…

教资成绩什么时候出来 2023教资笔试成绩查询时间介绍

上半年教资笔试成绩查询开放时期为2023年4月13日&#xff0c;面试成绩查询开放时间在6月14日。而下半年教资笔试成绩查询开放时间为2023年11月8日&#xff0c;2023下半年教资面试时间是2023年12月9日-10日。 值得一提的是如果考生对成绩有异议的话&#xff0c;还可以在成绩公布…

Python操作Hive数据仓库

Python连接Hive 1、Python如何连接Hive&#xff1f;2、Python连接Hive数据仓库 1、Python如何连接Hive&#xff1f; Python连接Hive需要使用Impala查询引擎 由于Hadoop集群节点间使用RPC通信&#xff0c;所以需要配置Thrift依赖环境 Thrift是一个轻量级、跨语言的RPC框架&…

LeetCode-496-下一个更大元素

题目描述&#xff1a; 题目链接&#xff1a;LeetCode-496-下一个更大元素 解题思路&#xff1a; 方法一&#xff1a;暴力 方法二&#xff1a;单调栈 方法一代码实现&#xff1a; class Solution {public int[] nextGreaterElement(int[] nums1, int[] nums2) {// 最笨的方法&am…

京东数据报告:2023年儿童面膜行业数据分析

如今&#xff0c;儿童面膜在不少家长群体中受到追捧。有的家长称自家孩子3岁开始敷面膜&#xff0c;而在某电商平台上&#xff0c;一位母婴博主称自己的女儿才2岁&#xff0c;“已经深知护肤的重要性了&#xff0c;每天洗完澡就嚷嚷着要敷面膜”。 而从市场角度看&#xff0c;…

Godot 添加Nuget 引用

前言 我的Godot 专栏 我在之前的文章中&#xff0c;解决了Visual Studio 如何去调试正在运行的Godot 程序。Godot 对于C# 的支持只剩下一个&#xff0c;那就是Nuget 添加。 Godot VisualStudio外部编辑器设置 添加Nuget Nuget 添加还是非常的容易的。我们直接添加一个最常用的…

(5)SpringMVC处理携带JSON格式(“key“:value)请求数据的Ajax请求

SpringMVC处理Ajax 参考文章数据交换的常见格式,如JSON格式和XML格式 请求参数的携带方式 浏览器发送到服务器的请求参数有namevalue&...(键值对)和{key:value,...}(json对象)两种格式 URL请求和表单的GET请求会将请求参数以键值对的格式拼接到请求地址后面form表单的P…

使用wireshark解析ipsec esp包

Ipsec esp包就是ipsec通过ike协议协商好后建立的通信隧道使用的加密包&#xff0c;该加密包里面就是用户的数据&#xff0c;比如通过的语音等。 那么如何将抓出来的esp包解析出来看呢&#xff1f; 获取相关的esp的key信息. 打开wireshark -> edit->preferences 找到pr…

[Machine learning][Part4] 多维矩阵下的梯度下降线性预测模型的实现

目录 模型初始化信息&#xff1a; 模型实现&#xff1a; 多变量损失函数&#xff1a; 多变量梯度下降实现&#xff1a; 多变量梯度实现&#xff1a; 多变量梯度下降实现&#xff1a; 之前部分实现的梯度下降线性预测模型中的training example只有一个特征属性&#xff1a…

ESPHome如何调用别的.yaml文件

在.yaml文件中,一般都需要填写wifi部分的信息 wifi:networks:- ssid: "1234"password: "123456789"- ssid: "abcd"password: "123456789"# 当连接不上指定wifi,开启热点配网ap:ssid: "设备配网"当你有很多设备的时候,WiFi信…