Netty接收超长TCP数据时 使用按行分隔Decoder无法正确解码的问题解决

使用Netty实现的tcp服务端,由于tcp是流式传输的,故需要选用一个解码器对流式消息进行解码和包分隔,以防收到不正确的包。例如LineBasedFrameDecoder,LengthFieldBasedFrameDecoder,DelimiterBasedFrameDecoder等常用解码器。

++需求是收到的消息最长长度限制在50M内,且没有固定的消息头,每次接收消息又不一定在结尾存在固定的换行符,所以现有的解码器都不足够满足需求。++

LineBasedFrameDecoder在收到数据后累加在内存变量中,然后检测到固定的换行符时将消息截断并发给下一个handler。但如果一直没有收到换行符时,则会在channelinactive时,丢弃之前接收到的所有消息。但实际上他会调用一次decodeLast方法,再执行一次decode逻辑。为了解决这个问题,可以通过自定义子类覆盖其decodeLast方法,实现自定义的逻辑。

为了解决数据丢弃问题,该解码器在执行到此方法时,检测最后一个字节是不是换行符,如果不是换行符则手动增加一个换行符到其中,此时就肯定会被decode方法将之前接收到的数据组成一个包。

java 复制代码
 /**
     * 基于换行符的自定义解码器
     * 解决了当流传输结束时,最后一个字符不是换行符无法解析的问题
     * 当最后一个字符不是换行符时,增加一个换行符
     */
    private static class CustomLineBasedFrameDecoder extends LineBasedFrameDecoder {

        private static final byte LINE_DELIMITER = '\n';

        public CustomLineBasedFrameDecoder(int maxLength) {
            super(maxLength);
        }

        public CustomLineBasedFrameDecoder(int maxLength, boolean stripDelimiter, boolean failFast) {
            super(maxLength, stripDelimiter, failFast);
        }

        @Override
        protected void decodeLast(ChannelHandlerContext ctx, ByteBuf in, List<Object> out) throws Exception {
            if (in.isReadable()) {
                //查看最后一个字节是不是换行符 如果不是则增加一个换行符
                byte lastByte = in.getByte(in.writerIndex() - 1);
                if (lastByte != LINE_DELIMITER) {
                    if (in.isWritable()) {
                        in.writeByte(LINE_DELIMITER);
                    } else {
                        //未测试代码块
                        ByteBuf old = in;
                        //如果不可写 则重新分配一个缓冲区  
                        in = MERGE_CUMULATOR.cumulate(ctx.alloc(), internalBuffer(), Unpooled.buffer(1).writeByte(LINE_DELIMITER));
                        old.clear();
                    }
                }
            }
            super.decodeLast(ctx, in, out);
        }
    }
相关推荐
ANSIOT28 分钟前
安朔科技蓝牙无感开锁方案,靠近自动解锁
网络·科技·物联网
微硬创新1 小时前
耐达讯自动化 CC-Link IE 转 PROFINET网关在污水厂智能化升级实战
人工智能·物联网·网络协议·自动化·信息与通信
晏宁科技YaningAI1 小时前
VoIP系统的工程实现模型:从信令控制到媒体传输的完整架构解析
网络·人工智能·架构·系统架构·信息与通信
神奇霸王龙4 小时前
Claude Code屠榜:MiMo与Grok紧追Codex
服务器·网络·人工智能·gpt·ai·ai编程
TlSfoward5 小时前
抓包代理链路下的 TLS 指纹变化分析 TLSFOWARD抓包工具
数据库·爬虫·网络协议·搜索引擎·php
数智化管理手记6 小时前
账龄分析手工统计易遗漏?自动账龄分析工具怎么搭建
大数据·网络·数据库·人工智能·数据挖掘
LabVIEW开发6 小时前
NI Package Manager安装LabVIEW时InternalServerError错误
网络·数据库·labview·labview知识·labview功能·labview程序
RD_daoyi6 小时前
外链权重暴跌至13%,品牌提及反超传统链接——2026年不做Digital PR,你的独立站等于隐形
运维·网络·学习·机器学习·搜索引擎
张小姐的猫7 小时前
【Linux】网络编程 —— HTTP协议(上)
linux·运维·服务器·网络·http·单例模式·策略模式
国科安芯7 小时前
星间光链路:AS32S601型抗辐射MCU在空间激光通信终端控制中的技术实现
服务器·网络·单片机·嵌入式硬件·物联网·安全·信息与通信