海康IPC接入TRTC时,从海康中获取的数据显示时色差不正确

2021/1

记录海康IPC接入TRTC时的历史日志

从海康sdk接口获取数据,进行解码

java 复制代码
org.MediaPlayer.PlayM4.Player.T_YV12;
    private void setDecodeCB() {
        Player.getInstance().setDecodeCB(m_iPort, (nPort, data, nDataLen, nWidth, nHeight, nFrameTime, nDataType, arg7) -> {
                if (nDataType == T_YV12 ) {
                    byte[] i420bytes = swapYV12toI420(data, nWidth, nHeight);
                    callback.afterCall(context, i420bytes.length, i420bytes, nWidth, nHeight, nFrameTime);
                }
        });
    }

解码后如下展示的时候,出现图片偏差

java 复制代码
    byte[] nv12bytes = RSNV12ToBitmap.getInstance(context).swapI420toNV12(data, nWidth, nHeight);//额外转换 3ms
    Bitmap buffBitmap = RSNV12ToBitmap.getInstance(context).nv12ToBitmap(nv12bytes, nWidth, nHeight);//20毫秒

可能是android.renderscript.ScriptIntrinsicYuvToRGB接受的YUV是nv21而不是nv12

java 复制代码
    byte[] nv21bytes = RSNV12ToBitmap.getInstance(context).swapI420toNV21(data, nWidth, nHeight);//额外转换 3ms
    Bitmap buffBitmap = RSNV12ToBitmap.getInstance(context).nv21ToBitmap(nv21bytes, nWidth, nHeight);//20毫秒

图像格式转换函数

java 复制代码
package com.sunshine.mhs.pension.doctormodule.trct.ipc.util;

/**
 * 作者:Administrator on 2020/3/26
 * 邮箱:9611153@qq.com
 */

import android.content.Context;
import android.graphics.Bitmap;
import android.renderscript.Allocation;
import android.renderscript.Element;
import android.renderscript.RenderScript;
import android.renderscript.ScriptIntrinsicYuvToRGB;
import android.renderscript.Type;

public class RSNV21ToBitmap {
    private static RSNV21ToBitmap instance;
    private RenderScript rs;
    private ScriptIntrinsicYuvToRGB yuvToRgbIntrinsic;
    private byte[] nv21bytes;

    private RSNV21ToBitmap(Context context) {
        nv21bytes = null;
        rs = RenderScript.create(context);
        yuvToRgbIntrinsic = ScriptIntrinsicYuvToRGB.create(rs, Element.U8_4(rs));
    }
    public static RSNV21ToBitmap getInstance(Context context) {
        if (instance == null) {
            instance = new RSNV21ToBitmap( context);
        }
        return instance;
    }
    public static void destory() {
         if (instance != null) {
            instance.yuvToRgbIntrinsic.destroy();
            instance.rs.destroy();
            instance = null;
        }
    }

    public Bitmap nv21ToBitmap(byte[] nv21, int width, int height) {
        if (nv21 == null) return null;

        Type.Builder yuvType, rgbaType;
        Allocation in, out;
        yuvType = new Type.Builder(rs, Element.U8(rs)).setX(nv21.length);
        in = Allocation.createTyped(rs, yuvType.create(), Allocation.USAGE_SCRIPT);
        rgbaType = new Type.Builder(rs, Element.RGBA_8888(rs)).setX(width).setY(height);
        out = Allocation.createTyped(rs, rgbaType.create(), Allocation.USAGE_SCRIPT);

        Bitmap bmpout = null;
        try {
            in.copyFrom(nv21);
            yuvToRgbIntrinsic.setInput(in);
            yuvToRgbIntrinsic.forEach(out);
            bmpout = Bitmap.createBitmap(width, height, Bitmap.Config.ARGB_8888);
            out.copyTo(bmpout);

        } catch (Exception e) {
            e.printStackTrace();
        }
        return bmpout;
    }

    public byte[] swapI420toNV21(byte[] I420bytes, int width, int height) {
        if (null == nv21bytes) {
            nv21bytes = new byte[I420bytes.length];
        }
        if (I420bytes.length != nv21bytes.length)
            return null;
        int nLenY = width * height;
        int nLenU = nLenY / 4;
        System.arraycopy(I420bytes, 0, nv21bytes, 0, nLenY);
        for (int i = 0; i < nLenU; i++) {
            nv21bytes[nLenY + 2 * i + 1] = I420bytes[nLenY + i];//先v后U
            nv21bytes[nLenY + 2 * i] = I420bytes[nLenY + nLenU + i];
        }
        return nv21bytes;
    }

}
相关推荐
沐尘而生11 分钟前
【AI智能体】智能音视频-硬件设备基于 WebSocket 实现语音交互
大数据·人工智能·websocket·机器学习·ai作画·音视频·娱乐
nightunderblackcat3 小时前
进阶向:Python音频录制与分析系统详解,从原理到实践
开发语言·python·音视频
Antonio91515 小时前
【音视频】HLS简介与服务器搭建
运维·服务器·音视频
开发者工具分享15 小时前
文本音频违规识别工具排行榜(12选)
人工智能·音视频
开开心心_Every17 小时前
便捷的Office批量转PDF工具
开发语言·人工智能·r语言·pdf·c#·音视频·symfony
karmueo461 天前
视频序列和射频信号多模态融合算法Fusion-Vital解读
算法·音视频·多模态
昨日之日20061 天前
Video Background Remover V3版 - AI视频一键抠像/视频换背景 支持50系显卡 一键整合包下载
人工智能·音视频
站在巨人肩膀上的码农2 天前
全志T507 音频ALSA核心层注册流程分析
驱动开发·音视频·安卓·全志·alsa·声卡
】余185381628002 天前
碰一碰发视频源码搭建与定制化开发:支持OEM
音视频
张晓~183399481212 天前
数字人分身+矩阵系统聚合+碰一碰发视频: 源码搭建-支持OEM
线性代数·矩阵·音视频