瑞芯微rv1126 rtsp+mpp+rga取流

关注

VIP免费原创 2022-07-08 17:25:13 6.3k 阅读 AI 写同款· GEO 优化 ›

瑞芯微rk3399使用rga图形加速处理后拷贝到普通内存耗时大的解决方案 rga图形加速引擎处理图形很快：rk3399开发板自带rga（图形加速引擎）和mpp编解码。在MPP解码->图像后处理->显示整个流程中，RGA都是直接访问内存物理地址，整个过程零内存拷贝，效率很高。（都是在drm内存上完成，drm内存默认non-cache）。从rga的drm内存拷贝图片到普通内存很慢：其他任何软件以cpu访问该段内存都会因为non-cached导致不必要的损失。阅读详情

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

经过测试，使用rtsp+mpp+rga取流1920*1080图像一帧耗时60ms左右，基本可满足要求

一、mpp解码

void decoder_routine(QImage &img,bool &bOK)
{
   
   
    int ret;
    RK_U32 pkt_done = 0;
    // write data to packet
    mpp_packet_write(packet, 0, packet_buffer, packet_wpos);
    // reset pos and set valid length
    mpp_packet_set_pos(packet, packet_buffer);
    mpp_packet_set_length(packet, packet_wpos);
//    printf("packet_wpos = :%d\n",packet_wpos);
    packet_wpos = 0;
    // setup eos flag
    if (pkt_eos)
        mpp_packet_set_eos(packet);

    do {
   
   

        RK_S32 times = 5;
        // send the packet first if packet is not done
        if (!pkt_done)
        {
   
   
            ret = mpi->decode_put_packet(ctx, packet);
            if (MPP_OK == ret)
                pkt_done = 1;
        }

        // then get all available frame and release
        do {
   
   
            RK_S32 get_frm = 0;
            RK_U32 frm_eos = 0;

        try_again:
            ret = mpi->decode_get_frame(ctx, &frame);
            if (MPP_ERR_TIMEOUT == ret) {
   
   
                if (times > 0) {
   
   
                    times--;
                    msleep(MPP_H264_DECODE_TIMEOUT);
                    goto try_again;
                }
                mpp_err("decode_get_frame failed too much time\n");
            }
            if (MPP_OK != ret) {
   
   
                mpp_err("decode_get_frame failed ret %d\n", ret);
                break;
            }

            if (frame) {
   
   
                if (mpp_frame_get_info_change(frame))
                {
   
   
                    RK_U32 width = mpp_frame_get_width