百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

Android 音视频入门06 UDP-RTP协议解析

bigegpt 2024-08-07 17:51 11 浏览

本文记录了UDP-RTP网络协议解析,网络协议数据在视频播放器中的位置如下所示


原理

MPEG-TS封装格式数据打包为RTP/UDP协议然后发送出去的流程如下图所示。图中首先每7个MPEG-TS Packet打包为一个RTP,然后每个RTP再打包为一个UDP。其中打包RTP的方法就是在MPEG-TS数据前面加上RTP Header,而打包UDP的方法就是在RTP数据前面加上UDP Header。

本程序的流程和上述发送MPEG-TS的流程正好是相反的,通过Socket编程收取UDP包,解析其中的RTP包的信息,然后再解析RTP包中MPEG-TS Packet的信息。


代码

#include <stdio.h>
#include <stdlib.h>
#include <sys/socket.h>
#include <sys/types.h>
#include <error.h>
#include <string.h>
#include <errno.h>
#include <netinet/in.h>
#include<arpa/inet.h>
#include <unistd.h>
#include <arpa/inet.h>

#ifdef ANDROID
#include <jni.h>
#include <android/log.h>
#define LOGE(format, ...)  __android_log_print(ANDROID_LOG_ERROR, "xohnffmpeg", format, ##__VA_ARGS__)
#define LOGI(format, ...)  __android_log_print(ANDROID_LOG_INFO,  "xohnffmpeg", format, ##__VA_ARGS__)
#else
#define LOGE(format, ...)  printf("xohnffmpeg" format "\n", ##__VA_ARGS__)
#define LOGI(format, ...)  printf("xohnffmpeg " format "\n", ##__VA_ARGS__)
#endif

#pragma pack(1)

/*
  * VLC
 * [memo] FFmpeg stream Command:
 * ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f mpegts udp://192.168.8.108:8880
 * ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f rtp_mpegts rtp://192.168.8.108:8880
 */

typedef struct RTP_FIXED_HEADER{
    /* byte 0 */
    unsigned char csrc_len:4;       /* expect 0 */
    unsigned char extension:1;      /* expect 1 */
    unsigned char padding:1;        /* expect 0 */
    unsigned char version:2;        /* expect 2 */
    /* byte 1 */
    unsigned char payload:7;
    unsigned char marker:1;        /* expect 1 */
    /* bytes 2, 3 */
    unsigned short seq_no;
    /* bytes 4-7 */
    unsigned int timestamp;
    /* bytes 8-11 */
    unsigned int ssrc;            /* stream number is used here. */
} RTP_FIXED_HEADER;

typedef struct MPEGTS_FIXED_HEADER {
    unsigned sync_byte: 8;
    unsigned transport_error_indicator: 1;
    unsigned payload_unit_start_indicator: 1;
    unsigned transport_priority: 1;
    unsigned PID: 13;
    unsigned scrambling_control: 2;
    unsigned adaptation_field_exist: 2;
    unsigned continuity_counter: 4;
} MPEGTS_FIXED_HEADER;


/**
 * Analysis UDP-RTP stream
 * @param jstr_url    Location of output st file.
 */
extern "C" JNIEXPORT jint JNICALL
Java_com_xohn_ffmpeg_AVUtils_udpRtpParser(
        JNIEnv *env,jobject /* this */,
        jstring jstr_url) {
    const char *str = env->GetStringUTFChars(jstr_url, NULL);
    FILE *fp1 = fopen(str,"wb+");
    env->ReleaseStringUTFChars(jstr_url,str);

    int st = socket(AF_INET, SOCK_DGRAM, 0); //AF_INET, SOCK_STREAM, 0
    if (st == -1){
        LOGE("socket failed:%s\n", strerror(errno));
        return EXIT_FAILURE;
    }
    int on = 0;
    if (setsockopt(st, SOL_SOCKET, SO_REUSEADDR, &on, sizeof(on)) == -1){
        LOGE("setsockopt failed:%s\n", strerror(errno));
        close(st);
        return EXIT_FAILURE;
    }
    struct sockaddr_in addr;
    memset(&addr, 0, sizeof(addr));
    addr.sin_family = AF_INET;
    addr.sin_port = htons(8880);
    //INADDR_ANY表示这个服务器上的所有Ip地址。一台服务器可以有多个ip地址。将socket绑定到这个机器的所有ip地址上
    addr.sin_addr.s_addr = htonl(INADDR_ANY); //inet_addr("192.168.8.170"); //htonl(INADDR_ANY);

    //将ip地址与server程序绑定
    if (bind(st, (struct sockaddr*)&addr, sizeof(addr)) == -1){
        LOGE("bind fail:%s\n", strerror(errno));
        close(st);
        return EXIT_FAILURE;
    }


    sockaddr_in remoteAddr;
    socklen_t nAddrLen = sizeof(remoteAddr);
    memset(&remoteAddr, 0, sizeof(remoteAddr));

    int parse_rtp = 1;
    int parse_mpegts = 1;

    int cnt = 0;
    char recvData[10000];
    while (1){
        //LOGI("while before recvfrom\n");
        int pktsize = recvfrom(st, recvData, 10000, 0, (sockaddr *)&remoteAddr, &nAddrLen);
        if (pktsize > 0){
            //LOGI("Addr:%s\r\n",inet_ntoa(remoteAddr.sin_addr));
            //LOGI("packet size:%d\r\n",pktsize);
            //Parse RTP
            if(parse_rtp != 0){
                char payload_str[10] = {0};
                RTP_FIXED_HEADER rtp_header;
                int rtp_header_size = sizeof(RTP_FIXED_HEADER);  //12个字节
                //RTP Header
                memcpy((void *)&rtp_header,recvData,rtp_header_size);

                //RFC3551
                char payload = rtp_header.payload;
                switch(payload){
                    case 0:
                    case 1:
                    case 2:
                    case 3:
                    case 4:
                    case 5:
                    case 6:
                    case 7:
                    case 8:
                    case 9:
                    case 10:
                    case 11:
                    case 12:
                    case 13:
                    case 14:
                    case 15:
                    case 16:
                    case 17:
                    case 18: sprintf(payload_str,"Audio");break;
                    case 31: sprintf(payload_str,"H.261");break;
                    case 32: sprintf(payload_str,"MPV");break;
                    case 33: sprintf(payload_str,"MP2T");break;
                    case 34: sprintf(payload_str,"H.263");break;
                    case 96: sprintf(payload_str,"H.264");break;
                    default:sprintf(payload_str,"other");break;
                }

                unsigned int timestamp = ntohl(rtp_header.timestamp);
                unsigned int seq_no = ntohs(rtp_header.seq_no);

                LOGI("[RTP Pkt] %5d| %5s| %10u| %5d| %5d|\n",cnt,payload_str,timestamp,seq_no,pktsize);

                //RTP Data
                char *rtp_data = recvData+rtp_header_size;
                int rtp_data_size = pktsize-rtp_header_size;
                fwrite(rtp_data,rtp_data_size,1,fp1);

                //Parse MPEGTS
                if(parse_mpegts!=0 && payload==33){
                    MPEGTS_FIXED_HEADER mpegts_header;
                    for(int i = 0;i < rtp_data_size;i = i+188){
                        if(rtp_data[i] != 0x47)
                            break;
                        //MPEGTS Header
                        //memcpy((void *)&mpegts_header,rtp_data+i,sizeof(MPEGTS_FIXED_HEADER));
                        LOGI("   [MPEGTS Pkt]\n");
                    }
                }
            }else{
                LOGI("[UDP Pkt] %5d| %5d|\n",cnt,pktsize);
                fwrite(recvData,pktsize,1,fp1);
            }

            cnt++;
        }else if (pktsize == 0){//如果客户端关闭连接,server端接收时,返回0
            LOGI("receive close\n");
            break;
        }else{
            LOGI("receive fail %s\n", strerror(errno));
            break;
        }
    }

    close(st);
    getchar();
    fclose(fp1);
}

函数调用

AVUtils.getInstance().udpRtpParser(ROOT+"output_sintel.ts");


本程序执行后需要电脑端推流,输出为UDP/RTP/MPEG-TS的解析结果,并且生成一个output_sintel.ts文件。

首先查看手机端IP地址,具体在 “设置-系统-关于手机-状态信息-IP地址”(不同手机目录可能不一样),我测试手机为192.168.8.108,端口用8880。

电脑端用VLC工具推流(具体可以百度去官网下载,免费的),“媒体-流-添加(选择推流文件)-下面选串流-选择RTP/MPEG TS-添加-输入IP地址和端口号”

注:本来打算用ffmpeg推流,但是没成功,后期如果有需要在试吧。但用这个可以看到推流文件的音视频信息
ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f mpegts udp://192.168.8.108:8880

配置文件新加了一个,具体配置选择如下:

设置好保存,点流就推送了


Socket接收到UDP包并且解析的数据结果如下图,并且在输入目录下生成output_sintel.ts文件




参考文章:

雷神文章 https://blog.csdn.net/leixiaohua1020/article/details/50535230


项目git地址:

https://gitee.com/xohn/FFmpeg.git 中的FFMpeg1 - xohn_avutils_udp-rtp.cpp

相关推荐

方差分析简介(方差分析通俗理解)

介绍方差分析(ANOVA,AnalysisofVariance)是一种广泛使用的统计方法,用于比较两个或多个组之间的均值。单因素方差分析是方差分析的一种变体,旨在检测三个或更多分类组的均值是否存在...

正如404页面所预示,猴子正成为断网元凶--吧嗒吧嗒真好吃

吧嗒吧嗒,绘图:MakiNaro你可以通过加热、冰冻、水淹、模塑、甚至压溃压力来使网络光缆硬化。但用猴子显然是不行的。光缆那新挤压成型的塑料外皮太尼玛诱人了,无法阻挡一场试吃盛宴的举行。印度政府正...

Python数据可视化:箱线图多种库画法

概念箱线图通过数据的四分位数来展示数据的分布情况。例如:数据的中心位置,数据间的离散程度,是否有异常值等。把数据从小到大进行排列并等分成四份,第一分位数(Q1),第二分位数(Q2)和第三分位数(Q3)...

多组独立(完全随机设计)样本秩和检验的SPSS操作教程及结果解读

作者/风仕在上一期,我们已经讲完了两组独立样本秩和检验的SPSS操作教程及结果解读,这期开始讲多组独立样本秩和检验,我们主要从多组独立样本秩和检验介绍、两组独立样本秩和检验使用条件及案例的SPSS操作...

方差分析 in R语言 and Excel(方差分析r语言例题)

今天来写一篇实际中比较实用的分析方法,方差分析。通过方差分析,我们可以确定组别之间的差异是否超出了由于随机因素引起的差异范围。方差分析分为单因素方差分析和多因素方差分析,这一篇先介绍一下单因素方差分析...

可视化:前端数据可视化插件大盘点 图表/图谱/地图/关系图

前端数据可视化插件大盘点图表/图谱/地图/关系图全有在大数据时代,很多时候我们需要在网页中显示数据统计报表,从而能很直观地了解数据的走向,开发人员很多时候需要使用图表来表现一些数据。随着Web技术的...

matplotlib 必知的 15 个图(matplotlib各种图)

施工专题,我已完成20篇,施工系列几乎覆盖Python完整技术栈,目标只总结实践中最实用的东西,直击问题本质,快速帮助读者们入门和进阶:1我的施工计划2数字专题3字符串专题4列表专题5流程控制专题6编...

R ggplot2常用图表绘制指南(ggplot2绘制折线图)

ggplot2是R语言中强大的数据可视化包,基于“图形语法”(GrammarofGraphics),通过分层方式构建图表。以下是常用图表命令的详细指南,涵盖基本语法、常见图表类型及示例,适合...

Python数据可视化:从Pandas基础到Seaborn高级应用

数据可视化是数据分析中不可或缺的一环,它能帮助我们直观理解数据模式和趋势。本文将全面介绍Python中最常用的三种可视化方法。Pandas内置绘图功能Pandas基于Matplotlib提供了简洁的绘...

Python 数据可视化常用命令备忘录

本文提供了一个全面的Python数据可视化备忘单,适用于探索性数据分析(EDA)。该备忘单涵盖了单变量分析、双变量分析、多变量分析、时间序列分析、文本数据分析、可视化定制以及保存与显示等内容。所...

统计图的种类(统计图的种类及特点图片)

统计图是利用几何图形或具体事物的形象和地图等形式来表现社会经济现象数量特征和数量关系的图形。以下是几种常见的统计图类型及其适用场景:1.条形图(BarChart)条形图是用矩形条的高度或长度来表示...

实测,大模型谁更懂数据可视化?(数据可视化和可视化分析的主要模型)

大家好,我是Ai学习的老章看论文时,经常看到漂亮的图表,很多不知道是用什么工具绘制的,或者很想复刻类似图表。实测,大模型LaTeX公式识别,出乎预料前文,我用Kimi、Qwen-3-235B...

通过AI提示词让Deepseek快速生成各种类型的图表制作

在数据分析和可视化领域,图表是传达信息的重要工具。然而,传统图表制作往往需要专业的软件和一定的技术知识。本文将介绍如何通过AI提示词,利用Deepseek快速生成各种类型的图表,包括柱状图、折线图、饼...

数据可视化:解析箱线图(box plot)

箱线图/盒须图(boxplot)是数据分布的图形表示,由五个摘要组成:最小值、第一四分位数(25th百分位数)、中位数、第三四分位数(75th百分位数)和最大值。箱子代表四分位距(IQR)。IQR是...

[seaborn] seaborn学习笔记1-箱形图Boxplot

1箱形图Boxplot(代码下载)Boxplot可能是最常见的图形类型之一。它能够很好表示数据中的分布规律。箱型图方框的末尾显示了上下四分位数。极线显示最高和最低值,不包括异常值。seaborn中...