百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

Android 音视频入门06 UDP-RTP协议解析

bigegpt 2024-08-07 17:51 6 浏览

本文记录了UDP-RTP网络协议解析,网络协议数据在视频播放器中的位置如下所示


原理

MPEG-TS封装格式数据打包为RTP/UDP协议然后发送出去的流程如下图所示。图中首先每7个MPEG-TS Packet打包为一个RTP,然后每个RTP再打包为一个UDP。其中打包RTP的方法就是在MPEG-TS数据前面加上RTP Header,而打包UDP的方法就是在RTP数据前面加上UDP Header。

本程序的流程和上述发送MPEG-TS的流程正好是相反的,通过Socket编程收取UDP包,解析其中的RTP包的信息,然后再解析RTP包中MPEG-TS Packet的信息。


代码

#include <stdio.h>
#include <stdlib.h>
#include <sys/socket.h>
#include <sys/types.h>
#include <error.h>
#include <string.h>
#include <errno.h>
#include <netinet/in.h>
#include<arpa/inet.h>
#include <unistd.h>
#include <arpa/inet.h>

#ifdef ANDROID
#include <jni.h>
#include <android/log.h>
#define LOGE(format, ...)  __android_log_print(ANDROID_LOG_ERROR, "xohnffmpeg", format, ##__VA_ARGS__)
#define LOGI(format, ...)  __android_log_print(ANDROID_LOG_INFO,  "xohnffmpeg", format, ##__VA_ARGS__)
#else
#define LOGE(format, ...)  printf("xohnffmpeg" format "\n", ##__VA_ARGS__)
#define LOGI(format, ...)  printf("xohnffmpeg " format "\n", ##__VA_ARGS__)
#endif

#pragma pack(1)

/*
  * VLC
 * [memo] FFmpeg stream Command:
 * ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f mpegts udp://192.168.8.108:8880
 * ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f rtp_mpegts rtp://192.168.8.108:8880
 */

typedef struct RTP_FIXED_HEADER{
    /* byte 0 */
    unsigned char csrc_len:4;       /* expect 0 */
    unsigned char extension:1;      /* expect 1 */
    unsigned char padding:1;        /* expect 0 */
    unsigned char version:2;        /* expect 2 */
    /* byte 1 */
    unsigned char payload:7;
    unsigned char marker:1;        /* expect 1 */
    /* bytes 2, 3 */
    unsigned short seq_no;
    /* bytes 4-7 */
    unsigned int timestamp;
    /* bytes 8-11 */
    unsigned int ssrc;            /* stream number is used here. */
} RTP_FIXED_HEADER;

typedef struct MPEGTS_FIXED_HEADER {
    unsigned sync_byte: 8;
    unsigned transport_error_indicator: 1;
    unsigned payload_unit_start_indicator: 1;
    unsigned transport_priority: 1;
    unsigned PID: 13;
    unsigned scrambling_control: 2;
    unsigned adaptation_field_exist: 2;
    unsigned continuity_counter: 4;
} MPEGTS_FIXED_HEADER;


/**
 * Analysis UDP-RTP stream
 * @param jstr_url    Location of output st file.
 */
extern "C" JNIEXPORT jint JNICALL
Java_com_xohn_ffmpeg_AVUtils_udpRtpParser(
        JNIEnv *env,jobject /* this */,
        jstring jstr_url) {
    const char *str = env->GetStringUTFChars(jstr_url, NULL);
    FILE *fp1 = fopen(str,"wb+");
    env->ReleaseStringUTFChars(jstr_url,str);

    int st = socket(AF_INET, SOCK_DGRAM, 0); //AF_INET, SOCK_STREAM, 0
    if (st == -1){
        LOGE("socket failed:%s\n", strerror(errno));
        return EXIT_FAILURE;
    }
    int on = 0;
    if (setsockopt(st, SOL_SOCKET, SO_REUSEADDR, &on, sizeof(on)) == -1){
        LOGE("setsockopt failed:%s\n", strerror(errno));
        close(st);
        return EXIT_FAILURE;
    }
    struct sockaddr_in addr;
    memset(&addr, 0, sizeof(addr));
    addr.sin_family = AF_INET;
    addr.sin_port = htons(8880);
    //INADDR_ANY表示这个服务器上的所有Ip地址。一台服务器可以有多个ip地址。将socket绑定到这个机器的所有ip地址上
    addr.sin_addr.s_addr = htonl(INADDR_ANY); //inet_addr("192.168.8.170"); //htonl(INADDR_ANY);

    //将ip地址与server程序绑定
    if (bind(st, (struct sockaddr*)&addr, sizeof(addr)) == -1){
        LOGE("bind fail:%s\n", strerror(errno));
        close(st);
        return EXIT_FAILURE;
    }


    sockaddr_in remoteAddr;
    socklen_t nAddrLen = sizeof(remoteAddr);
    memset(&remoteAddr, 0, sizeof(remoteAddr));

    int parse_rtp = 1;
    int parse_mpegts = 1;

    int cnt = 0;
    char recvData[10000];
    while (1){
        //LOGI("while before recvfrom\n");
        int pktsize = recvfrom(st, recvData, 10000, 0, (sockaddr *)&remoteAddr, &nAddrLen);
        if (pktsize > 0){
            //LOGI("Addr:%s\r\n",inet_ntoa(remoteAddr.sin_addr));
            //LOGI("packet size:%d\r\n",pktsize);
            //Parse RTP
            if(parse_rtp != 0){
                char payload_str[10] = {0};
                RTP_FIXED_HEADER rtp_header;
                int rtp_header_size = sizeof(RTP_FIXED_HEADER);  //12个字节
                //RTP Header
                memcpy((void *)&rtp_header,recvData,rtp_header_size);

                //RFC3551
                char payload = rtp_header.payload;
                switch(payload){
                    case 0:
                    case 1:
                    case 2:
                    case 3:
                    case 4:
                    case 5:
                    case 6:
                    case 7:
                    case 8:
                    case 9:
                    case 10:
                    case 11:
                    case 12:
                    case 13:
                    case 14:
                    case 15:
                    case 16:
                    case 17:
                    case 18: sprintf(payload_str,"Audio");break;
                    case 31: sprintf(payload_str,"H.261");break;
                    case 32: sprintf(payload_str,"MPV");break;
                    case 33: sprintf(payload_str,"MP2T");break;
                    case 34: sprintf(payload_str,"H.263");break;
                    case 96: sprintf(payload_str,"H.264");break;
                    default:sprintf(payload_str,"other");break;
                }

                unsigned int timestamp = ntohl(rtp_header.timestamp);
                unsigned int seq_no = ntohs(rtp_header.seq_no);

                LOGI("[RTP Pkt] %5d| %5s| %10u| %5d| %5d|\n",cnt,payload_str,timestamp,seq_no,pktsize);

                //RTP Data
                char *rtp_data = recvData+rtp_header_size;
                int rtp_data_size = pktsize-rtp_header_size;
                fwrite(rtp_data,rtp_data_size,1,fp1);

                //Parse MPEGTS
                if(parse_mpegts!=0 && payload==33){
                    MPEGTS_FIXED_HEADER mpegts_header;
                    for(int i = 0;i < rtp_data_size;i = i+188){
                        if(rtp_data[i] != 0x47)
                            break;
                        //MPEGTS Header
                        //memcpy((void *)&mpegts_header,rtp_data+i,sizeof(MPEGTS_FIXED_HEADER));
                        LOGI("   [MPEGTS Pkt]\n");
                    }
                }
            }else{
                LOGI("[UDP Pkt] %5d| %5d|\n",cnt,pktsize);
                fwrite(recvData,pktsize,1,fp1);
            }

            cnt++;
        }else if (pktsize == 0){//如果客户端关闭连接,server端接收时,返回0
            LOGI("receive close\n");
            break;
        }else{
            LOGI("receive fail %s\n", strerror(errno));
            break;
        }
    }

    close(st);
    getchar();
    fclose(fp1);
}

函数调用

AVUtils.getInstance().udpRtpParser(ROOT+"output_sintel.ts");


本程序执行后需要电脑端推流,输出为UDP/RTP/MPEG-TS的解析结果,并且生成一个output_sintel.ts文件。

首先查看手机端IP地址,具体在 “设置-系统-关于手机-状态信息-IP地址”(不同手机目录可能不一样),我测试手机为192.168.8.108,端口用8880。

电脑端用VLC工具推流(具体可以百度去官网下载,免费的),“媒体-流-添加(选择推流文件)-下面选串流-选择RTP/MPEG TS-添加-输入IP地址和端口号”

注:本来打算用ffmpeg推流,但是没成功,后期如果有需要在试吧。但用这个可以看到推流文件的音视频信息
ffmpeg -re -i sintel.ts -vcodec copy -acodec copy -f mpegts udp://192.168.8.108:8880

配置文件新加了一个,具体配置选择如下:

设置好保存,点流就推送了


Socket接收到UDP包并且解析的数据结果如下图,并且在输入目录下生成output_sintel.ts文件




参考文章:

雷神文章 https://blog.csdn.net/leixiaohua1020/article/details/50535230


项目git地址:

https://gitee.com/xohn/FFmpeg.git 中的FFMpeg1 - xohn_avutils_udp-rtp.cpp

相关推荐

php-fpm的配置和优化

目录概述php-fpm配置php-fpm进程优化配置慢日志查询配置php7进阶到架构师相关阅读概述这是关于php进阶到架构之php7核心技术与实战学习的系列课程:php-fpm的配置和优化学习目标:理...

成功安装 Magento2.4.3最新版教程「技术干货」

外贸独立站设计公司xingbell.com经过多次的反复实验,最新版的magento2.4.3在oneinstack的环境下的详细安装教程如下:一.vps系统:LinuxCentOS7.7.19...

十分钟让你学会LNMP架构负载均衡

业务架构、应用架构、数据架构和技术架构一、几个基本概念1、pv值pv值(pageviews):页面的浏览量概念:一个网站的所有页面,在一天内,被浏览的总次数。(大型网站通常是上千万的级别)2、u...

php从远程URL获取(mp4 mp3)音视频的流媒体数据

/***从远程URL中获取媒体(如mp4mp3)的内容*@parammixed$file_url*@parammixed$media_type...

Zabbix5.0安装部署

全盘展示运行状态,减轻运维人员的重复性工作量,提高系统排错速度,加速运维知识学习积累。1.png1、环境安装关闭SELinux并重启系统2.png安装httpd、mariadb、php运行yum-...

php 常见配置详解

以下是PHP常见的配置项及其含义:error_reporting:设置错误报告级别,可以控制PHP显示哪些错误。例如,设置为E_ALL将显示所有错误,而设置为0将禁止显示任何错误。displa...

实践分享|基于基石智算 DeepSeek API + WordPress 插件自动生成访客回复

基石智算举办的DeepSeek案例大赛汇集了不少基于CoresHubDeepSeekAPI服务或模型部署服务的精彩实践。本次我们将分享个人实践:通过DeepSeekAPI+Word...

如何在Eclipse中搭建Zabbix源码的调试和开发环境

Zabbix是一款非常优秀的企业级软件,被设计用于对数万台服务器、虚拟机和网络设备的数百万个监控项进行实时监控。Zabbix是开放源码和免费的,这就意味着当出现bug时,我们可以很方便地通过调试源码来...

MySQL自我保护参数

#头条创作挑战赛#之前(MySQL自我保护工具--pt-kill)提到用pt-kill工具来kill相关的会话,来达到保护数据库的目的,本文再通过修改数据库参数的方式达到阻断长时间运行的SQL的目...

Python闭包深度解析:掌握数据封装的高级技巧

闭包作为Python高级编程特性之一,为开发者提供了一种优雅的方式来实现数据封装和状态保持。这一概念源于函数式编程理论,在现代Python开发中发挥着重要作用。理解和掌握闭包的使用不仅能够提升代码的表...

Java服务网格故障注入与熔断实战

在分布式系统的高可用性挑战中,服务网格的故障注入与熔断机制是检验系统韧性的终极试金石。以下是10道逐步升级的"地狱关卡",每个关卡都对应真实生产环境中可能遇到的致命场景,并附具体场景示...

MySQL数据库性能优化全攻略:程序员必知的七大核心策略

作为程序员,我们每天都要与数据库打交道。当系统用户量突破百万级时,数据库往往成为性能瓶颈的首要怀疑对象。本文将深入探讨MySQL优化的七大核心策略,并提供可直接落地的优化方案,助您构建高效稳定的数据库...

如何在 Windows 11 上使用单个命令安装 XAMPP

XAMPP是一种广泛使用的软件,用于在Windows操作系统上快速运行LAMP服务器包,包括Windows11。尽管LAMP通常用于Linux系统,但XAMPP并不使用Li...

uTorrent怎样将bt种子转换为磁力

如何用uTorrent把BT种子转为磁力链接?以下方法希望能帮到你。1、在uTorrent窗口里,点击工具栏的按钮,所示。2、在打开窗口里,选取要转为磁力的种子文件,然后点击打开按钮,参照图示操作...

支持向量机SVM 分类和回归的实例

支持向量机(SupportVectorMachine)是Cortes和Vapnik于1995年首先提出的,它在解决小样本、非线性及高维模式识别中表现出许多特有的优势,并能够推广应用到函数拟合等其他...