每日开源：一个巨硬的产品级嵌入式流媒体库

       哈喽，我是嵌入老吴。

       今天分享一个比较复杂的嵌入开源项目：live 是一个开源的流媒体库，用于实现实时流媒体的嵌入传输和处理。它提供了一套跨平台的嵌入 C++ 类库，帮助快速构建高效、嵌入小孩吃溯源码燕窝图片看看可靠的嵌入流媒体服务器和客户端应用程序。

       live的嵌入代码量庞大，约9w行代码。嵌入如果专注于核心逻辑，嵌入代码量缩减到约8K行。嵌入使用live，嵌入你可以收获高效可靠的嵌入流媒体库，了解产品级的嵌入C++项目设计，掌握音视频基础知识，嵌入甚至获得基于select()的C++事件循环库。live在媒体播放器、流媒体服务器、视频监控系统等领域应用广泛，如VLC、FFmpeg、GStreamer均使用live实现流媒体的接收和播放。

       live基于C++，语法相对简单，适合专注于学习C++类设计和编写专业的C++软件。为了理解源码，需要补充多媒体、流媒体的理论知识。通过阅读和运行相关应用，加深对理论知识的理解。

       编译live库后，会生成4个静态库：libBasicUsageEnvironment.a和libUsageEnvironment.a用于实现事件循环、上下文管理、任务管理等；libliveMedia.a负责多媒体流化，包括音视频编解码、流媒体协议实现；libgroupsock.a负责网络IO功能，核心是TCP、UDP的rpg修改源码读写。简单示例是RTP传输MP3音频，涉及server和client两个程序。

       server程序的核心逻辑包括准备运行环境、设置数据来源、设置数据目的地。TaskScheduler用于任务管理，基于select()实现事件循环。BasicUsageEnvironment用于上下文管理。数据流化本质是网络传输，Source和Sink分别表示数据源和目的地，本例中Source是MP3FileSource，Sink是MPEG1or2AudioRTPSink。client端程序同样初始化Source和Sink。

       RTP协议简介，RTP（Real-time Transport Protocol）是一种用于实时传输音频和视频数据的网络传输协议，基于UDP，用于在IP网络上传输实时媒体数据。RTP协议设计目标是提供低延迟、高效率的传输，以满足实时应用需求。主要特点包括时间戳、序列号、负载类型、NACK反馈和RTCP（Real-time Transport Control Protocol）等。

       关键问题是如何实现数据一帧帧流化？关注点不是具体音视频格式解析或特定协议实现，而是live对音视频流化的整体框架。通过示例分析，live本质上将音视频数据逐帧解码，通过RTP协议经网络发送。live封装了多种数据Source和Sink，但无需详细了解每个概念。仍以RTP传输MP3数据为例，分析live的工作流程。

       首先，需要对相关类的关系有大概概念：MediaSource是所有Source的父类，各种具体音视频Source基于其派生；MediaSink是所有Sink的父类，派生出FileSink、铜川源码建站RTPSink等众多Sink类。Sink类最关键的成员函数是startPlaying()，用于使用Source对象获取帧数据，然后发送至网络。

       RTP传输MP3的主要逻辑包括准备就绪后调用MediaSink::startPlaying()启动数据流化，在packFrame()调用Source对象的getNextFrame()。getNextFrame()最终调用MP3FileSource的doGetNextFrame()，负责MP3音频解码，解码完成后，回调afterGettingFrame()，正常时调用sendPacketIfNecessary()发送数据，并添加至事件循环调度器中。一段时间后，MultiFramedRTPSink的sendNext()被调用，推动新一帧数据传输，直到Source中的所有帧数据被消费。

       live如何创建RTSP服务器？通常RTP协议与RTSP协议结合使用，对外提供RTSP服务器服务。RTSP提供控制实时流媒体传输和播放的标准化方式，可以控制播放、暂停、停止、快进、后退等功能。添加几行代码即可创建RTSP服务器。RTSP服务器封装实现RTSP服务，类似HTTP协议，是文本协议。服务器包括接受客户端连接、读取客户端数据、解析和处理数据的操作。

       总结，live是一个开源的多媒体流媒体库，支持常见流媒体协议，提供高效可靠的流媒体传输功能，适用于构建流媒体服务器和客户端应用程序。使用live需要熟悉C++编程和网络编程知识，源码登录后台官方提供丰富示例代码，帮助快速熟悉库的使用方法。

webrtc linphone 到底哪个

       æ¯”较推荐webrtc。webrtc基本技术已经有了，包括p2p传输，音视频codec,音频处理技术等。【点击免费试用，0成本启动】

       Linphone是老牌的sip，支持平台广泛 windows, mac,ios,android,linux，技术会比较成熟。但是linphone在Android上的bug有点多。imsdroid,csipsimple,linphone都想法设法调用webrtc的音频技术，测试过Android端的webrtc内网视频通话效果比较满意。但是要把webrtc做成一个移动端的IM软件的话还有一些路要走，不过webrtc基本技术都已经有了，包括p2p传输，音视频codec,音频处理技术。不过其因为目前仅支持VP8的视频编码格式（QQ也是）想做高清视频通话的要注意了。VP8在移动端的硬件编解码支持的平台没几个（RK可以支持VP8硬件编解码）。不过webrtc代码里看到可以使用外部codec,这个还是有希望调到H的。

       æƒ³è¦äº†è§£æ›´å¤šå…³äºŽwebrtc的相关信息，推荐咨询ZEGO即构科技。ZEGO即构科技自主研发的高音质语音视频引擎，能够提供实时清晰的多人语音视频通话。支持多路视频画面，保障每一路语音视频都清晰流畅提供端到端的SDK、分布式转码、接入鉴权云服务接入、摆脱运维、轻松支撑海量用户运营。

秒懂流媒体协议 RTMP 与 RTSP

       流媒体协议RTMP与RTSP是常见的传输技术，它们分别有何特点？又该如何根据实际需求选择？

       首先，让我们来理解什么是流媒体协议。简单来说，这是一种通过网络传递多媒体内容的协议，如直播或点播视频的幕后功臣。

       流媒体协议大致分为传统视频流协议、基于HTTP的自适应协议和新技术。本文重点聚焦于传统协议中的RTMP和RTSP。

       RTMP，诞生于年，由Adobe接手Macromedia开发，主要用于Flash播放器与服务器间的数据传输，尽管Flash已逐渐淡出，但RTMP因其稳定低延迟传输而被广泛应用。它通过将数据流分割成小块传输，确保在任何互联网连接下都能提供流畅视频流，但与HTML5兼容性差，且受带宽影响。

       相比之下，RTSP起源于年，由RealNetworks等创建，适合控制娱乐和通信系统。它支持分段流，便于用户边下载边观看，尤其在监控和CCTV领域广泛应用，但普及度较低，且不支持加密和数据包重传。

       在选择RTMP和RTSP时，要考虑延迟、音频和视频编解码器、优点与缺点。RTMP适合第三方流应用和老式硬件，因其低延迟和兼容性；而RTSP适合IP摄像机和无人机等特定场景，但不支持加密和数据包重传。面试源码arraylist

       总的来说，理解流媒体协议的特性和适用场景，可以帮助你更好地选择适合的协议。嵌入式物联网学习中，正确选择技术路径至关重要，这将直接影响你的职业发展。感兴趣的朋友可以进一步探索相关资料，深入学习。

奥酷流媒体网关

       设计原则先进性：采用最新的嵌入式架构方案，基于ARM-Linux系统设计，支持物联网部署，除可独立运行外，也可接入云端，接受统一调度。 实用性：方案设计符合国际相关标准和技术规范，设计简洁、操作方便。充分利用各种资源，使用户实现各种功能。同时配合宽带网络技术，可以支持高质量、远距离的视音频传输，以适应应用需求的变化。稳定性：纯硬件架构，嵌入式架构，确保系统支持7×不间断运行，且不受病毒及系统崩溃的影响。 兼容性：支持PC终端、android移动设备、IOS移动设备收看直播。 扩充性：支持TI，全志，瑞芯微，海思，三星等多种ARM平台，采用模块化设计，支持RJ，WIFI，4G，北斗导航，GPS，蓝牙等多种接口扩展，适合用于各种复杂环境中。 操作简单：提供基于Web的管理界面，可通过浏览器轻松接入实现管理，也支持通过控制中心，手机APP等多种形式进行操作。 开放式设计：允许接入第三方系统，做各个系统之前的桥梁。

       支持流媒体协议转换 接收编码器推来的rtmp、rtsp直播流，或者通过rtsp协议拉取编码器，网络摄像头，NVR中的直播流， 以rtmp形式同时向多个第三方流媒体系统发布，无论推流或者拉流都可以支持有客户端接入观看才发布流，极大的节约了网络带宽。2、支H./H.应用 能够接受H.或者H.编码的视频流，并做协议转换输出发布。3、流媒体直播发布 网关中的频道能够以rtmp、rtsp、ts_over_http、flv_over_http、ts等协议对外进行直播，满足多个客户端接入观看，单播模式最多可满足个并发用户观看，可直接作为直播发布服务器适用于课堂直播，数字标牌直播等场合；4、支持注册到统一管理平台 若同一个项目中需要多个网关，可见统一管理平台，每个网关与管理平台保持心跳连接，接受管理平台的统一调度，统一升级，远程重启，远程管理等；5、支持解码输出 设备可带VGA/HDMI/CVBS输出接口，能够对输入的视频流解码输出，支持1、3、4、9、等多分屏输出，可控制输出，也可以作为解码器解码上墙使用。6、多种型号可选 支持4路、8路、路、路等多个型号可选，支持RJ，WIFI，4G等多种网络可选，支持GPS,北斗导航可选，可根据需求定制其他物联网接口7、支持热备份 若同一系统中有个网关物理损坏，管理中心可指定其它网关替代损坏网关，业务平滑切换；8、支持手机控制 可提供独立手机管理端，远程监控各个网关的运行状态，接受网关出错报警信息

摄像机如何通过无线传输方式将拍摄的视频文件传云端？

       方案构成：无线视频流云端推送方案由USB摄像头，QCA WiFi模块、云端视频服务器及接收视频的手机组成。

       方案设计：在网络USB摄像头的PCB板上，嵌入QCA WiFi模块，通过USB接口将摄像头连接到WiFi模块，WiFi模块将摄像头采集的视频传输上传到云端视频服务器，并提供视频播放地址，用户通过手机端访问播放地址即可实时播放视频。

       工作原理：用户在云端架设好云端视频服务器，通过WiFi模块采集USB摄像头视频内容，并将视频数据上传到云端视频服务器；手机端通过访问云端视频服务器提供的播放地址，获取视频流，实时查看USB摄像头采集的视频。

       硬件准备：一台电脑，一根网线，一个UVC免驱动摄像头，一块SKW模块，一块SKW EVB板，DC适配器，两根WiFi模块天线

       接线：摄像头通过USB连接到WIFI模块，WIFI通过无线中继或WAN口或4G/5G模块上网将摄像头采集的数据上传到服务器，下图是方案演示接线图，此处使用无线中继上网，将摄像头采集的数据上传到服务器。

       网页配置：申请云平台账号（支持主流云平台，本篇以腾讯云直播平台为例），开通云直播，注册推流域名，播放域名，并对域名进行备案和解析；

       在腾讯云直播上创建推流地址，并在WIFI模块的对应界面配置相应信息，主要是摄像头参数信息和视频服务器信息；

       使用VLC查看推流结果，若是使用腾讯云推流，则播放如图一：使用腾讯云推流后，配置播放地址后的配置，按上图的播放地址，在VLC的“网络”中输入上面的播放地址，如下图进行播放。

       若是腾讯云直播服务器推流，可通过微信关注“腾讯云视频云”小程序，打开小程序按下图操作；

       嵌入式RTMP/RTSP协议，可独立推流到流媒体服务器；

       UVC免驱摄像头挂载，摄像头可支持H./MJPG/YUYV视频格式；

       支持P@帧/万像素，本地视频服支持P@帧/万像素；

伊视通ET-H详细参数

       伊视通ET-H是一款专业的网络摄像机，它基于嵌入式Linux操作系统，能够稳定地运行在TCP/IP、HTTP、ARP、TCP、ICMP、DHCP、UDP、SMTP、FTP、DDNS和RTSP等网络协议环境中。这款摄像机的LAN接口采用Base-T/Base-TX(RJ-)标准，支持高速数据传输。

       在图像性能方面，ET-H能够提供两种分辨率选项：×（万像素）时，帧率最高可达帧/秒，而×（万像素）模式下，帧率可提升至帧/秒，甚至可以支持高达FPS的流畅视频捕捉。

       它采用H.压缩技术，确保了高效的数据传输和存储。摄像机的成像器件为1/3.2英寸高清数字CMOS，支持mm、mm和mm可选镜头，低光照环境下，最低照度仅为0.1Lux，确保在光线不足的场景下也能清晰捕捉画面。

       在摄像机性能上，有效像素达到万，内置米白光补光灯，支持PAL/NTSC两种制式。音频方面，它配置了1路音频输入和1路音频输出，方便进行音频监控。此外，还提供了RS-控制接口，支持动态侦测功能，提高了监控的灵活性。

       此款摄像机还具备POE供电选项，简化了布线和电源管理。OSD叠加功能便于用户实时查看和调整设置。电源方面，它采用DCV，2A供电，标准的××mm产品尺寸和g重量，使得它在安装和维护上更为便捷。环境适应性强，工作温度范围为--℃，湿度要求在≤%无结露现象，确保在各种环境下稳定运行。

rtsp开启是什么意思？

       RTSP是Real-Time Streaming Protocol的简称，是一种用于实时数据的传输协议，可以实现音视频数据的传输。而开启RTSP服务，则是指启动了支持RTSP协议的数据传输服务，让用户可以使用RTSP协议来访问音视频流数据。

       通过开启RTSP服务，可以让支持RTSP协议的终端设备（如智能手机、平板电脑、电视等）实现实时的音视频播放，同时也可以为其他系统提供完整的音视频数据流服务，以实现多种不同的业务需求。

       要开启RTSP服务，需要使用支持该协议的音视频采集设备或服务器，通过配置相应的参数来启动RTSP服务。具体来说，可以通过使用专业的音视频监控软件或移动设备APP来实现，也可以使用相应的嵌入式硬件设备来搭建RTSP服务。不同的设备和软件的配置方法可能有所不同，因此需要根据实际情况进行具体操作。