Kurento应用开发指南(以Kurento 6.0为模板) 之七:Kurento API 参考

2024-08-21 17:58

本文主要是介绍Kurento应用开发指南(以Kurento 6.0为模板) 之七:Kurento API 参考,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

13.1 Kurento API 参考
Kurento媒体服务器提供了一套API给高级语言使用,以用于应用程序开发人员来控制它。
这些API可以被用于Java或Javascript开发的Kurento 客户端。
如果你更喜欢其它开发语言,你可以使用基于WebSocket或JSON-PRC的Kurento协议。

在下面的章节中,我们将讲解Kurento API, 我们将显示Kurento媒体服务器提供给客户端的媒体能力。
如果你想看使用kurento的工作DEMO,你可以翻到前面看示例教程。

13.1.1 媒体元件和媒体管道

对于应用程序开发人员来说,Kurento提供了两个概念来作为构建模块:
>>> 媒体元件 
    媒体元件是对媒体流执行指定动作的功能单元。
    对于应用程序开发人员来说,媒体元件是每个能力的一种实现方式,它表示为自包含的"黑箱",
    开发人员在使用时,不需要理解底层的实现细节。
    媒体元件具有从其它元件(通过媒体源)接收媒体以及发送媒体到其它元素(通过媒体sink)的能力。
    依赖于它们的能力,媒体元件可划分成不同的类型:
    – 输入端点: 
       指具有接收媒体并注入到管道能力的媒体元件。
       有多种类型的输入端点。
       文件输入端点用来从文件获取媒体;
       网络输入端点用来从网络获取媒体;
       捕捉输入端点有直接从摄像头或其它类型的硬件源上捕捉媒体流的能力。


    – 滤镜: 
       指负责媒体转码或分析的媒体元件。
       因此,滤镜的功能包括混合流,混间,分析,填充等。


    – 集线器: 
       指负责管理一个管道中多个媒体流的媒体对象。
       一个集线器可以有多个集线端口,以连接多个媒体元件。
       依据集线类型,可以有多种方式来控制媒体。
       例如,Composite集线器可以将多个输入视频流合并到一个唯一的输出视频流。


    – 输出端点:
       指具有将媒体流从管道中输出的能力的媒体元件。
       因此,也有多种类型的输出端点,如文件,网络,屏幕等。


>>> 媒体管道: 
    媒体管道是一个媒体元件的链,
    在这个链中,输出流是由一个源元件输入到一个或多个其它媒体元件处理后再输出的。
    因此,管道表示能执行一系列流操作的机器。


Figure 13-1: 媒体管道示例,
实现了从一个WebRtcEndpoint接收媒体流,
叠加一个图像到侦测到的人脸上并返回结果流的交互式多媒体应用


Kurento API是面向对象的API.
因此,有一些类需要实例化。这些类定义的操作可以被这个类的对象所引用 。
这些类和其它相关类是继承关系,继承操作是从父类到子类的。
下面的类图显示了Kurento API中主类的关系。




Figure 13.2: Class diagram of main classes in Kurento API
从图中可以看出,
Endpoint, Filter,HubPort的父类是MediaElement,
而媒体元件、媒体管道,集线器的父类都是MediaObject.
另外,媒体管道可拥有多个媒体元件,
Hub可以拥有多个HubPort,
而MediaObject可以拥有一个媒体管道。


13.1.2 端点

先来讨论Kurento提供的不同种类的端点。
>>> WebRtcEndpoint
    是一种有输出和输入的端点,它通过Web为RTC(Real Time Communictions)提供媒体流。
    它为浏览器间的通信实现了WebRTC技术。
图示:


>>> RtpEndpoint 
    是一种有输出和输入的端点。
    它为两个远程的网络节点,通过RTP协议,提供双向的内容传输能力。
    正如你所想的,为了通过网络发送和接收媒体,它使用了RTP协议,并使用SDP做媒体协商;
图示:


>>> HttpPostEndpoint
    是一种只有输入的端点,
    它使用http POST请求,就像HTTP文件上传功能那样,接收媒体流。
图示:


>>> PlayerEndpoint
    是一种只有输入的端点,
    它从文件系统,Http URL或RTSP URL接收内容并将其注入到媒体管道中。
图示:


>>> RecorderEndpoint
    是一种只有输出的端点。
    它提供了以可靠模式存储内容的功能,它为音频和视频提供了媒体sink衬垫(pad)。
图示:


下面的类图显示了主要的端点类的关系:


Fig 13-3


13.1.3 滤镜

滤镜是执行媒体处理,机器视觉,虚拟现实等的媒体元件。
我们来看看Kurento提供的滤镜:


>>> The ZBarFilter filter
    检查视频流的QR和条形码。
    当发现有条形码时,滤镜会触发CodeFoundEvent事件,客户端可以添加一个对这个事件的监听器并执行相应的动作。


>>> The FaceOverlayFilter filter
    检查视频流中的人脸,并在人脸上叠加一个可设置的图片。


>>> GStreamerFilter
    它是一个通用的滤镜接口,它能使Kurento媒体管道使用GStreamer滤镜。


下面的类图显示了主要的滤镜类的关系:




Figure 13.4: Class diagram of Filters in Kurento API


13.1.4 集线器
集线器是负责管理管道中多媒体流的媒体对象。
一个集线器可以有多个连接其它媒体元件的集线端口,
我们来看下Kurento提供的集线器:
>>> Composite
    是一个混合多个输入的音频流,并与视频流组成的下网格的集线器。
图示:   
 
>>> DispatcherOneToMany
    是发送指定输入流到多个连接的输出集线端口的集线器。 
图示:


>>> Dispatcher
    是一个允许在任意输入-输出集线端口对做路由的集线器。
图示:




下面是集线器的类关系图:


Figure 13.5: Class diagram of Hubs in Kurento API


Kurento Client的细节可以看文档 JavaDoc/JsDoc:
 .  kurento-client-java : JavaDoc of Kurento Java Client.
    链接见:https://www.kurento.org/docs/6.0.0/langdoc/javadoc/index.html
 .  kurento-client-js : JsDoc of Kurento JavaScript Client.
 .  kurento-utils-js : JsDoc of an utility JavaScript library aimed to simplify the development of WebRTC applications.

这篇关于Kurento应用开发指南(以Kurento 6.0为模板) 之七:Kurento API 参考的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/1093877

相关文章

Python中文件读取操作漏洞深度解析与防护指南

《Python中文件读取操作漏洞深度解析与防护指南》在Web应用开发中,文件操作是最基础也最危险的功能之一,这篇文章将全面剖析Python环境中常见的文件读取漏洞类型,成因及防护方案,感兴趣的小伙伴可... 目录引言一、静态资源处理中的路径穿越漏洞1.1 典型漏洞场景1.2 os.path.join()的陷

Python数据分析与可视化的全面指南(从数据清洗到图表呈现)

《Python数据分析与可视化的全面指南(从数据清洗到图表呈现)》Python是数据分析与可视化领域中最受欢迎的编程语言之一,凭借其丰富的库和工具,Python能够帮助我们快速处理、分析数据并生成高质... 目录一、数据采集与初步探索二、数据清洗的七种武器1. 缺失值处理策略2. 异常值检测与修正3. 数据

Python使用Tkinter打造一个完整的桌面应用

《Python使用Tkinter打造一个完整的桌面应用》在Python生态中,Tkinter就像一把瑞士军刀,它没有花哨的特效,却能快速搭建出实用的图形界面,作为Python自带的标准库,无需安装即可... 目录一、界面搭建:像搭积木一样组合控件二、菜单系统:给应用装上“控制中枢”三、事件驱动:让界面“活”

基于Python开发一个有趣的工作时长计算器

《基于Python开发一个有趣的工作时长计算器》随着远程办公和弹性工作制的兴起,个人及团队对于工作时长的准确统计需求日益增长,本文将使用Python和PyQt5打造一个工作时长计算器,感兴趣的小伙伴可... 目录概述功能介绍界面展示php软件使用步骤说明代码详解1.窗口初始化与布局2.工作时长计算核心逻辑3

如何确定哪些软件是Mac系统自带的? Mac系统内置应用查看技巧

《如何确定哪些软件是Mac系统自带的?Mac系统内置应用查看技巧》如何确定哪些软件是Mac系统自带的?mac系统中有很多自带的应用,想要看看哪些是系统自带,该怎么查看呢?下面我们就来看看Mac系统内... 在MAC电脑上,可以使用以下方法来确定哪些软件是系统自带的:1.应用程序文件夹打开应用程序文件夹

Python中OpenCV与Matplotlib的图像操作入门指南

《Python中OpenCV与Matplotlib的图像操作入门指南》:本文主要介绍Python中OpenCV与Matplotlib的图像操作指南,本文通过实例代码给大家介绍的非常详细,对大家的学... 目录一、环境准备二、图像的基本操作1. 图像读取、显示与保存 使用OpenCV操作2. 像素级操作3.

Redis指南及6.2.x版本安装过程

《Redis指南及6.2.x版本安装过程》Redis是完全开源免费的,遵守BSD协议,是一个高性能(NOSQL)的key-value数据库,Redis是一个开源的使用ANSIC语言编写、支持网络、... 目录概述Redis特点Redis应用场景缓存缓存分布式会话分布式锁社交网络最新列表Redis各版本介绍旧

Apache 高级配置实战之从连接保持到日志分析的完整指南

《Apache高级配置实战之从连接保持到日志分析的完整指南》本文带你从连接保持优化开始,一路走到访问控制和日志管理,最后用AWStats来分析网站数据,对Apache配置日志分析相关知识感兴趣的朋友... 目录Apache 高级配置实战:从连接保持到日志分析的完整指南前言 一、Apache 连接保持 - 性

Nacos日志与Raft的数据清理指南

《Nacos日志与Raft的数据清理指南》随着运行时间的增长,Nacos的日志文件(logs/)和Raft持久化数据(data/protocol/raft/)可能会占用大量磁盘空间,影响系统稳定性,本... 目录引言1. Nacos 日志文件(logs/ 目录)清理1.1 日志文件的作用1.2 是否可以删除

python web 开发之Flask中间件与请求处理钩子的最佳实践

《pythonweb开发之Flask中间件与请求处理钩子的最佳实践》Flask作为轻量级Web框架,提供了灵活的请求处理机制,中间件和请求钩子允许开发者在请求处理的不同阶段插入自定义逻辑,实现诸如... 目录Flask中间件与请求处理钩子完全指南1. 引言2. 请求处理生命周期概述3. 请求钩子详解3.1