行业突破!四信实现低延时摄像头弱网状态100ms以内实时传输

  随着人工智能、大数据、区块链等技术在城市中快速发展,人们日常生活中已经离不开网络的支撑,而实现“人与人”、“人与物”及“物与物”之间高速连接应用的“时延”,是网络支撑中最重要的存在。

  以城市生活例子为例,当网络延时出现问题,将会导致众多重要领域的现场运行带来极大的负面影响,譬如智慧交通系统中交通信号灯的延时可能导致交通拥堵和事故增加、医疗服务中的延时可能影响紧急救援和诊疗效率,航空航天中的各项任务更是要求低于毫秒级的延时,否则失之毫厘谬以千里。

  而在物联网场景中,大部分应用场景的网络环境都较为复杂,涉及多种无线通信传输、多层跨网穿透,现场电磁干扰度大、数据传输协议繁杂,如何让通信通道稳定可靠的同时又能将延时降低,是行业中各家企业都在探索的方向。

  

\

  需求分析

  目前各领域场景应用的大多数远程控制基于有线网络,虽然有线网络稳定,但也存在一些问题,如灵活性较差,难以支持大范围移动的特种设备。另一方面,要实现远程控制,不仅需要可靠的网络保证操控的实时性、灵敏度,还需要足够清晰度、低时延的视频回传提供视觉支撑,以达到“所见即所得”。

  然而现有的远程控制视频回传基于传统视频画面,在经过摄像头编码处理、网络传输、后台视频服务器转码、显示端解码后,端到端的时延非常高,时延往往超过500ms甚至秒级,导致后端操控端的视频画面出现严重的延迟,从而容易出现误操作和事故的发生。

  弱网状态下的时延行业瓶颈与技术解析

  得益于5G的出现,业界已经可以把无线通信中的延时降低到梦寐以求的1毫秒,但是这仅限于数据传输,且无线通信场景中还是存在一定的波动。

  而传统的摄像头,从采集到图像到本地局域网设备观看到第一帧图像,通常需要200~500毫秒,如果要通过4G或5G远程观看,则1~2秒的延时是非常常见的。视频延迟的原因不仅仅是信号从A点到B点的传输速度,还包括将原始摄像头输入处理为编码和解码视频流所需的时间。许多因素会导致延迟,这取决于传递链路和涉及的视频处理步骤的数量。尽管这些延迟可能各自很小,但累积起来可能会很快增加。

  摄像头从采集到出图的一般流程示意:

  

视频实时传输

  视频实时传输的QoE核心指标是清晰度、延时、流畅度,三者之间存在相互矛盾,视频越清晰则所需的带宽越大,因此造成卡顿的概率越高,如果比较保守的选择低清晰度的视频流,虽然可以减少卡顿概率,但也会牺牲视频质量从而无法提高QoE,另一方面,如果增加播放缓冲,可降低因信道抖动而导致的卡顿,但也将导致延时的增大。

  可见研究难点在于如何在保障音视频质量和流畅的前提下,降低传输延时,而端到端延时主要由两部分构成:

  ● 音视频数据的采集、编码、传输、处理、解码和显示等各环节均会产生延时,特别是使用TCP等面向连接的传输协议时,拥塞控制会导致发送数据堆积,进而增加传输延时。

  ● 为了应对信道的不稳定性,保证音视频播放的流畅,必须建立buffer缓冲区以及传输中继,这也会直接导致延时的增加。

  在信道传输状况良好的情况下,可以大幅降低缓冲,因此低延时并非难事,但现实是各种接入网和骨干网的信道质量差别很大且不稳定:

  ● 无线网络环境,包括环境干扰、电磁对抗,也包括多个信道之间的相互干扰是一种常态,这使得信道的丢包、误码、延时抖动难以避免。

  ● 音视频等大数据量的传输、多设备共享信道加剧信道拥塞和竞争。

  ● 5G等技术的普及,虽可大幅降低接入网络的延时并增加带宽,但随着频率的提高,5G也更容易受到外部干扰。

  目前无线信道是主流,通常包括微波、WIFI、4G/5G、低轨卫星等,在无线信道中误码丢包、延时抖动是不可避免的,且是典型的分布式、去中心化的开放信息系统,因此:

  ● 基于有限的特定模型进行预测和优化,而非通过一个或是某几个技术相融合以此达到最终目标实现。

  ● 信道优化代价高、难度大,也无法解决大部分问题。

  ● 传统视频编码控制、传输理论与算法未针对低延时场景。

  进一步的,依靠传统技术更难以同时满足视频传输的实时、流畅、清晰,往往会牺牲一个或两个维度来满足另一个维度。

  四信高可靠低延时视频传输方案

  针对目前行业中存在的共性问题,四信推出了物联网场景中的高可靠低延时视频传输方案。通过云边端三位一体配合协同,在不损失成像效果和流畅性的情况下,不仅成功地将延时缩减了一位数,在稳定网络环境下甚至能达到50ms以内,即使是在移动场景中采用蜂窝通信技术的弱网环境下,也能控制在80ms左右。

  该技术及产品涉及传输、高性能计算、音视频编码等领域,重点解决中弱网下面向海量并发的低延时和超低延时交互的可靠性问题。采用MAS架构的全链路协作与协商机制,并将科学理论与工程方法结合,在此基础上发明创造多个涉及音视频低延时互动的关键方法。

  以下是采用集成ilive技术的四信最新一代AIoT摄像机F-SC242与目前业界较为先进的知名摄像机制造商之间的延时对比测试视频。

  目前,该方案已成功部署于多个车路协同、港口无人龙门架操控及实时图像回传项目中。尤其在某工厂的智能化改造项目中,四信高可靠低时延传输方案起到重要作用,为该工厂的数字化转型实现里程碑突破。

  该工厂原先的大型AGV无人物流叉车使用的雷达避障方案,然而雷达探测的角度有限,易受现场粉尘、激光及其他光波等环境因素影响,且无法识别障碍物的具体类型,因此经常出现剐蹭及碰撞事故,因此该厂商老板打算放弃当前方案,采用视觉避障方案,但因成本及算法性能需求,仅能将算法部署在服务器端,发现常规摄像头方案回传视频的延时

  根本无法满足现场的避障需求,只能将视觉识别的方案搁置。

  而随着5G全连接工厂的东风吹起,四信结合该厂商当前运行的实际情况,将低延时摄像头部署在无人物流叉车上,实现端侧的一些基础图像识别,同时实现现场图像实时传送至服务器端进行更高层级的算法分析,不仅解决避障及物体识别的问题,还能通过多路图像协同进行物流叉车运行路线的实时调优,在降低故障率的同时极大提升生产物流效率,必要时候还能远程人工接管AGV叉车的运行操作。

  

AGV叉车

  产品推荐

  5G RTU网络摄像头

  

5G RTU网络摄像头

   物联网 RTU 摄像头作为智能物联网监控系统的主要产品,专为工业级物联网应用而设计。采用工业级 4G/5G 模块,可以提供无线长距离、低延迟的高清视频。同时内置高性能工业级 CPU,采集各类传感器数据并进行基本协议转换,实时在前端进行人工智能视频分析。

  海螺摄像头

  

5G RTU网络摄像头

  是一款小尺寸室内海螺摄像头,可选两百万像素的Sensor,可定制多种IoT接口,精致高端的设计适合多种室内环境的部署。目前该款产品已经广泛应用于智慧工厂、智慧港口、智慧园区等大型项目中。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/452138.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

刷题日记——16进制不进位加法(厦门大学机试)

例题 分析 输入 本题解题关键在于输入的两个数位数不同时候需要尾数对齐,由于是16进制输入,含有字母,需要当作字符串输入,当然输出也要字母,那么就需要我们的两个老伙计了,一个是map,另一个是…

第五篇【传奇开心果系列】Python的自动化办公库技术点案例示例:深度解读Pandas在教育数据和研究数据处理领域的应用

传奇开心果博文系列 系列博文目录Python的自动化办公库技术点案例示例系列 博文目录前言一、Pandas 在教育和学术研究中的常见应用介绍二、数据清洗和预处理示例代码三、数据分析和统计示例代码四、数据可视化示例代码五、时间序列分析示例代码六、数据导入和导出示例代码七、数…

搜维尔科技:工作室选择 OptiTrack 进行新的虚拟制作舞台

35North Studios 成立于 2020 年,是一家最先进的制作工作室。他们的全方位服务方法可帮助电影制片人和企业在一个设备齐全且先进的地点规划、拍摄、编辑、评分和完成项目。该工作室位于爱荷华州克利尔湖,为创作者提供了一个安静的空间,让他们…

就业班 2401--3.12 Linux Day16 PXE布置——自动化装系统

什么是PXE? PXE,全名Pre-boot Execution Environment,预启动执行环境;通过网络接口启动计算机,不依赖本地存储设备(如硬盘)或本地已安装的操作系统;由Intel和Systemsoft公司于1999年…

leetcode-hot100-矩阵

73. 矩阵置零 给定一个 _m_ x _n_ 的矩阵,如果一个元素为 0 ,则将其所在行和列的所有元素都设为 0 。请使用 原地 算法。 **输入:matrix [[1,1,1],[1,0,1],[1,1,1]] 输出:[[1,0,1],[0,0,0],[1,0,1]] 两次遍历,第一…

如何用SSH连接

以gitlab的SSH来举例,包括配置与克隆的过程: Git 是一个分布式版本控制系统,这意味着您可以在本地工作, 然后将您的更改共享或推送到服务器。在这种情况下,您推送到的服务器是 GitLab。 GitLab 使用 SSH 协议与 Git …

牛角表情生成器微信小程序版

1.纯前端输出,无需后台,无需域名,速度杠杠快! 2.完美支持微信端和抖音端; 3.双端均支持配置开启流量主广告,包括:激励视频广告、插屏广告、banner广告、原生广告、封面广告等; 4.…

Unity URP 如何写基础的曲面细分着色器

左边是默认Cube在网格模式下经过曲面细分的结果,右边是原状态。 曲面细分着色器在顶点着色器、几何着色器之后,像素着色器之前。 它的作用时根据配置信息生成额外的顶点以切割原本的面片。 关于这部分有一个详细的英文教程,感兴趣可以看一…

【Linux进阶之路】HTTP协议

文章目录 一、基本概念1.HTTP2.域名3.默认端口号4.URL 二、请求与响应1.抓包工具2.基本框架3.简易实现3.1 HttpServer3.2 HttpRequest3.2.1 version13.2.2 version23.2.3 version3 总结尾序 一、基本概念 常见的应用层协议: HTTPS (HyperText Transfer Protocol Sec…

sqllab第五关通关笔记

知识点: 报错注入函数语法(详见第二关笔记)报错注入打印位数最多32位对于大于32位的数据最好使用截取函数进行控制;以保证输出完整mysql表中的重点数据库 information_schema (mysql 5.0以上) schemata …

采购管理系统:寻源到付款 (S2P) 流程自动化有什么好处?

企业的采购部门由各种流程和团队驱动,包括采购和应付账款。为实现战略目标而采用的策略流程之一是寻源到付款(S2P)流程。 何时使用 “寻源到付款”? 顾名思义,寻源到付款的主要目的是寻找最佳供应商以满足业务需求&a…

双场板功率型GaN HEMT中用于精确开关行为的电容建模

来源:Capacitance Modeling in Dual Field-Plate Power GaN HEMT for Accurate Switching Behavior (TED 16年) 摘要 本文提出了一种基于表面电势的紧凑模型,用于描述具有栅极和源极场板(FP)结构的AlGaN/GaN高电子迁移率晶体管(…

5.BOM-操作浏览器(BOM、插件、本地存储)

BOM // BOM操作:操作浏览器(通过js的方式实现浏览器中的某些功能)// a)通过js的方式实现页面刷新效果// b)通过js的方式,实现浏览器的上一页、下一页// c)通过js的方式,实现页面的跳转Window对象 window是浏览器对象,又称为顶级对…

redis题库详解

1 什么是Redis Redis(Remote Dictionary Server) 是一个使用 C 语言编写的,开源的(BSD许可)高性能非关系型(NoSQL)的键值对数据库。 Redis 可以存储键和五种不同类型的值之间的映射。键的类型只能为字符串,…

C++函数 加括号与不加括号

很多时候,我们会看到一些在创建对象时有的加括号有的不加括号 那么,这是什么情况呢? 总结:函数需要加上括号,加上括号会对函数初始化,不加括号可能导致未知错误 我们来验证一下。 1.基本数据类型不带括…

二级指针作为函数参数——可以改变调用函数中传入指针的值(不是指向地址的值哦!)

主要是看这篇文章: 二级指针作为函数参数_二级指针做函数参数-CSDN博客 对里面的程序进行一些修改和补充,调试加更多说明。 1、一级指针情况: #include"stdio.h"int my_strlen1(const char* str) {int count 0;int i 0;if (N…

【功能大全】手机短信验证码一键注册登录流程

目录 发送验证码 注册登录 用户表设计 ​编辑申请腾讯云短信与密钥 找到云短信服务 开通腾讯云短信服务 ​编辑​​​​​创建短信签名 ​编辑​编辑创建短信正文模版​编辑​编辑 等待审核 测试短信​编辑 SDK密钥创建 SpringBoot集成腾讯云短信 pom中导入腾讯云短…

Uni-app跟学笔记(一):新建项目、运行、tabbar、全局配置

文章目录 1)新建项目2)项目运行3)项目结构4)开发规范5)globalStyle全局外观配置6)pages页面配置7)tabbar8)Condition 本博客为 uni-app 此门课的跟学笔记,目的是便于个人…

HTML5:七天学会基础动画网页12

“书接上回”继续对transition补充,在检查中找到ease后,鼠标放到ease前的紫色小方块就可以对运动曲线进行调整,这个曲线叫贝塞尔曲线,这里不做别的补充,不用了解,我们只要知道这个运动方式不只是有简单的匀…

定时执行专家 —— 让工作更高效,生活更便捷

在现代社会,高效的时间管理已经成为我们工作和生活中不可或缺的一部分。为了实现这一目标,我们经常会借助各种工具和软件来辅助我们完成定时任务。今天,我要为大家介绍一款功能强大、操作简便的定时任务执行软件——《定时执行专家》。这款软…