AI+低延迟低带宽,解决巡检机器人控制和视频传输难题

人生小满胜万全 2026-01-14 阅读:1513

巡检机器人现如今正慢慢取代传统的人工巡检,成为巡检领域的主力军。

在机器人中,只有大量采用不同类型的传感器技术,才能追求类人化的意识、行为、动作、功能和生物感知特征,同时具有人所不能及的独特优势和场景适应能力。

而图像处理模块的存在,则是让机器人具备识别、检测周边物体的能力,让其能够实现精准操作、避障等功能。

AI+低延迟低带宽,解决巡检机器人控制和视频传输难题

这些AI功能慧视光电开发的Viztra-HS063 AI图像处理板就可以实现,板卡采用RK3588s开发而成,作为RockChip全新一代旗舰AIoT处理器,它具备8nm LP 制程,搭载八核64位CPU,主频高达2.4GHz。内置AI加速器NPU,可提供6Tops算力,支持主流的深度学习框架。经过我司开发,植入检测算法,基于输入的可见光或者红外视频流实现对周边目标的检测识别。

将机器人和板卡深度结合,例如在铁路巡检中,小巧的机器人在轨道中滑行巡检,AI板卡就能够实时进行AI检测识别,精准找到一颗颗松动的螺栓,遗留的垃圾等,效率比人工巡检高出好几倍。

板卡整体尺寸为55*40*10.67mm左右,重量仅24.5g(不含散热器),小巧精致的外形不会占用过多的设计空间。设计双模拟输入接口,一路MIPI接口,提供多种选择,适应不同行业。

AI+低延迟低带宽,解决巡检机器人控制和视频传输难题

此外,在机器人作业时,高清视频的采集、编解码、传输一直是一个难点。该板卡能够集成LLSM低延迟低带宽流媒体传输系统,在延迟方面,板卡能够实现编解码5ms的极致压缩,整个采集、编解码、传输全流程延迟控制在100ms以内。实现低延迟控制巡检机器人进行远程作业。

在带宽控制方面,能够通过高效的编码算法和信号优化,以最低500K带宽占用控制多个机器人进行作业,同时回传高清视频,这在偏远地区多设备作业环境中,能够有效增强巡检机器人的稳定性。

AI参数指标

性能指标

跟踪帧率

60 Hz(随相机输入帧率,最高可支持到100Hz)

最小跟踪目标

2×2 像素(质心跟踪)

8×8 像素(相关跟踪)

跟踪精度

≤ 1 像素

跟踪速度

≥ 64 像素/帧

最小目标对比度(质心目标)

≥ 5%

最大跟踪目标数量(多目标跟踪)

≤ 64

识别帧率

25 Hz

最小识别目标

10×10 像素

识别性能(基于开源数据集:VisDrone2019-DET-test-dev)

0.616(mAP@0.5)

功能参数

支持的跟踪算法

质心跟踪、相关跟踪、多目标跟踪、智能跟踪

支持的检测算法

AI识别、质心搜索、模板匹配、运动目标检测

图像压缩编码格式

H.264、H.265

视频流输出格式

RTSP、UDP、RTMP、HLS等

视频流可配置参数

码率、I帧间隔、QP值

控制交互方式

RS422/RS232/UDP/TCP

硬件接口/参数

视频输入

1路 MIPI(需定制适配),2路 CVBS(PAL)

视频输出

1路 网络

串口

1路 RS422,1路 UART

网络

1路 百兆网口(默认输出RTSP视频流)

内存容量

32 G(可定制扩展)

视频压缩存储能力

≥ 2h(码率4M)

机械/电气参数

功耗

< 6W

工作电压

12V DC ± 2V

外形尺寸

55mm×40mm

环境适应性

工作温度

-20℃ ~ +60℃

存储温度

-20℃ ~ +65℃

  • 随机文章
  • 热门文章
  • 热评文章
热门文章
  • 西南地区持续阴雨天气 华北黄淮等地大气扩散条件逐步转差

    西南地区持续阴雨天气 华北黄淮等地大气扩散条件逐步转差
      摘要:   国内方面,昨日,全国降水整体较弱;内蒙古、东北地区等地出现大风降温天气。未来三天,青藏高原及云南、四川、贵州等地多阴雨天气,关注局地强降雨或持续降雨可能引发的次生灾害。   全球方面,昨日,欧洲东部美国东南部等地出现强降雨。未来三天,飓风“米尔顿”继续影响美国东南部等地;强冷空气影响中亚等地;欧洲大部大范围降水降温。   一、国内天气情况   1.实况   全国降水整体较弱 内蒙古东北地区等地出现大风降温天气   昨日8时至今日6时,全国降水整体较...
  • 在中超联赛赛场北京成都球迷高呼:北京加油,成都雄起

    在中超联赛赛场北京成都球迷高呼:北京加油,成都雄起
      9月14日晚,中超联赛成都蓉城对北京国安的比赛在成都凤凰山体育场举行。首都文明办工作人员到现场力促两地球迷的友好互动,引导球迷文明观赛。   开赛前,两地球迷早早来到赛场,成都球迷在赛场通道为等待入场的北京球迷拉歌拍照。一边是北京球迷激昂的歌声,一边是身穿“雄起”“成都”等字样球衣的成都球迷,画面和谐温馨。首都文明办给两地球迷代表赠送了“向北京榜样学习”宣传品,呼吁两地球迷在场上是对手,在场下是朋友。合影留念时,成都球迷高喊“北京加油”,北京球迷高喊“成都雄起”。...
  • 防风防寒!北京今天晴朗伴大风寒意十足 周末将迎小幅升温

    防风防寒!北京今天晴朗伴大风寒意十足 周末将迎小幅升温
      中国天气网讯 今天(12月27日),北京天气晴间多云,最高气温2℃,白天北风劲吹,阵风可达六至七级,风寒效应明显。本周末,北京仍以晴为主,风力不大,气温将有小幅上升。   昨天,北京晴冷在线,气温继续下跌,南郊观象台最高气温仅有2.6℃,加上风力较大,体感十分寒冷。   北京市气象台预计,今天白天晴间多云,北风三四级(阵风六七级),最高气温2℃;夜间晴间多云,北风二三级间四级,最低气温零下7℃。   明后两天,北京仍以晴为主,风力不大,最高气温将略升至5℃,最低气温...
  • 新手如何开始跑步?

    新手如何开始跑步?
    大家好,我是小贝~ 有喜欢我的分享的可以给我点个关哟~多多互动吧~🫰 跑步是最简单的运动之一。人类进化30万年,跑步是基因自带的能力。可以说天生人人都会跑,人人都可以跑。 所以,很多平时不跑步的人,想入门跑步,建议从以下4个方面开始 一、跑步一定要穿跑鞋! 10年前我跑步穿平时的休闲鞋跑了2周,跟腱受伤!因为休闲鞋没有缓震效果;对膝盖和跟腱的损害较大。 专业跑鞋鞋底有缓震设计,能减少跑步时对膝盖和脚踝的冲击力。保护膝盖和脚踝不容易受伤。 二、注意跑步频率和强度。 1、频率...
  • 大雾黄色预警:京津冀等8省市部分地区有大雾 局地强浓雾

    大雾黄色预警:京津冀等8省市部分地区有大雾 局地强浓雾
      据报道10月14日电据中央气象台网站消息,预计10月14日早晨至上午,河北中南部、北京、天津西部、山东西部、山西中东部、陕西北部、河南东北部和南部部分地区、湖北中部等地有大雾天气,其中,河北中南部、北京西部、山西中部、陕西北部、湖北中部等地的部分地区有能见度低于500米的浓雾,局地有不足200米的强浓雾。中央气象台14日6时继续发布大雾黄色预警。   此外,14日,华北中南部、黄淮中西部、汾渭平原等地大气扩散条件较差,有轻至中度霾,其中,北京南部、河北西部沿山部分地区有...