甘肃RK3399处理板图像识别模块算法研发

传统的吊舱只能如上述那样工作，而要打造更加智能化的边海防无人机巡逻，则可以在光电吊舱中植入高性能的图像处理板，通过目标识别、检测算法的赋能，就能够让无人机实现目标识别检测、目标锁定跟踪等功能。为了进行有效结合，成都慧视开发了多块高性能的具备图像处理能力的光电吊舱。例如慧视VIZ-100T三轴三光目标定位吊舱，集10倍光学变倍可见光相机、640×512高分辨率红外相机、测程1.2km半导体激光测距机于一体，在边海防巡逻时能够昼夜成像工作。三轴高稳定精度平台框架能够有效保障画面的清晰稳定，并对目标点位的定位。吊舱内置我司自主开发的高性能AI图像处理板Viztra-HE030，该板卡采用瑞芯微旗舰级芯片RK3588，能够在算法的作用下实现高空目标识别检测、锁定跟踪人、车、船等目标，再通过和地面巡逻人员协调统一，就能够打造边海防的智能化体系。慧视光电能够深度定制RV1126系列的目标识别模块。甘肃RK3399处理板图像识别模块算法研发

首先摄像机采用的是可见光高清摄像机，具备1920*1080的分辨率，系统视场31.11°×17.8°，其中搜索视场15.8°×15.8°（1080P像素）。而图像处理则采用慧视开发的RV1126高性能图像处理板，之所以采用这块板卡，一方面得益于其低功耗、微型外观的设计，非常契合“智慧眼”这样对于空间要求严格的应用场景；另一方面RV1126具备2.0TOPS的算力，在国产化方面也十分完整，安全性十足。两者结合，就能够形成重量不超过100g的“智慧眼”。在算法的作用下，能够达到≥50Hz的跟踪帧率，≥25Hz的检测帧率，实现捕获4m*4m目标超过800m、6m*6m目标超过1000m。这就是“机器狼”的智慧化措施，通过一个“小小的”“智慧眼”的加入，便能够让其实现许多自动化任务。随着技术的不断发展，“机器狼”的形态将会不断进步，满足更多多样化需求。福建RV1126处理板图像识别模块电子元器件Viztra-LE026是一个小型化低功耗的AI识别模块。

特别是对我国西部山区、西北沙漠和跨越大江大河等管线的巡查，以及在自然灾害发生时的巡线检查，需要消耗大量的人力物力成本，甚至一些区域还会危及到巡检人员的人身安全。随着无人机巡检模式的应用，搭载吊舱的无人机可以实现对管道沿线的宏观监测，对管道本身可实现重点、微观监测。这些无人机吊舱可以内置高性能的AI图像处理板，能够对管线进行细致的目标识别检测，这样工作的效率是人工远不能及的。通常情况下，几十几百公里的管线由人工巡检需要几十天，交给无人机则能够在几天的时间就完成。并且无人机机动灵活的特点还能够去到人工无法到达的区域，减少安全隐患，特别是西部山区和西北沙漠隔壁等环境中，无人机拥有不可小觑的优势。

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。 慧视Viztra-LE034图像处理板可以用于低空经济领域。

无人机在军备领域有着突出作用，它不仅能帮助进行信息侦查，还能进行智能炮弹高空精细打击。其中，在智能精细打击领域，少不了人工智能的参与。通过人工智能的控制分析，能够实现对打击目标的AI识别。选择这样的方式，能够减少末端打击时对方电子干扰的影响，尽可能保证无人机的重复使用，图像处理设备显然比无人机本身更加经济。除了硬件方面，要实现这样的精细打击，算法的能力至关重要。在实际应用落地之前就需要大量的模拟试验来验证算法的识别能力，这个过程周期不可估量。传统方式下，需要大量的外场测试验证，整个流程繁琐费时费力。而这个工具的出现，则很好的优化了这个过程。机器人AI识别模块定制。辽宁机载吊舱图像识别模块目标检测

各类船只识别的模块定制。甘肃RK3399处理板图像识别模块算法研发

在我们生活生产中，许多小型化的无人机类似于昆虫，凭借其机动、灵活、体积小的特点能够在复杂的环境中执行飞行任务。但是再精细化的操控，也难以做到完全避免障碍物的阻碍，因此需要采用AI避障的功能。AI避障中很重要的一点是要对环境进行自动化的识别。利用高性能的AI图像处理板，再定制化目标识别检测的算法，通过对这类无人机作业环境的大量深度学习，就能够让无人机AI愈发聪明，能够快速识别摄像头范围内的物体，从而实现避障的操作。甘肃RK3399处理板图像识别模块算法研发