自主研发图像识别模块技术

无人机能够通过高空拍摄快速获取大范围、多角度的地面信息。但是传统的摄像头只能获取视频数据，对于许多需要进行数据分析的行业来说显然不够智能化，从无人机视频数据中快速获取提炼大量有价值的信息，不仅能够提升工作效率，还能够减少不小的成本支出。这就是无人机的AI识别能力。通过识别算法，在无人机工作时就对目标范围进行AI检测识别，从而提炼所需信息。这就需要对无人机进行智能化改造，可以在传统无人机吊舱中植入成都慧视开发的高性能AI图像处理板，如利用RK3588深度开发而成的Viztra-HE030图像处理板，6.0TOPS的算力能够快速处理无人机识别到的复杂画面信息，这样就有了硬件基础，剩下的就需要对自身算法进行不断优化提升。如何选择合适的图像处理板性能？自主研发图像识别模块技术

“启明935A”系列芯片已经成功点亮，并完成各项功能性测试，达到车规级量产标准。启明935A是行业首颗基于Chiplet(芯粒/小芯片)异构集成范式的自动驾驶芯片，但并非单一芯片，而是一个家族系列。启明935HUBChiplet可以和不同数量的大熊星座AIChiplet互相搭配，再结合灵活的封装方式，快速形成不同性能等级的SoC芯片。它还支持高带宽的PBLink多芯互连，双芯双向带宽128GB/s，四芯双向带宽64GB/s。启明935A每颗芯片都支持比较大20路的1080p60摄像头输入，可应用于各类端侧AI部署。得益于大熊星座NPU天然支持Transformer结构，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。成都低功耗图像识别模块处理版利用RK3399Pro开发而成的Viztra-ME025图像处理板。

实现这些功能的技术中，图像处理基于AI图像处理板这一传感器。板卡具备快速图像处理识别的硬件能力，植入相应的AI算法，无人机就相当于装上了“智慧眼”，而且这个“智慧眼”居于高空，能够在一个定点，俯瞰大范围，实时监控货物的存放状态。远程控制技术基于网络通信，通过和图像处理板的结合，能够实现低延时低带宽的图像传输处理。在实际落地应用中，可以采用成都慧视开发的高性能图像处理板，其中RV1126系列的Viztra-LE026图像处理板，就是无人机的完美搭子。这款图像处理板具备2.0TOPS的算力，能够根据无人机型号进行接口定制，整体尺寸在40mm×40mm×10mm左右（核心板+接口板），小巧的外形即便是小型无人机也能够装上。此外，板卡整体功耗在4W左右，不会过多增加无人机的负担。

无人机被广泛应用于目标跟踪，其机动灵活的特点对地面的被跟踪对象而言简直就是降维打击。搭载摄像头以及传感器等设备后，无人机可以实现自主飞行，然后通过植入高精度的AI目标跟踪算法，就能够分析摄像头范围内的物体，通过AI对特征的进一步提取分析，就能够单独识别出目标物体形状，并锁定其位置。这种技术可以用于各种领域的信息侦查、监视、打击等任务，比传统的人工模式更安全更高效。要想实现这样的技术，可以通过在无人机中安装光电吊舱，然后在吊舱中植入高性能的AI图像处理板，通过算法的赋能就能够实现。成都慧视可以定制DVP接口的RK3588图像处理板。

在城市甚至郊外的许多区域，明令禁止无人机航飞，虽然会有人工进行区域巡查，但人工巡查始终无法做到滴水不漏。不法分子往往利用监管松散、薄弱的时候进行黑飞，这就给许多重要区域造成了安全风险。为了有效弥补人工监管的不足，智能化的空域AI识别被提出应用。其中，比较简单的方式是利用图像识别设备，通过目标识别算法的赋能，就能够实现对摄像头目标空域进行24小时不间断的AI识别，一旦发现无人机黑飞，系统能够立即锁定跟踪并向平台发出警报。成都慧视开发的Viztra-HE030图像处理板，能够兼容适配国内常规摄像头，在自研目标识别算法的共同作用下，即便是小目标像素的飞行器入侵也能够识别跟踪。目前，该板卡能够识别10*10像素的目标，能够锁定跟踪2*2像素的小目标，且整个目标捕获的时间延迟不大于100ms，快速识别跟踪目标不成问题。成都慧视利用RV1126芯片打造了一个高性能的Viztra-LE026图像处理板。山西目标跟踪图像识别模块人工智能

打造一套完整的图像识别模块。自主研发图像识别模块技术

在我们生活生产中，许多小型化的无人机类似于昆虫，凭借其机动、灵活、体积小的特点能够在复杂的环境中执行飞行任务。但是再精细化的操控，也难以做到完全避免障碍物的阻碍，因此需要采用AI避障的功能。AI避障中很重要的一点是要对环境进行自动化的识别。利用高性能的AI图像处理板，再定制化目标识别检测的算法，通过对这类无人机作业环境的大量深度学习，就能够让无人机AI愈发聪明，能够快速识别摄像头范围内的物体，从而实现避障的操作。自主研发图像识别模块技术