多系统适配目标跟踪经验丰富

设想这样一个场景：孙悟空在飞行过程中完成了一次变化（这里假设他变成了一只鸟），但这个变化并不是像西游记拍摄中有烟雾效果完成的，而就是通过身体结构发生渐变来完成的，这种情况下，检测器应该会在后续的检测任务中失败，因为设计好的检测器只是为了检测目标孙悟空的存在，孙悟空变身之后已经不存在这个目标，检测器是不会有火眼金睛继续检测到变化后的孙悟空的。但是，对于跟踪设备就不一样了，跟踪目标，哪怕目标在跟踪过程中发生了巨大变化，这些都是跟踪设备的本质能力。理想的跟踪设备应该可以很好的跟上孙悟空渐变的整个过程，并且可以继续后面变身之后对鸟的跟踪。工程师以RK3399PRO核心板为基础进行定制开发，让摄像头更加智能高效，能够输出高清流的图像视频。多系统适配目标跟踪经验丰富

长时间一直进行这样的图像标注工作，那无疑是枯燥而乏味的，手酸不说，更多的是精神上的折磨，进而效率大打折扣。但这又是算法提升的必要途径，无法跳过，当项目紧急时，甚至需要多人加班加点赶进度。这样的痛苦现状急需改变！慧视光电的算法工程师为了提高这一的效率，开发了一个深度学习算法开发平台SpeedDP。它的基本逻辑是基于一个手动标注一定量的数据集进行训练，形成一个可用的预选模型（如果已有模型可以直接使用），然后训练一定阶段后，可以评估此模型的能力，如果能够满足使用就可以对相同目标的新数据集（未进行任何标注）进行AI自动化标注。这一过程的省去了大量需要对新数据集的手动拉框工作，同时也在不断反哺此模型算法，帮助提升性能。多系统适配目标跟踪经验丰富RK3399PRO图像处理板是我司自主研发的目标跟踪板，该板卡采用国产高性能CPU，搭载自研目标跟踪及跟踪算法。

这种智慧化的建设就是采用图像处理。在无人机内部安装图像处理板，这些图像处理板和相机、算法的有机结合就形成了无人机的智慧眼，有了这个智慧眼，无人机就能够对视野范围内的物体进行AI识别，从而自动完成避障、巡检等操作。成都慧视开发的小型化图像处理板Viztra-LE026就是专门为无人机设计的一款“智慧眼”处理器。这块板卡采用了RV1126开发而成，具备2.0TOPS的算力，外形呈圆形化设计，整体外观大小为Ф38mm*12mm，重量只有12g，功耗不高于4W，用在无人机领域具有功耗低、尺寸小的优势，不会过多占用和消耗无人机的内部空间和续航。

目标跟踪是在首帧中给定待跟踪目标的情况下，对目标进行特征提取，对感兴趣区域进行分析；然后在后续图像中找到相似的特征和感兴趣区域，并对目标在下一帧中的位置进行预测。作为计算机视觉领域的一个热点研究方向，目标跟踪一直都是一项具有挑战性的工作。目标跟踪技术在导弹制导、智能监控系统、视频检索、无人驾驶、人机交互和工业机器人等领域具有重要的作用。从上世纪50年代目标跟踪的起源到现今，尽管已有大量的研究成果，但是在复杂条件下实现实时准确的跟踪依旧难以实现。慧视RK3399PRO图像处理板能实现24小时、无间隙信息化监控。

序列图像的差异通常是运动目标检测和跟踪的出发点，认为目标的运动是图像差异的根本原因。但是，这是建立在背景本身不运动的前提下的。因此，在许多跟踪系统中，比如车载，由于车的振动导致传感器位置的变化，表现在图像上就是背景的运动，因此在做差图像和背景自动更新之前，都必须先经过配准，即让所有图像在都同一个坐标系之下，以消除背景的运动。在不同的应用场合，配准的方法多种多样，比如当两个图像之间只有平移变化时，计算出它们的平移量即可实现配准；由于平移变化对图像的相位信息影响较大，在频率域利用相位相关可以实现配准。相关滤波跟踪为模板跟踪方式，基于选定图像区域创建模板实现跟踪，可跟踪图像中任意指定区域。湖南省时省力目标跟踪

DVP接口转网络输出的视频跟踪板。多系统适配目标跟踪经验丰富

“启明935A”系列芯片已经成功点亮，并完成各项功能性测试，达到车规级量产标准。启明935A是行业首颗基于Chiplet(芯粒/小芯片)异构集成范式的自动驾驶芯片，但并非单一芯片，而是一个家族系列。启明935HUBChiplet可以和不同数量的大熊星座AIChiplet互相搭配，再结合灵活的封装方式，快速形成不同性能等级的SoC芯片。它还支持高带宽的PBLink多芯互连，双芯双向带宽128GB/s，四芯双向带宽64GB/s。启明935A每颗芯片都支持比较大20路的1080p60摄像头输入，可应用于各类端侧AI部署。得益于大熊星座NPU天然支持Transformer结构，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。多系统适配目标跟踪经验丰富