成都行为识别图像识别模块分析

eVTOL是指电动垂直起降飞行器，大力开展eVTOL试点，是对低空经济的强动力注入，而无人机正是这一领域的关键选择之一。无人机在低空经济中扮演者重要角色，随着应用领域的不断增多，未来无人机的数量将呈式增长，届时eVTOL起降中心将聚集众多各式各样的无人机，如何高效有序的让无人机彼此工作而不互相干扰是行业值得思考的一件事。当许多无人机需要同时起飞执行不同的任务时，如果操控不当，或者收到外力影响，就容易出现事故，而人为的反应毕竟有延后，不可能做到完全的补救操作，因此无人机自身的规避措施建设一样重要。图像识别需要图像处理板的硬件支持；成都行为识别图像识别模块分析

例如是飞过来的杂物，还是闯入的人或者动物，如果摄像头能够智能识别，那么就可以实现上述目的。而要实现这样的功能，一个很简单的方法就是在传统摄像头的基础上植入高性能的AI图像处理板。图像处理板通过定制接口和摄像头连接，在目标识别算法的赋能下，就能够对摄像头获取的物体进行AI识别分类，从而对摄像头发出指令是否锁定跟踪目标，从而转动摄像头。成都慧视开发的Viztra-ME025图像处理板，是慧视光电采用瑞芯微RK3399pro芯片开发而成的高性能板卡，芯片基于双Cortex-A72+四Cortex-A53大小核CPU结构；CPU主频1.8GHz；高性能+强大的算力3.0TOPS，GPU采用Mali-T860MP4,支持1080P视频编解码、H.265硬解码。河北自主研发图像识别模块解决方案无人机AI目标跟踪选择哪块图像处理板？

成都慧视光电技术有限公司开发的RK3588系列图像处理板Viztra-HE030图像处理板能够在算法的支持下，对高速公路上的车辆进行检测识别，对个别车辆进行指定安全跟踪和检测，这将有助于有关部门进行测速和安全驾驶的管理侦查。通过实时数据的采集分析，还能够找出高速拥堵源头，为交通疏导提供精细信息，为提升整条道路的通行效率提供帮助。在夜间，图像处理板也可以和红外相机有机结合，实现AI检测识别的功能。24小时工作能力也为全天时的交通管理提供技术支撑。

无人机的智能化是推动低空经济发展的重要引擎，打造智能无人机需要通信、控制、传感器等多种技术的共同作用，其中图像处理板的目标检测识别技术能够在智慧巡检、智慧交通管理、智慧河湖巡查等领域有着积极作用。在成都慧视开发的多款图像处理板中，Viztra-LE026以小型化、低功耗的特点深受行业青睐。Viztra-LE026图像处理板采用了全国产化芯片RV1126，板卡外形呈圆形设计，尺寸为Φ38mm*12mm，重量12g，虽然小巧，但是算力可达2.0TOPS，能够凭借1路MIPI视频输入和1路DVP视频输入实现对目标实时自主检测、识别，并自动或手动锁定跟踪人、车、船等目标。小型化图像识别模块RV1126。

SpeedDP用于模型训练和评估测试的数据集是由一系列的图像和标注文件组成的，平台支持多种开源数据格式如VOC和COCO。而目前平台共支持yolox系列和yolov8系列模型用于模型训练（分割任务支持yolov8模型），通过不断额测试验证，就能够让AI实现海思、RockChip嵌入式硬件平台等模型部署的可视化AI开发功能。经过验证，训练成熟后的AI进行标注时，通常情况下，7-8ms就能标注一张图像，这是人工标注远不能及的速度。目前，我司能够为该平台提供完整的人、车、船等目标检测模型的数据提供，也可以根据应用场景进行特殊定制。越高性能的图像处理板越能处理复杂的场景。河北自主研发图像识别模块解决方案

高性能的图像识别处理板RK3588.成都行为识别图像识别模块分析

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。成都行为识别图像识别模块分析