重庆图像识别模块应用

无人机是巡检领域的空中巡检员，搭载智慧“眼”的无人机能够替代人工，实现自主巡检。无人机可以搭载红外光和可见光两种传感器，实现昼夜巡检也不是梦，一基杆塔*用十分钟的时间便可完成巡检工作。例如在电力巡检中，传统模式下，工人只能采用望远镜远程查看线路，不仅费眼睛，还费时间。同时，由于光线等外界因素的干扰，缺陷的确认也加大了难度，不得不背着安全带近距离校验，工人的安全也受到威胁。而无人机则可以在发现缺陷后，通过抵近观察的方式进行仔细查看，收集缺陷周围360°照片回去分析，不仅安全也高效率。分别是利用RV1126开发而成的Viztra-LE026图像处理板；重庆图像识别模块应用

而这个过程中，如何让无人机理解并提取分析图像很关键，这就需要高精尖的目标识别算法。成都慧视开发的AI智能算法分析是一种计算机的“分析”和“识别”技术，是一种计算机“视觉”科技，也就是把摄像机当作人的“眼睛”，智能设备终端作为人的“大脑”，让视频系统具有人一样的判断危险或者其他特殊情况发生的能力。图像处理板和这样的目标识别算法的合力之下，就可实时对目标进行识别或者人为的的锁定，同时可以根据输出目标的靶量信息，对目标进行实时跟踪。这就是无人机实现智能识别的一种高效方法，通过实时的目标识别处理无人机获取的数据，让无人机的工作更加高效。福建RK3399Pro主板图像识别模块软件定制小型化图像识别模块RV1126。

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。

小兴安岭的日常巡护，是构筑东北生态安全的必要措施，进入冬季，整个小兴安岭将处于冰雪覆盖，按照传统的巡检模式，危险且费力。整个小兴安岭森林覆盖率达到96%，只靠肉眼的观察，很容易错过死角空白区的潜在危险，因此，无人机上线了。将无人机智能化，在吊舱的基础上加装具备智能图像处理的板卡，再通过定制算法的植入，一个智慧“巡检员”就上线了。面对大森林这样复杂的环境，成都慧视开发的高性能AI图像处理板Viztra-HE030可以胜任，这块板卡采用了瑞芯微旗舰级芯片RK3588，能够输出6.0TOPS的算力，考虑到小兴安岭冬天寒冷的环境，这款板卡能够适应零下40℃的环境，长时间的户外工作不在话下。成都慧视开发的图像处理板都是经过严格的测试。

无人机夜间工作时需要依靠红外机芯进行高清成像，而想要具备AI检测识别的能力则可以通过植入图像处理板。成都慧视可以根据需求提供整套的建设方案，实现快速集成开发。慧视Viztra-LE026图像处理板+MiNO 17红外机芯的组合方案，两款产品均使用小巧设计，整体组合重量在30g左右，并且都采用小功耗设计，用在无人机领域不会过多增加负担。在算法的赋能下，能够实现稳定的目标检测识别。Viztra-LE026图像处理板重量在10g左右，采用了瑞芯微全国产化芯片RV1126，能够输出2.0TOPS的算力，功耗不高于4W。能够以30Hz帧率跟踪像素2*2的目标，能够识别像素为12*12的目标，且识别率高于85%。而MiNO 17红外机芯重量在20g左右（净重5g（不含镜头）），像素分辨率为640*512，采用9/13/25mm三种定焦设计，支持18中伪彩选择，功耗小于0.75W。利用RK3588开发而成的Viztra-HE030图像处理板；小体积图像识别模块设备

成都慧视可以定制CVBS接口的RK3588图像处理板。重庆图像识别模块应用

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。重庆图像识别模块应用