研发AI智能应用

无人装备作战狼群，有“狼”负责侦查，有“狼”负责打击，而有的“狼”则负责后勤保障，这种无人装备集群作战能够有效辅助特种作战。“机器狼”的升级之所以能够满足多样化的任务，得益于其智能化的建设。就是下面这样的一个"智慧眼"的加入，使得机器狼能够自主完成许多任务。这个智慧眼由光学系统（彩色图像）、摄像机、图像处理、电源系统及机械结构组成，然后在外面加上外壳，形成一个整体。而拆分来看，产品主要就由高清摄像机和高性能的图像处理板组成。FPV识别算法用SpeedDP帮助提升精度。研发AI智能应用

在无人机摄像头的基础上加装慧视光电开发的Viztra-LE026图像处理板，这是一块轻型化、低功耗的图像处理板，用在无人机上面既不会过多占用空间，也不会过多消耗续航，通过目标识别算法的赋能，就可以针对像东北虎这样的动物AI自动识别，一旦识别到老虎的特征物体，无人机就能够立即锁定并抵近观察，为消防和公安提供精确坐标。Viztra-LE026图像处理板采用的是瑞芯微RV1126芯片，能够输出2.0TOPS的算力。而在算法方面，成都慧视能够提供一站式AI算法训练平台SpeedDP，通过对大量动物的标注数据集的模型训练，能够实现对新数据集的快速AI自动标注，然后提升识别算法的性能。研发AI智能应用成都慧视推出的SpeedDP很贵吗？

在这些小型飞行器自主避障飞行中，算法的性能很关键，他能帮助规划路线，识别障碍物。为了满足这样小型化飞行器的需求，成都慧视开发了同样是小型化体积的AI图像处理板Viztra-LE026，这块板卡采用了瑞芯微高性能芯片RV1126，体积小、功耗低，用在小型无人机上不会过多增加其负担。而4和处理器，支持INT8和INT16，能够输出比较大2.0TOPS的算力，足以满足在复杂环境中快速进行识别检测。

此外，成都慧视推出的深度学习算法开发平台还能够针对算法进行模型训练，通过大量的训练来提升算法性能。

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。SpeedDP是一个AI训练平台。

多目标跟踪是指在连续的图像中，通过目标检测算法识别出每一帧中的目标，并在时间上跟踪它们的位置和状态。但目标会不断发生尺度、形变、遮挡等变化，而且还会有目标出现和消失的情况，再加上视频采集端的相机所处环境可能受到外界影响导致抖动的情况（例如无人机高空检测），就会给多目标跟踪造成一定的困难。由于我们不能控制目标，所以只能从视频采集端维护跟踪的稳定性。因此，成都慧视针对于多目标检测跟踪抖动丢失的优化方法是：1.改进目标检测,使用更加鲁棒的目标检测算法。2.增强特征描述，利用深度学习提取更高级别的语义特征，这些特征对于小范围内的视角变化具有更好的不变性3.改进运动模型，在算法中加入对摄像头运动的估计，通过补偿摄像头运动来减小目标真实运动与预测之间的差距。4.数据关联策略，设计更灵活的数据关联算法，允许更大的距离阈值来匹配候选目标。成都慧视能够帮助训练算法吗？研发AI智能应用

利用成都慧视推出的SpeedDP能够帮助训练AI识别算法。研发AI智能应用

无人机夜间工作时需要依靠红外机芯进行高清成像，而想要具备AI检测识别的能力则可以通过植入图像处理板。成都慧视可以根据需求提供整套的建设方案，实现快速集成开发。慧视Viztra-LE026图像处理板+MiNO 17红外机芯的组合方案，两款产品均使用小巧设计，整体组合重量在30g左右，并且都采用小功耗设计，用在无人机领域不会过多增加负担。在算法的赋能下，能够实现稳定的目标检测识别。Viztra-LE026图像处理板重量在10g左右，采用了瑞芯微全国产化芯片RV1126，能够输出2.0TOPS的算力，功耗不高于4W。能够以30Hz帧率跟踪像素2*2的目标，能够识别像素为12*12的目标，且识别率高于85%。而MiNO 17红外机芯重量在20g左右（净重5g（不含镜头）），像素分辨率为640*512，采用9/13/25mm三种定焦设计，支持18中伪彩选择，功耗小于0.75W。研发AI智能应用