河北RK3399开发板图像识别模块算法研发

夏季，随着各家各户进入用电高峰，电力系统面临着不小的考验。如何保障基础用电成为电力供应的首要难题，传统的人工巡检被无人机替代后，巡检的效率有所提升，但是为了进一步保障巡检的精细度，无人机吊舱成为了一个关键的设备。无人机搭载智能化吊舱，比传统的摄像头巡检更加精确，一方面这些吊舱搭载高性能的图像处理板后具备AI识别检测的能力，通过目标识别算法的赋能，能够实现智能化巡检。另一方面，这些吊舱既能搭载可见光传感器也能配备红外传感器，可以达到24小时巡检工作的需求，并且这些摄像头具备变焦放大的能力，它们会比人眼更加精细，可以发现人看不到的问题，可以检查人工无法到达的区域，更加全能化。成都慧视可以定制高帧频目标跟踪的图像处理板。河北RK3399开发板图像识别模块算法研发

但这也遇到很多难点，通常情况下，视频回传的延迟大概在200ms左右，随着大量的弹打出，视频传输所需带宽就面临压力，如何在通信带宽有限的情况下，保证视频顺畅、清晰、无卡顿地传输，是分析改进这个工作需要解决的前期难点。针对于这个问题，慧视光电利用GS弱网高清音视频传输系统和RK3588打造的Viztra-HE030图像处理板结合，推出了低延迟低带宽图传解决方案。在一个窄带收发信道内，例如在信道有效带宽0.5Mb/s~2Mb/s内，多路视频和交互控制共用一对收发信道，信道支持数据透传，外部系统可以使用该信道，传输任意格式的数据；可实时调整视频码率，在低至500K带宽情况下依然可以回传清晰流畅的图像。可以使设备飞的更远、走的更远;可实现视频中继转发；能够基于H265实时视频编码；可实现基于视频流的“人在回路低延迟控制”。基于普通60帧相机，实现15ms的低延迟编解码，加上数据链传输延迟时间在30ms左右，目前业界前列。通用性强，使用更加灵活，适用更多应用场景；支持多路SDI视频在低至500K带宽情况下的同时传输（1080P60FPS），彻底解决“带宽苦恼”；整体时延约60ms（含相机、编解码、显示，不含传输），实现实时控制、实时打击。 重庆自主研发图像识别模块人工智能成都慧视共开发有三款图像处理板。

无人机搭载如光电吊舱等带有摄像头的设备后，达到了实现智能识别的硬件条件，但是传统的摄像头只能获取图像，并不具备AI识别的功能。无人机AI识别算法主要还是在于模仿人眼一样进行视觉处理，然后AI进行智能提取和分析图像，再和训练模型进行快速比对，从而在无人机快速飞行的过程中做到实时目标识别。首先，要想实现目标识别需要的硬件支持就是AI图像处理板。图像处理板通过算法的赋能，就能够对目标区域的物体进行AI识别分析，从而做出判断。由于无人机作业的环境复杂，因此对于图像处理板的要求需要进一步提升。成都慧视开发的Viztra-HE030图像处理板，采用了工业级芯片RK3588，采用先进架构，8核（4大4小）处理，算力能够达到6.0TOPS。同时，慧视光电能够根据需求环境定制丰富的输出接口。

多边形标注能够能够帮助我们标注一些规则复杂的物体，如动物、人、车、建筑物等，与矩形标注框等方法相比，多边形标注更能精确展示被标注物体的形状、大小以及实时形态，通过大量的多边形标注工作，能够更好的帮助我们提高算法模型的准确性和鲁棒性。传统的多边形标注方法中，标注者需要在物体的边缘上依次单击鼠标或使用绘图工具，将点连接起来形成一个封闭的多边形。标注的难度取决于被标注物体的复杂程度，相较于矩形框标注更加费时费力，如果遇到大量待标注目标，则极大地影响工作效率。高性能的图像识别处理板RK3399Pro。

目标识别算法是一种深度学习算法，其聪明程度需要我们不断训练，这就得益于大量的图像标注，通过对车辆行驶环境的数据集的大量标注，能够让AI更加聪明，标注得越多，识别的精度就可能越高。但是大量的图像标注跟工作显然会耗费大量的时间精力。而慧视SpeedDP的出现很好地解决了这个问题。SpeedDP是一个深度学习AI算法训练开发平台，他能够通过现有的算法模型或者自训练一个算法模型，实现对新数据集的快速AI自动标注，以此反复，帮助使用者提升算法性能。能够有效节约大量的时间。高性能的图像识别处理板RV1126。河北RK3399开发板图像识别模块算法研发

成都慧视光电能够打造一套完整的图像识别所需模块。河北RK3399开发板图像识别模块算法研发

RK3588作为瑞芯微国产化旗舰级芯片，用在目标跟踪领域，通常情况下跟踪帧率都在50Hz左右，这已经足够满足大多数应用领域的需求。但在许多特殊领域，如军备、边防，高帧频的视频输出能够在极短的时间内捕捉到更多的画面，实现高速动态场景的连续拍摄。高帧频的目标跟踪则能够获得更多的目标细节，便于做出下一步判断。许多中低端性能的由于算力等因素无法达到这样的需求，但RK3588作为性能怪，6.0TOPS的算力开发潜力无限。成都慧视就针对于这样的需求场景，在硬件的支持下，定制开发出能够支撑100Hz跟踪算法，从而打造出能够稳定实现100Hz目标跟踪的整合方案。河北RK3399开发板图像识别模块算法研发