助力泛安防产品落地,乐动ledong(中国)微推出前后端完整解决方案
2021-01-06
近日,乐动ledong(中国)微针对智慧视觉应用领域发布完整解决方案:聚焦前端产品的RV1126/RV1109两大智慧视觉处理器、专注后端NVR/XVR产品方案RK3568和RK3588。多场景覆盖之下,将智慧视觉产品从“看得见”、“看得清”迈入“看得深”、“看得懂”、“能预见”的多维智能感知视界。
聚焦前端视觉产品 RV1126/RV1109
在前端,为契合不同场景及细分行业的需求,乐动ledong(中国)微推出两款高低搭配芯片RV1126与RV1109,均采用14nm工艺制程,内置NPU及ISP的智慧视觉处理器。
RV1126的CPU为四核ARM Cortex-A7,NPU为2.0Tops,内置1400万高性能、3帧高动态ISP;RV1109的CPU则为双核ARM Cortex-A7,NPU为1.2Tops,内置500万高性能、3帧高动态ISP。视频编解码方面,RV1126支持4K H.264/H.265,RV1109支持500万H.264/H.265,RV1109和RV1126 硬件上是pin 2 pin,产品升级无缝衔接。拥有以下六大优势:
一、看的清
RV1126与RV1109具备多级降噪、3帧HDR等技术,即可保证场景的动态范围,又能满足黑光全彩的需求,让“看得清”成为现实,更符合智慧视觉类产品的实际痛点诉求
二、听的清
内置HDAEC算法、支持麦克语音阵列,RV1126与RV1109让高清语音全面落地,增强声音采集及拾音距离
三、占用空间小
低码率、低延迟编码、感知编码让空间占比更小,节省后端存储成本
四、AI算力高
异构计算、混合量化、完善工具和配套AI算法、网络模型架构支持丰富,实现AI功能扩展。同时,功耗不及所需GPU的10%,支持Tensorflow、PyTorch、Caffe、MxNet、DarkNet、ONNX等,直接转换和部署
五、软件定义摄像头
Fast Boot、双系统架构、SDK开源开放等,客户根据产品需求进行深度化定制,避免产品同质化
六、丰富的加解密引擎
支持TrustZone技术、含国密在内的多个密码引擎、安全启动,确保数据的安全性和完整性
除以上六点外, RV1126与RV1109均有丰富接口,包括千兆以太网接口,且有TSO网络加速;USB 2.0 OTG和USB2.0 host;两个 SDIO 3.0 接口;8通道 I2S with TDM/PDM, 2通道I2S……满足多种应用场景的需求。
前端三大视觉应用产品优势
智慧视觉领域的应用场景十分广泛。在前端,依产品形态分为三大领域:IPC智能网络摄像头、电池IPC智能门铃/猫眼、闸机/门禁/考勤类产品。
针对前端产品形态、场景和需求的差异,RV1126与RV1109在保持全面支持的同时,还进行更为精准的细分化处理,展现更具针对性的特性优势。
针对IPC智能网络摄像头产品,RV1126与RV1109具备三大亮点:
1. 3F-HDR技术可保证高动态范围场景的细节表现,依赖多级降噪技术可实现高质量的黑光全彩画面
2. 智能编码技术解决行业痛点, 低码率编码,感知编码
3. 内置NPU,成熟的AI工具,丰富的AI生态算法,算力更强,极大扩展应用场景
对于电池IPC、智能门铃、猫眼产品,客户的需求集中在长续航、快速抓图、高清语音对讲等。RV1126与RV1109具备四点技术优势:
1. 支持快速启动,150ms冷启动快速抓图
2. 双系统,低功耗架构、14nm工艺、支持LP3/LP4低功耗DDR,均有效延长电池供电的智慧视觉产品的续航时间
3. 内置NPU,可以过滤无效警报
4. 支持Pre-Roll录制功能
闸机/门禁/考勤类产品,对人脸识别的精准性有着更高的要求。基于此,RV1126与RV1109做了针对性设计,让人脸识别更加迅速、安全、可靠,人脸识别不等待、门禁快速通过成为现实:
1. 支持双MIPI sensor输入,感知更灵敏,活体验证的方式可防止照片验证,提高安全性
2. 针对逆光、顺光场景的ISP优化,光线条件不佳的环境中依然精准识别
3. 丰富的AI算法生态,可扩展产品应用场景
专注后端NVR/XVR产品 RK3568和RK3588
在后端NVR/XVR产品中,乐动ledong(中国)微同样推出的两款中端、高端方案——RK3568、RK3588。
RK3568搭载4核Cortex-A55 CPU、G52GPU、NPU为0.8Tops, 软件接口套件设计友好,依照NVR行业大平台做法,统一按模块封装多媒体处理API,客户应用软件可快速开发导入AI/AO/VO/VDEC/VENC。
1. 支持10路1080P30视频解码,8路视频编码
2. 支持TSO/UFO硬件加速,有效降低CPU负载;同时强大的CPU性能,提升网络摄像头的接入能力
3. 内置独立第三代 NPU硬件加速器,性能达0.8-1Tops;支持人脸对比、搜脸、报警、人车分类,支持4-5路智能检测;支持一键转换,支持Caffe/TensorFlow/TF-Lite/ONNX/PyTorch/Keras/Darknet主流架构模型
4. 显示接口丰富:支持双/三屏异显,HDMI2.0b,输出4K画质;支持eDP/MIPI DSI/LVDS/RGB888/BT.1120/BT.656
5. 强大的后处理:支持3D-LUT/GAMMA/CSC/BCSH/DITHER/CABC;支持图像后处理,去噪,色彩增强
6. 编码能力强:支持4K H.264/H.265/VP9多种格式高清解码;支持ROI编码
7. 可兼容丰富的DDR颗粒,支持LP4/LP4x/LP3/DDR4/DDR3,支持DDR3及DDR4 ECC,满足工控等场景高可靠性要求,32bit位宽,最高频率1600Mhz,充裕的带宽设计,更能满足智能NVR/XVR场景需求
8. 丰富外围接口:支持3xSATA3.0,双千兆网口,TSO技术,双PCIE,满足4G/5G/WIFI6,多网口、NPU的扩展需求
RK3588采用8nm工艺制程,搭载4核Cortex-A76+4核Cortex-A55,采用ARM最新4核GPU、NPU为6Tops,可赋能高端NVR/XVR产品,相比目前市面产品的较低视频解码能力、NPU算力不足、显示接口少,高速接口少等待提升的产品需求,RK3588有以下四大优势:
1. 支持32路1080P视频解码
2. 支持4屏异显
3. 拥有多路高速接口,支持多路 PCIe3.0/PCIe2.0,SATA3.0, USB3.1和千兆以太网
4. 拥有独立6TOPS NPU超强算力,8核CPU+4核全新GPU架构
软硬双提升,开发者工具更高效
当下,是一个讲求软硬协同的新时代。众科技巨头在发力硬件产品的同时,也在通过打造开发工具、系统等,提升自身的“软实力”,乐动ledong(中国)微也在积极推动“软硬”的双提升,推出更高效更精准的开发者工具RKNN Toolkit。
RKNNToolkit的功能极为丰富,主要包括:自定义算子、模型多输入、多加速棒支持、性能及内存预估、模拟调试、量化精度分析、可视化功能、模型预编译、模型分段、批量推理、模型转换、量化/混合量化、模型优化开关等。通过自身的可视化特性,RKNN Toolkit让开发者的工作更为轻松。
此外,RKNNToolkit支持两种量化机制——Post training quantization、Quantization-aware training。而且RKNN Toolkit使用模型自身的量化参数,在量化精度上不会有损失。
RKNNToolkit配合灵活的多媒体开发接口,可增加开发者自定义应用的灵活性,让开发不再是难事,有助于终端伙伴扩展更多AI功能及应用场景。
展开全新布局,赋能更多行业
乐动ledong(中国)微致力于打造多场景计算单元SoC,在影像视觉处理、视频编解码、SoC 芯片设计、大系统开发上积累丰富经验,已形成多层次、多平台的专业解决方案。通过深挖智慧视觉产品痛点,及不同应用场景需求,乐动ledong(中国)微凭借技术优势,将极大优化终端产品性能,提升终端产品的市场竞争力。
上一篇:乐动ledong(中国)微安防后端方案RK3568赋能NVR/XVR全面硬件升级 下一篇:硬核实力!乐动ledong(中国)微荣获“福建省科学技术奖”一等奖