Analyse complète du benchmark 3TOPS Edge Computing | Série Rockchip RV1126

Rockchip a établi un portefeuille complet de puces de calcul visuel, allant de 0,5T à 6T, couvrant tout, des caméras intelligentes de base aux systèmes de vision industrielle avancés. Un produit phare de cette gamme est la série RV1126, en particulier les RV1126B et RV1126B-P. Ces variantes sont largement utilisées dans la sécurité intelligente (IPC, sonnettes intelligentes, caméras embarquées), la vision industrielle (caméras d'usine, équipements d'inspection), les applications automobiles et domestiques intelligentes, les villes intelligentes et les scénarios d'IA en périphérie. Le RV1126B, avec sa puissance de calcul de 3TOPS, son architecture AI-ISP personnalisée, son assemblage dynamique, sa stabilisation, son encodage avancé et sa sécurité au niveau matériel, offre des solutions hautes performances qui améliorent les appareils AIoT, passant de la simple « vision » à la véritable « compréhension ».

Le RV1126B-P est une variante du RV1126B optimisée en termes de coût et d'emballage, conservant toute la puissance de calcul de base (CPU/GPU/VPU/NPU) tout en réduisant le nombre de broches, en supprimant l'USB 3.0 et en supprimant les interfaces auxiliaires (CAM_CLK/SARADC) pour réduire les coûts. Il cible les applications à faible stockage et à faible bande passante, telles que les caméras embarquées et les appareils DMS. Les principaux avantages sont les suivants :

• Compatibilité broche à broche : remplacement direct du RV1126 sans aucune refonte matérielle nécessaireMêmes performances de base : capacités de calcul, ISP et IA équivalentes à celles du RV1126B
• Mises à niveau transparentes : modifications logicielles minimales requises pour que les produits existants basés sur le RV1126 atteignent les performances du RV1126BCela fait du RV1126B-P une mise à niveau idéale pour les fabricants qui cherchent à améliorer leurs produits avec un investissement minimal en R&D.
• Le RV1126B, basé sur une architecture quad-core Cortex-A53 (1,5 GHz), intègre le NPU 3TOPS interne de Rockchip. Il prend en charge la quantification de précision mixte W4A16/W8A16 et l'accélération optimisée pour les transformateurs, ce qui permet une exécution efficace sur l'appareil de grands modèles et de modèles multimodaux avec des paramètres allant jusqu'à 2 milliards.Pour l'imagerie, il est doté d'un moteur AI-ISP dédié avec la technologie AI Remosaic pour une « imagerie adaptative jour et nuit », permettant d'obtenir des images claires dans des conditions de très faible luminosité (0,01 Lux). Cela résout les problèmes de bruit nocturne et, combiné à la stabilisation numérique 6-DOF et à l'assemblage dynamique à double/quadruple caméra, garantit des images stables et grand angle, même en mouvement.

Au niveau du système, l'architecture basse consommation AOV3.0 du RV1126B réduit la consommation en veille à 1 mW. Il prend en charge le réveil sonore 24 h/24 et 7 j/7 (par exemple, aboiements, bris de verre, coups de feu), équilibrant les économies d'énergie et les alertes en temps réel. Le moteur de super encodage intégré réduit le débit binaire de 50 % sans perte de clarté, ce qui réduit les coûts de transmission et de stockage.

Pour la sécurité, il offre un cryptage SM2/SM3/SM4, une isolation TrustZone et un système de gestion des clés, offrant une protection de bout en bout, de la capture des données à l'inférence.

Architecture du processeur

RV1126B et RV1126B-P :

Configuration de base : Quad-core ARM Cortex-A53, architecture 64 bits, prend en charge le jeu d'instructions ARM v8-A.

• RV1126 :Configuration de base : Quad-core ARM Cortex-A7, architecture 32 bits, prend en charge le jeu d'instructions ARM v7-A, avec Neon Advanced SIMD et FPU intégrés.

• Compatibilité des frameworks : TensorFlow, TF-lite, Pytorch, Caffe, ONNX, MXNet, Keras, Darknet, etc., avec prise en charge de l'API OpenVX.Performances du NPU

• RV1126B et RV1126B-P :Puissance de calcul : 3,0 TOPs INT8 (optimisation clairsemée prise en charge), compatible avec les opérations INT4/INT8/INT16/FP16.

• RV1126 :Puissance et précision de calcul : 2,0 TOPs avec des opérations hybrides INT8/INT16, prenant en charge la convolution d'entiers 8/16 bits.

• Compatibilité des frameworks : TensorFlow, TF-lite, Pytorch, Caffe, ONNX, MXNet, Keras, Darknet, etc., avec prise en charge de l'API OpenVX.Fonctionnalités ISP

• Formats de données pris en charge : Entrée : formats de série ARGB/RGB/YUV (y compris l'emballage TILE4X4)
• Sortie : ARGB/RGB/YUV420/422 et autres formats 8 bitsFonctions principales :

• Rotation : 0/90/180/270 degrés avec mise en miroirAutres : Fusion alpha, remplissage de couleur, superposition OSD
• Limites de résolution : Entrée maximale : 8192 × 8192

• Les RV1126 et RV1126B prennent en charge l'encodage et le décodage vidéo H.265/H.264, ce qui permet une compression, un stockage et une transmission efficaces de vidéos UHD 4K. Le RV1126B prend spécifiquement en charge l'encodage multi-flux, avec un moteur d'encodage intelligent intégré pour l'encodage ultra-HD jusqu'à 8 MP à 45 FPS. Il dispose également d'un réglage dynamique du débit binaire, réduisant le débit binaire jusqu'à 50 % par rapport au mode CBR traditionnel.
• Les RV1126B et RV1126 offrent une variété d'interfaces audio, de stockage et périphériques, et prennent en charge la DRAM externe haute performance pour répondre aux besoins de base en matière de multimédia et d'extension périphérique.
  • Les RV1126B et RV1126B-P prennent en charge le CANFD à deux canaux, ce qui les rend adaptés aux applications automobiles et de contrôle industriel. Le RV1126B prend en charge l'USB 3.0, tandis que les RV1126B-P et RV1126 ne prennent en charge que l'USB 2.0.Déployée dans plusieurs secteurs, la série RV1126B, avec sa puissance d'IA de 3 TOPS et son architecture AI-ISP, est largement utilisée dans les IPC, les sonnettes intelligentes et les caméras PTZ IA. Ses fonctionnalités d'intégration élevée et de faible consommation améliorent l'enregistrement vidéo pour l'analyse intelligente.