Бенчмарк Edge Computing 3TOPS | Полный анализ Rockchip RV1126 Series

Rockchip создала комплексный портфель микросхем для визуальных вычислений, охватывающий диапазон от 0,5T до 6T, включая все: от базовых умных камер до передовых систем промышленного зрения. Выдающимся представителем этой линейки является серия RV1126, в частности, RV1126B и RV1126B-P. Эти варианты широко используются в системах умной безопасности (IPC, умные дверные звонки, видеорегистраторы), промышленном зрении (камеры на заводах, инспекционное оборудование), умных автомобильных и домашних приложениях, умных городах и сценариях периферийного ИИ. RV1126B с вычислительной мощностью 3TOPS, специализированной архитектурой AI-ISP, динамической сшивкой, стабилизацией, передовым кодированием и аппаратной безопасностью предоставляет высокопроизводительные решения, которые улучшают устройства AIoT, позволяя им не просто «видеть», а по-настоящему «понимать».

RV1126B-P - это оптимизированный по стоимости и корпусу вариант RV1126B, сохраняющий полную вычислительную мощность (CPU/GPU/VPU/NPU) при уменьшении количества контактов, удалении USB 3.0 и обрезке вспомогательных интерфейсов (CAM_CLK/SARADC) для снижения затрат. Он ориентирован на приложения с небольшим объемом памяти и низкой пропускной способностью, такие как видеорегистраторы и устройства DMS. Ключевые преимущества включают:

• Совместимость по выводам: Прямая замена RV1126 без необходимости перепроектирования аппаратного обеспечения
• Та же производительность ядра: Эквивалентные вычислительные возможности, ISP и возможности ИИ, как у RV1126B
• Бесшовные обновления: Минимальные изменения программного обеспечения, необходимые для существующих продуктов на базе RV1126 для достижения производительности уровня RV1126B

Это делает RV1126B-P идеальным вариантом для производителей, стремящихся улучшить продукты с минимальными затратами на исследования и разработки.

RV1126B, построенный на базе четырехъядерной архитектуры Cortex-A53 (1,5 ГГц), интегрирует собственный NPU Rockchip на 3TOPS. Он поддерживает смешанное квантование W4A16/W8A16 и оптимизированное для Transformer ускорение, обеспечивая эффективное выполнение больших моделей и мультимодальных моделей с параметрами до 2B на устройстве.

Для обработки изображений он оснащен выделенным движком AI-ISP с технологией AI Remosaic для «адаптивной съемки день-ночь», обеспечивая четкое изображение в условиях сверхслабого освещения (0,01Lux). Это решает проблемы ночного шума и в сочетании с 6-DOF цифровой стабилизацией и динамической сшивкой с двух/четырех камер обеспечивает стабильное и широкоугольное изображение даже в движении.

На системном уровне архитектура RV1126B AOV3.0 с низким энергопотреблением снижает энергопотребление в режиме ожидания до 1 мВт. Она поддерживает круглосуточное пробуждение от аномального звука (например, лай, разбитие стекла, выстрелы), балансируя энергосбережение с оповещениями в реальном времени. Интегрированный механизм Super Encoding Engine снижает битрейт на 50% без потери четкости, снижая затраты на передачу и хранение.

Для безопасности он предлагает шифрование SM2/SM3/SM4, изоляцию TrustZone и систему управления ключами, обеспечивая сквозную защиту от захвата данных до вывода.

• Конфигурация ядра: Четырехъядерный ARM Cortex-A53, 64-битная архитектура, поддерживает набор инструкций ARM v8-A.

• Спецификация кэша: 32 КБ L1 I-Cache + 32 КБ L1 D-Cache на ядро, с общим кэшем L2 объемом 512 КБ.

• Расширенные функции: Встроенный Neon Advanced SIMD и FPU, поддерживает технологию TrustZone.

• Конфигурация ядра: Четырехъядерный ARM Cortex-A7, 32-битная архитектура, поддерживает набор инструкций ARM v7-A, со встроенным Neon Advanced SIMD и FPU.

• Спецификация кэша: 32 КБ L1 I-Cache + 32 КБ L1 D-Cache на ядро, с общим унифицированным кэшем L2 объемом 512 КБ.

• Вычислительная мощность: 3,0 TOPs INT8 (поддерживается разреженная оптимизация), совместимость с операциями INT4/INT8/INT16/FP16.
• Поддержка фреймворков: TensorFlow, Caffe, Tflite, Pytorch, Onnx NN, Android NN и т. д.

• Вычислительная мощность и точность: 2,0 TOPs с гибридными операциями INT8/INT16, поддержка целочисленной свертки 8/16 бит.
• Совместимость с фреймворками: TensorFlow, TF-lite, Pytorch, Caffe, ONNX, MXNet, Keras, Darknet и т. д., с поддержкой API OpenVX.

• 2D графический движок (RGA)
• Поддерживаемые форматы данных:
  • Вход: Форматы серии ARGB/RGB/YUV (включая упаковку TILE4X4)
  • Выход: ARGB/RGB/YUV420/422 и другие 8-битные форматы
• Основные функции:
  • Масштабирование: масштабирование от 1/16× до 16× без целых чисел (понижающая дискретизация со средним/билинейной фильтрацией, повышающая дискретизация с кубической фильтрацией)
  • Поворот: 0/90/180/270 градусов с зеркальным отображением
  • Дополнительно: альфа-смешивание, заливка цветом, наложение OSD
• Ограничения разрешения:
  • Макс. вход: 8192×8192
  • Макс. выход: 4096×4096

Как RV1126, так и RV1126B поддерживают кодирование и декодирование видео H.265/H.264, обеспечивая эффективное сжатие, хранение и передачу видео 4K UHD. RV1126B специально поддерживает многопоточное кодирование со встроенным интеллектуальным механизмом кодирования для кодирования сверхвысокой четкости до 8 МП при 45 кадров в секунду. Он также имеет динамическую настройку битрейта, снижая битрейт до 50% по сравнению с традиционным режимом CBR.

Как RV1126B, так и RV1126 предлагают различные аудио-, накопительные и периферийные интерфейсы и поддерживают высокопроизводительную внешнюю DRAM для удовлетворения основных потребностей мультимедиа и расширения периферийных устройств.

RV1126B и RV1126 интегрируют функциональные модули системного уровня, такие как RTC, POR, RMI Ethernet PHY и аудиокодеки. RV1126 поддерживает 12-килобитовую однократно программируемую (OTP) память для уникальной идентификации и безопасного хранения. RV1126B представляет AI-ISP, который может работать с NPU, в то время как RV1126 не поддерживает AI-ISP.

RV1126B и RV1126B-P поддерживают двухканальный CANFD, что делает их подходящими для автомобильных и промышленных систем управления. RV1126B поддерживает USB 3.0, в то время как RV1126B-P и RV1126 поддерживают только USB 2.0.

Серия RV1126B, развернутая в нескольких отраслях, с ее мощностью ИИ 3TOPS и архитектурой AI-ISP, широко используется в IPC, умных дверных звонках и AI PTZ-камерах. Ее высокая интеграция и низкое энергопотребление улучшают запись видео до интеллектуального анализа.