ArmSoM
← Все истории

Rockchip RK3572 Подробное описание: почему ArmSoM выбрал его для Zero5

Небольшое встраиваемое устройство может требовать от своего процессора удивительной мощности. Возможно, ему потребуется захватить изображение с камеры, запустить модель искусственного интеллекта, обновить дисплей, взаимодействовать с датчиками и поддерживать сетевое соединение. Все это должно умещаться в практичном бюджете мощности и небольшом корпусе.

В этом и заключается проблема дизайна. ArmSoM Ноль5, будущий компактный одноплатный компьютер, который ArmSoM планирует представить с использованием Rockchip RK3572. Восьмиядерный процессор CPU, интегрированный процессор NPU и мультимедийные модули создают основу для компактных периферийных устройств. Важный вопрос заключается в том, как эти ресурсы работают вместе в реальном приложении.

В нашем Глубокое погружение A733мы исследовали идею Sige6. Здесь мы применяем тот же практический подход к RK3572 и Направление компактных плат ArmSoM уже обозначилось.

01 / Задача: полезный искусственный интеллект в меньшем устройстве

Рассмотрите небольшую инспекционную камеру или интерактивный терминал. Модель ИИ — это лишь одна часть системы. Изображения должны прийти, изменить их размер и преобразовать, пройти через логический вывод и дать полезный результат. Между тем, приложению по-прежнему необходимы журналирование, работа в сети и адаптивный интерфейс.

При выборе оборудования имеют значение три вопроса:

  • Выдержит ли он полную рабочую нагрузку? Быстрый результат вывода менее полезен, если подготовка изображения или передача данных становятся узким местом.

  • Подходит ли корпус и блок питания? Разъемы, память, периферийные устройства и охлаждение занимают место.

  • Могут ли разработчики развернуть и поддерживать его? Драйверы, преобразование моделей и воспроизводимое программное обеспечение имеют значение еще долгое время после первой демонстрации.

Мы считаем, что RK3572 заслуживает внимания на этом перекрестке: компактное оборудование, гетерогенные вычисления и локальная обработка ИИ.

02 / Восемь ядер CPU с разными задачами

RK3572 использует Процесс 8nm и объединяет два ядра Cortex-A73 и шесть ядер Cortex-A53. Rockchip позиционирует его как устройства AIoT среднего класса. См. официальный анонс RK3572.

Архитектура предоставляет программному обеспечению сочетание ресурсов CPU, ориентированных на производительность и эффективность. Возможное разделение приложений заключается в том, чтобы зарезервировать реагирование для обработки, зависящей от времени, в то время как фоновые службы выполняют служебную работу. Фактическое планирование зависит от операционной системы, рабочей нагрузки и политики электропитания.

CPU также имеет специальные двигатели. NPU обрабатывает поддерживаемые операции нейронной сети; графическое, графическое и видеооборудование может выполнять соответствующие мультимедийные задачи. Включение этих механизмов в конвейер приложений зачастую более ценно, чем рассматривать каждую задачу как работу CPU.

Краткий обзор RK3572 — возможности чипа, а не окончательная спецификация платы ArmSoM

Ресурс

Опубликованная спецификация

Почему это важно

CPU

2× Cortex-A73 + 6× Cortex-A53

Обработка приложений и параллельные услуги

NPU

4 TOPS INT8, с разреженностью

Ускорение совместимых моделей ИИ

Контроллер памяти

LPDDR4/4X и LPDDR5/5X

Варианты памяти для различных конструкций изделий

Графика и изображения

Мали-G310 GPU; Интернет-провайдер класса 12MP

Интерфейсы, обработка камеры и визуальные приложения

СМИ

Аппаратное декодирование и кодирование видео

Обработка мультимедиа вместе с логикой приложения

Техническая информация: Rockchip RK3572 Техническое описание V1.0, страницы 7–13. Доступная память, разъемы и поддерживаемые режимы зависят от платы и ее программного обеспечения.

03 / Что означает 4 TOPS NPU для проекта?

В таблице данных RK3572 указано 4 TOPS на INT8 с квалификацией разреженности. Эта квалификация имеет значение: это пиковая вычислительная мощность в определенных условиях, а не универсальная частота кадров для любой модели. NPU также поддерживает несколько целочисленных форматов и форматов с плавающей запятой, включая операции W4A16. Эти возможности описаны в страница 13 технического описания.

Для разработчиков разумные цели оценки включают обнаружение компактных объектов, визуальную классификацию и отдельные локальные аудио- или языковые задачи. Пригодность зависит от модели, потребностей в памяти, поддерживаемых операторов и требуемого времени отклика.

Полезный тест измеряет весь путь: захват камеры, подготовку изображения, вывод и реакцию приложения. Рекордная точность и постоянная задержка, а также пропускная способность. Стабильный результат в предполагаемом корпусе расскажет вам больше о продукте, чем просто пиковый показатель TOPS.

04 / Подробности программного обеспечения, которые необходимо знать: RKNN3

Публикация Rockchip RKNN3 SDK явно указывает RK3572. Он обеспечивает преобразование моделей на стороне ПК, встроенную среду выполнения C/C++ и интерфейс вывода Python. В RK3572 NPU интегрирован в SoC и запускает модели непосредственно на плате.

RKNN3-Toolkit несовместим с RKNN-Toolkit и RKNN-Toolkit2. Поэтому существующие проекты Rockchip должны планировать этап преобразования модели и проверки во время выполнения, а не предполагать, что старая скомпилированная модель будет передана без изменений. Это различие указано в официальные примечания к SDK.

Предлагаемая нами отправная точка — одна репрезентативная модель и небольшой набор реальных исходных данных. Преобразуйте его для целевого объекта, проверьте точность вывода, затем интегрируйте логику захвата и приложения. Только после этого следует масштабировать рабочую нагрузку.

05 / Память и медиа — часть истории искусственного интеллекта

RK3572 поддерживает память LPDDR4/4X и LPDDR5/5X с интерфейсами хранения, включая eMMC 5.1 и UFS 2.0. В техническом описании также описывается процессор сигналов изображения класса 12 Мп и специальное мультимедийное оборудование. Это строительные блоки на уровне чипа, из которого дизайнер доски выбирает практичную комбинацию.

Это важно, поскольку приложение машинного зрения перемещает данные, а также обрабатывает их. Буферы камеры, веса моделей и промежуточные результаты используют память. Масштабирование изображения и преобразование формата могут повлиять на время, оставшееся для вывода и работы приложения.

Для компактной платы выбор интерфейса становится важным дизайнерским решением. Каждый внешний разъем конкурирует за пространство, маршрутизацию и питание. Полезная плата предоставляет соединения, необходимые целевым проектам, с помощью программного обеспечения, которое делает их пригодными для использования.

Блок-схема RK3572 из таблицы данных Rockchip V1.0, страница 23

Блок-схема Rockchip RK3572, таблица данных V1.0, страница 23. Схема © Rockchip Electronics Co., Ltd. Возможности контроллера не означают, что каждый интерфейс будет присутствовать на плате ArmSoM.

06 / Сильным фигурам нужен контекст

Отчеты Rockchip 670 мВт при воспроизведении видео 1080p на тестовом устройстве, настроенном на 8GB LPDDR5 и 128GB UFS. Дисплей и сенсорная панель были удалены, а Wi-Fi и Bluetooth отключены. Эти условия сопровождают измерение в официальное объявление.

Это делает эффективность интересной темой оценки, но это не обещание мощности всего правления. Камера, беспроводное соединение, устройство USB и потери на преобразование мощности меняют бюджет системы. Постоянная рабочая нагрузка ИИ также отличается от воспроизведения видео.

Для встраиваемой конструкции измерьте работу в режиме ожидания, предполагаемую рабочую нагрузку и длительную нагрузку с фактически подключенными периферийными устройствами. Это является основой для выбора источника питания, корпуса и системы охлаждения.

07 / Представляем концепцию ArmSoM Zero5

ArmSoM планирует выпустить Zero5, компактный SBC на базе Rockchip RK3572. Основываясь на нашем ранее Предварительный просмотр продукта нулевого форм-фактора, теперь мы можем поделиться названием продукта и предлагаемым макетом. Zero5 нацелен на компактные проекты Linux и Edge-AI. 65 × 30 mm мишень размером с доску.

Предварительный просмотр концепции ArmSoM Zero5 RK3572: предлагаемая компоновка спереди и сзади, целевой размер 65 x 30 mm, дополнительные интерфейсы подлежат проверке

Предварительный просмотр концепции ArmSoM Zero5. Только предлагаемая планировка, без масштабирования. Размер 65 × 30 mm является целевым; интерфейсы подлежат проверке. Элементы, отмеченные звездочкой, являются необязательными.

Концептуальные места два разъема USB-C, Mini HDMI и разъем 40-pin GPIO. на передней панели, рядом с RK3572, блоками памяти, управления питанием и Wi-Fi/Bluetooth. На задней стороне изображены карты памяти microSD, разъемы PCIe/SATA FPC, разъемы дисплея MIPI DSI и разъемы камеры CSI. Второе соединение CSI, eMMC и UFS помечены как необязательные; иллюстрация не обещает, что все варианты будут заполнены вместе.

Мы видим возможность внедрить локальную обработку в проекты, где площадь платы является реальным ограничением: небольшой узел контроля, интерактивное устройство или прототип с ограниченным пространством. Сочетание CPU, NPU и медиа-движков делает RK3572 актуальным для этих проектов.

Zero5 в настоящее время представлен как предварительный просмотр концепции. Окончательные размеры, конфигурации памяти и хранилища, функции разъемов, поддержка программного обеспечения, цена и дата выпуска будут подтверждены в объявлении о продукте. Формат нулевого стиля и разъем 40 сами по себе не обеспечивают совместимость выводов Raspberry Pi, аксессуаров или программного обеспечения.

Наша цель — практическая платформа разработки: соединения, программное обеспечение и документация, необходимые для превращения компактного процессора в работающее устройство.

Часто задаваемые вопросы

Могу ли я повторно использовать модель RKNN-Toolkit2 на RK3572?

Запланируйте проверку преобразования и развертывания с помощью RKNN3. Rockchip документирует наборы инструментов как несовместимые; повторное использование исходных моделей по-прежнему зависит от поддерживаемых операторов и результатов преобразования.

Гарантирует ли 4 TOPS вывод камеры в реальном времени?

Нет. Это редкий пиковый рейтинг INT8, указанный в таблице данных. Выбор модели, разрешение, предварительная обработка и остальная часть приложения определяют устойчивую частоту кадров.

Когда ArmSoM Zero5 будет доступен?

ArmSoM планирует представить Zero5 вместе с RK3572. В этом предварительном просмотре концепции не объявляются дата выпуска, цена или предварительные заказы. Следите за официальными обновлениями ArmSoM для получения окончательных спецификаций и информации для заказа.

Что бы вы построили с помощью ArmSoM Zero5?

Расскажите нам о требованиях к вашему приложению, камере или дисплею, модели искусственного интеллекта и ограничениях корпуса. Конкретные требования помогают сформировать более полезную платформу.

Обсудите свой проект с ArmSoM →

Дальнейшее чтение: Руководство по техническому описанию RK3572 и загрузка · Официальный RKNN3 SDK · Документация ArmSoM