ESP-Mosaico — это модульная плата разработки, предназначенная для агентов кодирования., с поддержкой подключения и комбинации нескольких устройств.
Для удовлетворения постоянно меняющихся требований приложений, создатели больше не ограничены фиксированными конфигурациями оборудования. Различные аппаратные возможности можно комбинировать по мере необходимости., в то время как агенты могут постоянно участвовать в разработке и усовершенствовании, позволяя расширять как аппаратные конфигурации, так и возможности приложений вместе с требованиями к продукту.
ESP-Mosaico предлагает два подхода к созданию.:
Кодирование чата начинается с требований к естественному языку. Без необходимости настройки среды разработки, создатели могут быстро создавать и запускать прототипы оборудования.
Кодирование вибрации дополнительная интеграция агентов в разработку приложений, развертывание, и проверка на реальном устройстве, обеспечение непрерывной итерации приложения от первоначального прототипа до готового продукта.
Оба подхода могут использоваться независимо или гибко выбираться в зависимости от разных этапов разработки.. Начиная с простого требования, создатели могут постепенно завершить разработку прототипа, итерация функции, и, наконец, запускать свои приложения на реальных аппаратных устройствах.
Почему была создана ESP-Mosaico?
ИИ позволяет быстро создавать и повторять программное обеспечение в зависимости от требований., но аппаратные возможности и форм-факторы по-прежнему часто определяются фиксированными платами разработки и интерфейсами..
Каждый раз, когда добавляются новые возможности или изменяется форм-фактор продукта., создателям необходимо повторить выбор оборудования, физические соединения, и адаптация водителя.
Поскольку программное обеспечение становится все более гибким и постоянно развивается, разработка аппаратного обеспечения также необходим более гибкий подход к расширению, чтобы идти в ногу с меняющимися требованиями приложений..
ESP-Mosaico предоставляет создателям более гибкий подход к разработке..
Аппаратные модули можно подключать по мере необходимости., несколько устройств можно свободно комбинировать, и агенты кодирования могут участвовать в разработке приложений на основе текущей конфигурации оборудования..
Создателям больше не нужно определять окончательный вид устройства в начале разработки.. Вместо, по мере развития требований к приложениям, они могут постоянно добавлять аппаратные возможности, комбинируйте разные модули, и настроить форм-фактор устройства.
Это позволяет оборудованию и приложениям развиваться и выполнять итерации вместе..
Отсюда и происхождение названия ESP-Мозаика.
Мозаика означает «мозаика» — бесчисленные маленькие кусочки собираются вместе, образуя законченное произведение..
С ESP-Mosaico, различные аппаратные модули и устройства также можно свободно комбинировать, позволяя возможностям системы постоянно расширяться в соответствии с меняющимися требованиями приложений.
Основные характеристики оборудования (Основной блок CoreBoard V1.0)
| Элемент | Спецификация |
|---|---|
| Главный процессор | ЭСП32-С31, двухъядерный RISC-V, до 320 МГц, 512 КБ встроенной SRAM |
| Память | 16 Флэш-память SPI-NAND МБ, 16 МБ DDR PSRAM (до 32 МБ поддерживается) |
| Отображать | 2.16-дюймовый AMOLED/OLED, 480 × 480 разрешение, емкостный сенсорный, самоизлучающий дисплей, поддерживает сенсорную обратную связь |
| Бортовые датчики | 6-ось ИДУ (акселерометр + гироскоп), двойные магнитометры; способный определять ориентацию, направление, и относительное положение сборки между устройствами |
| Аудио | Кодек + усилитель мощности, встроенный микрофон и динамик, поддержка голосового ввода и вывода |
| Другие встроенные компоненты | Вибрационный двигатель, физические кнопки, 65 Встроенный литиевый аккумулятор мАч, способен работать независимо без подключения Type-C; Type-C поддерживает двунаправленное питание, отладка, и высокоскоростной USB-OTG 2.0 |
| Беспроводная связь | Wi-Fi 6, Bluetooth 5.4, Нить 1.4, Зигби 3.0; поддерживает MAC-адрес Gigabit Ethernet, аппаратное кодирование/декодирование JPEG, и интерфейс камеры DVP |
| Интерфейсы расширения | 2 × 10П 2.54 Разъёмы контактов мм с обеих сторон для GPIO, камера, и другие функции; 4-контактный магнитный интерфейс расширения PogoPin; в общей сложности 60 программируемые ресурсы GPIO |
Комплектное устройство представляет собой квадрат, портативное портативное устройство со встроенным корпусом. Его можно включать и использовать прямо из коробки, без дополнительной пайки..
Две основные аппаратные функции
1. Модульное магнитное расширение с автоматическим распознаванием
Внешние устройства, такие как камеры, моторы, осветительные модули, и различные датчики упакованы в виде стандартизированных функциональных модулей Mosaico и подключаются к основному блоку через магнитные интерфейсы PogoPin..
- После подключения модуля, тот оборудование автоматически распознается и соответствующий драйвер автоматически загружается, устранение необходимости вручную писать код драйвера низкого уровня;
- Никакой пайки или макетной платы не требуется.;
- Агент кодирования может автоматически определять, какие периферийные устройства подключены в данный момент, и генерировать код приложения, специально адаптированный к текущей конфигурации оборудования..
2. Сборка и совместная работа нескольких устройств
Несколько основных блоков ESP-Mosaico можно физически разместить и собрать вместе..
Использование IMU и двойных магнитометров, устройства могут обнаруживать относительные позиции, ориентация размещения, и порядок сборки между устройствами, при автоматическом формировании сети.
Это позволяет:
- Многоэкранное взаимодействие, распределенное взаимодействие, и прототипы интеллектуального оборудования на основе массивов;
- Автоматическое создание агентом логики совместной работы нескольких устройств на основе текущей топологии устройства..
Это делает ESP-Mosaico подходящим для интерактивных инсталляций., настольные массивы, и распределенные прототипы Интернета вещей.
Архитектура программного обеспечения: Две парадигмы разработки аппаратного обеспечения искусственного интеллекта
Самая большая изюминка ESP-Mosaico — это не само оборудование., но Кодирующий агент, который создает полный замкнутый рабочий процесс от требований к естественному языку до приложений, работающих на реальном оборудовании..
Он предоставляет два режима разработки, которые можно гибко выбирать в зависимости от разных этапов проекта..
① Кодирование чата (Быстрое прототипирование)
- Никакой среды компиляции ESP-IDF не требуется устанавливать или настраивать.;
- Пользователи просто описывают то, что хотят создать, используя естественный язык..
Например:
«Создайте небольшое устройство отображения температуры и влажности в помещении со световой сигнализацией».
- Облачный агент напрямую генерирует прошивку и записывает ее на устройство по сети., позволяя пользователям сразу увидеть приложение, работающее на реальном оборудовании;
- Идеально подходит для быстрой проверки идей, студенты, и производители, которым нужно быстро создавать прототипы.
② Кодирование вибрации (Полная итерация продукта)
Предназначен для формальной разработки продукта, Vibe Coding интегрирует локальный агент кодирования на компьютере в полный рабочий процесс разработки.:
- Сгенерируйте код;
- Скомпилируйте и загрузите прошивку на реальное оборудование Mosaico.;
- Чтение журналов работы оборудования, данные датчика, и сообщения об ошибках;
- Агент получает обратную связь от физического устройства, автоматически изменяет код, и развертывает обновленную версию для следующей итерации.
В отличие от обычного кодирования AI, где ИИ анализирует только исходный код, Vibe Coding может получать реальную обратную связь во время работы оборудования и создавать полный замкнутый цикл «Идея → Код → Физическое устройство → Обратная связь → Улучшение кода»., преобразование первоначального прототипа в готовую к производству прошивку продукта.
Базовый SDK и ресурсы с открытым исходным кодом
- Построен на ESP-IDF., с поддержкой файлов BSP и примером кода с открытым исходным кодом в репозитории GitHub ESP-Mosaico.;
- Поддерживает графическую среду ESP-Brookesia HMI для быстрой разработки сенсорных пользовательских интерфейсов.;
- Поддерживает как Arduino, так и собственные рабочие процессы разработки ESP-IDF.;
- Также поддерживается традиционное ручное кодирование., без обязательной зависимости от AI-агента.
Болевые точки отрасли, которые решает продукт
Проблемы традиционной разработки встраиваемых систем
ИИ может быстро создавать и совершенствовать программное обеспечение, но как только оборудование изменится, разработчикам часто приходится повторять выбор оборудования, проводка, и отладка драйверов.
Как результат, циклы итерации аппаратного обеспечения часто намного медленнее, чем циклы итерации программного обеспечения..
Подход ESP-Mosaico
- Превратите оборудование в модульный, штабелируемые «строительные блоки», которые может распознать агент;
- ИИ не только генерирует логику приложения, но также может определять текущую конфигурацию оборудования и автоматически адаптировать драйверы периферийных устройств.;
- Форм-фактор аппаратного обеспечения не требует окончательного определения вначале.. Во время разработки, пользователи могут добавлять модули или объединять несколько устройств в любое время, в то время как программное обеспечение динамически адаптируется к изменяющейся конфигурации оборудования.
Типичные сценарии применения
- Прототипирование оборудования с помощью искусственного интеллекта: Создатели, студенты, а дизайнеры могут использовать естественный язык для быстрого создания интерактивных физических прототипов.;
- Интерактивные и художественные инсталляции для нескольких устройств: Несколько устройств могут быть собраны в массивы для обеспечения распределенного взаимодействия.;
- Прототипы терминалов Edge AI: Быстрое создание прототипов и проверка приложений периферийного вывода с использованием сенсорных экранов, голос, и получение изображений;
- Образовательные и экспериментальные платформы: Образование в области Интернета вещей и встроенного искусственного интеллекта с более низким барьером для настройки среды разработки.;
- Прототипирование ЧМИ: Быстрая проверка интерактивных продуктов с дисплеями, сенсорные интерфейсы, и аудио.
Сравнение с другими досками для разработки Espressif
- По сравнению с ESP32-S3-BOX-3: BOX-3 больше ориентирован на голосовой искусственный интеллект и использует фиксированную аппаратную конфигурацию.. Мозаика фокусируется на модульное расширение + агент кодирования AI с замкнутым циклом + сборка нескольких устройств, а также встроенный аккумулятор для портативного использования и возможность динамического добавления или удаления аппаратных возможностей.;
- По сравнению со стандартными платами ESP-DevKit: Стандартные платы разработки обычно требуют ручного подключения и разработки драйверов., в то время как Mosaico обеспечивает автоматическое распознавание и загрузку драйверов для магнитных модулей.. Его основная ценность заключается в создании Замкнутый цикл разработки оборудования на основе AI-агента.
Заключение
В итоге, Основная ценность ESP-Mosaico заключается в глубокой интеграции модульное оборудование и агенты кодирования AI.
Магнитное расширение и сборка нескольких устройств устраняют ограничения фиксированных конфигураций оборудования, присущих традиционным платам для разработки., в то время как два рабочих процесса —Кодирование чата и кодирование Vibe— охватывать весь процесс разработки: от быстрого прототипирования до формальной разработки продукта..
ESP-Mosaico значительно снижает барьер для разработки прототипов интеллектуального оборудования, удовлетворяя потребности как новичков, так и профессиональных разработчиков..
Он предлагает новое решение для встроенный ИИ, мультимодальное взаимодействие, и распределенное прототипирование Интернета вещей, обеспечение возможности аппаратного и программного обеспечения развиваться вместе на протяжении всего процесса разработки..














