XIAOML Kit: ESP32-S3 с камерой, микрофоном и IMU для изучения TinyML

Embarcados рассказывает о XIAOML Kit от Seeed Studio, который создан для практических занятий из книги «Machine Learning Systems» профессора Виджая Джанапы Реди из Гарварда. Лабораторные работы разработаны вместе с профессором Марсело Роваи из UNIFEI в Итажубе в рамках группы tinyML4D.

В комплект входят XIAO ESP32-S3 Sense с камерой OV3660, цифровым микрофоном и считывателем SD-карт, а также плата расширения с 6-осевым IMU и OLED-дисплеем 0,42 дюйма. Так покрываются все три типа данных, с которыми работает книга: изображения, звук и движение. В комплекте также есть антенна FPC на 2,4 ГГц, два радиатора и microSD-карта на 32 ГБ с адаптером.

SoC — ESP32-S3R8, двухъядерный Xtensa LX7 с частотой 240 МГц, 512 КБ SRAM, 8 МБ PSRAM и 8 МБ флеш-памяти. IMU — LSM6DS3TR-C, а OLED использует контроллер SSD1315, который библиотеки воспринимают как SSD1306 с разрешением 72 x 40 пикселей. Собранное устройство имеет размеры 21 x 17,8 x 30 мм и весит 10,6 г. Автор отмечает практичную деталь: IMU и OLED работают на одной шине I2C с адресами 0x6A и 0x3C, поэтому при подключении другого датчика I2C эти два адреса нужно обойти. На плате IMU есть также разъём JST для литиевого аккумулятора 3,7 В, что удобно для носимых проектов.

Больше всего мне понравилось сочетание справочной книги с недорогим и компактным железом: можно от теории сразу перейти к запуску инференса на настоящем микроконтроллере. OLED, конечно, вмещает всего две-три читаемые строки, но этого достаточно, чтобы показать распознанный класс или процент уверенности.

Источник: Embarcados