🤖 Робот с «человеческим» осязанием: китайские учёные создали революционный тактильный датчик и модель DOVE Исследователи из Китая представили прорывную систему для роботов, которая сочетает бионический сенсор SuperTac и огромную языковую модель DOVE. Это позволяет машинам не просто «чувствовать» объекты, но и «понимать» их свойства на уровне человека. 🔬 Суперсенсор, вдохновлённый природой За основу разработки взята уникальная способность голубей воспринимать мир — их мультиспектральное зрение и умение чувствовать магнитное поле. ➡️ Аппаратная часть — SuperTac: Это тонкая (1 мм) «кожа», объединяющая несколько технологий: • Мультиспектральная камера — видит в ультрафиолете, видимом и инфракрасном свете, определяя форму, текстуру и даже температуру объекта. • Трибоэлектрический наногенератор (TENG) — распознаёт материал предмета по его электрическим свойствам с точностью 95%. • Инерциальный модуль (IMU) — улавливает вибрации и движение. 🧠 Искусственный интеллект, который объясняет ощущения Сырые данные с SuperTac обрабатывает специализированная тактильно-языковая модель DOVE с 8.5 млрд параметров. Её задача — переводить сложные физические сигналы в простые слова и логические выводы, как это делает человеческий мозг. 💡 Технические детали • Архитектура DOVE построена на базе LLM Vicuna, дополненной четырьмя параллельными CLIP-энкодерами для обработки изображений от каждого сенсорного канала. • Обучение проходило в три этапа: преобразование сигналов в изображения, проекция тактильных признаков в пространство языковой модели и тонкая настройка Vicuna для семантического вывода. • Ключевая инновация — «оптический переключатель» в сенсорной коже, который меняет режимы работы между захватом текстуры и определением цвета объекта. 🚀 Что это значит на практике? Робот с такой системой может: • Взять чашку и «понять», что она «жёлтая, комнатной температуры, с рифлёной металлической поверхностью». • Отсортировать мусор, логически рассуждая: «Этот предмет имеет характеристики PET, он лёгкий и тонкий — значит, пластиковая бутылка, её нужно отправить в переработку». Эта работа — большой шаг от простого «робот чувствует» к сложному «робот понимает, что он чувствует». Развитие таких систем открывает путь к по-настоящему естественному и безопасному взаимодействию людей и машин. Оригинальная статья в Nature #КитайскийИИ #КитайAI #Робототехника #ИскусственныйИнтеллект #КомпьютерноеЗрение #Нейросети #Biotech