Канадский стартап smartARM использует искусственный интеллект для создания интуитивно понятных бионических протезов

Люди и компании используют аппаратное и программное обеспечение искусственного интеллекта, чтобы сделать жизнь проще и доступнее для всех. Так обстоит дело со smartARM, стартапом из Торонто, который разрабатывает прототип бионической руки, ориентированный на зрение, который использует программное обеспечение с открытым исходным кодом и очки Meta AI в качестве дополнительного дополнения, чтобы исследовать более интуитивное управление протезированием для людей, живущих с различиями в конечностях. Многие традиционные протезы рук требуют от пользователей ручного переключения между схемами захвата различных предметов, что затрудняет перемещение повседневных предметов. Такое, казалось бы, естественное явление, как взятие в руки стакана, а затем ложки, становится многоэтапным процессом. SmartARM решил эту проблему, разработав аппаратное и программное обеспечение искусственного интеллекта, которое понимает окружающую среду и автоматически выбирает подходящий захват для объекта, чтобы пользователи могли интуитивно переключаться между повседневными задачами. Протезная рука SmartARM «видит» через камеру, встроенную в его ладонь. Команда использует DINOv2, модель зрения Meta с открытым исходным кодом, чтобы помочь ей распознавать повседневные объекты всего лишь по нескольким эталонным фотографиям, поддерживая программное обеспечение SmartARM для выбора захвата. Это позволяет ей захватывать и поднимать объекты на основе прямого визуального считывания признаков, без необходимости предварительного понимания или дополнительного программирования. Рука может практически мгновенно адаптироваться к объектам, обученным всего лишь по нескольким фотографиям, — на что раньше могло уйти несколько недель. smartARM использует очки Meta AI Glasses и набор инструментов доступа к устройствам Meta Wearables для расширения и улучшения распознавания и понимания объектов, предоставляя больше данных с эгоцентрической точки зрения, которые предлагают очки. Очки Meta AI дают руке дополнительный контекст, позволяющий лучше понять, с чем пытается взаимодействовать пользователь. Он также позволяет пользователям добавлять новые объекты через приложение устройства на своих телефонах, предоставляя каждому участнику сообщества smartARM возможность персонализировать свои протезы в соответствии со своими повседневными потребностями. Для людей, которые ее носят, результаты меняют жизнь: бионическая рука работает с первой попытки, не требуя никакой подготовки. Давний пользователь smartARM и бывший игрок НФЛ Шакем Гриффин описал свои ощущения от его использования: "Из всех технологий, заложенных в него, для меня больше всего важны масштабируемость и доступность. Это будущее потребительского протезирования". "Создать умелую руку - это только часть задачи. Не менее важно сделать ее интуитивно понятной", - сказал Хамаял Чоудри, основатель и генеральный директор smartARM. «Помогая руке распознавать повседневные предметы и выбирать подходящий захват, мы работаем над тем, чтобы люди могли больше сосредоточиться на том, что они хотят делать, а не на том, как управлять своим протезом».

Оригинал на Meta