Startup smartARM usa IA da Meta em prótese de braço 'vision-first'

A startup canadense smartARM desenvolve uma prótese de braço biônica 'vision-first' que usa IA para selecionar automaticamente a pegada adequada para cada objeto.

A inovação central é a abordagem 'vision-first', que permite que a prótese interprete o ambiente visualmente e ajuste a pegada, aumentando a intuitividade para o usuário.

A prótese usa uma câmera embutida na palma para 'ver' o objeto e o software proprietário Dexterity OS para identificar e selecionar a pegada mais adequada.

O sistema de câmera e software próprio é a base da capacidade de reconhecimento e controle da prótese, permitindo uma interação direta com o ambiente.

O sistema usa o modelo de visão open-source da Meta, DINOv2, para reconhecer objetos com apenas algumas fotos de referência e adaptar a pegada quase instantaneamente.

O uso do DINOv2 da Meta permite que a prótese se adapte rapidamente a novos objetos, o que é um avanço significativo em comparação com os métodos tradicionais.

Os óculos Meta AI são uma adição opcional que permite à prótese 'ver' mais do ambiente, expandindo a capacidade de reconhecimento além da câmera na palma.

Essa integração com os óculos da Meta é estratégica para fornecer mais contexto visual e dados egocêntricos, melhorando a compreensão do ambiente.

O fundador da SmartARM, Hamayal Choudry, disse que os óculos Meta AI permitem que o braço veja mais do seu ambiente do que apenas a câmera na palma.

A declaração do fundador esclarece o papel dos óculos no aprimoramento da visão da prótese, destacando o benefício da integração da tecnologia Meta.