Aiutare i robot a concentrarsi e dare una mano
Il sistema aiuta i robot a concentrarsi su ciò che conta, usando suoni e immagini per indovinare gli obiettivi umani e offrire il giusto aiuto in modo rapido e sicuro.
I robot trovano il mondo reale difficile da capire.Il MIT ha creato un sistema chiamato "rilevanza" per aiutare i robot a concentrarsi su ciò che conta.Usa suoni e immagini per indovinare ciò che una persona desidera e offre rapidamente aiuto.
Il team lo ha testato con una colazione a buffet.Il robot, usando una fotocamera e un microfono, ha consegnato gli articoli per il caffè guardando e ascoltando.Ha indovinato gli obiettivi del 90% giusto, ha scelto gli oggetti giusti il 96% delle volte e aveva il 60% in meno di incidenti.
Trovare attenzione
Il team ha costruito un robot che funziona come il RAS del cervello, aiutandolo a concentrarsi su cose importanti e ignorare il resto.Innanzitutto, i robot orologi e ascoltano usando una fotocamera e un microfono, inviando ciò che vede e sente a un'intelligenza artificiale che trova persone, oggetti, azioni e parole chiave.In secondo luogo, controlla se sta accadendo qualcosa di importante, come una persona che entra nella stanza.Se vede una persona, inizia il terzo passo: il robot capisce cosa vuole la persona e trova gli oggetti giusti per aiutare, come raccogliere tazze e creme anziché frutta e snack.
Modalità aiutante
I ricercatori hanno testato il loro nuovo sistema con esperimenti che hanno simulato un buffet per la colazione della conferenza.Hanno scelto questa configurazione a causa del set di dati delle azioni per la colazione disponibile al pubblico, che include video e immagini che mostrano attività comuni per la colazione come preparare caffè, cucinare pancake, fare cereali e friggere le uova.Ogni video e immagine sono etichettati con l'azione specifica e l'obiettivo generale, come "preparare il caffè" o "uova fritte".
Utilizzando questo set di dati, il team ha addestrato e testato diversi algoritmi nel loro toolkit di AI per riconoscere le azioni umane, capire l'obiettivo della persona e identificare gli oggetti necessari per aiutare.Nei loro esperimenti, hanno creato un braccio e una pinza robotici, quindi hanno chiesto al robot di aiutare le persone mentre si avvicinavano a un tavolo pieno di bevande, snack e stoviglie.Quando nessuno era in giro, l'IA del robot ha lavorato in silenzio in background, etichettando e classificando gli oggetti sul tavolo.Ma quando è stato rilevato un essere umano, il robot è immediatamente passato alla sua fase di rilevanza, trovando rapidamente gli oggetti che avrebbero aiutato al meglio la persona in base a ciò che l'IA ha previsto il loro obiettivo.
