Dieser Problematik haben sich die Forscher um Ashutosh Saxena von der Cornell University in Ithaca gewidmet. Ihr Roboter ist mit einer 3-D Kamera ausgerüstet, die Objekte im Raum erfasst. Eine speziell entwickelte Software kann sie identifizieren und sie Fähigkeiten zuordnen. Der Roboter weiß beispielsweise: In einen Topf kann man etwas hineinschütten, es erhitzen und es wieder ausschütten. Ein Herd kann unterschiedlich aussehen, hat aber ähnliche Eigenschaften – mit ihm kann man erhitzen und manchmal stehen unterschiedliche Gegenstände auf ihm. Und so weiter. Auf diese Weise kann der Roboter einen Topf, den Herd und das Waschbecken erkennen und sie in seine Arbeitsabläufe integrieren.
Weniger „Input Error”
Dies ermöglicht, dass die Anweisung „Wasser heiß machen” als Information ausreicht: Der Roboter kann dazu den Herd benutzen – falls nicht vorhanden, erkennt er die Mikrowelle in der Küche und kann sie als Alternative nutzen. Das Ganze klappt auch noch am nächsten Tag, wenn der Topf woanders steht, oder wenn man den Roboter in eine andere Küche verfrachtet hat. Grundlegende Handlungsweisen können dem Roboter durch Video-Simulationen eingegeben werden, die von Nutzern erzeugt werden, ähnlich wie bei einem Computerspiel. Diese Handlungen werden dann mit Sprachbefehlen verknüpft, die von vielen unterschiedlichen Sprechern stammen und demzufolge unterschiedlich lauten können: „Bring den Topf zum Herd” – „trage den Topf zum Herd” – „setze den Topf auf den Herd” – „geh zum Herd und mach den Topf heiß”… All diese Befehle bilden eine Datenbank für die gleiche Handlungsanweisung. Wenn der Roboter einen Befehl eines neuen Sprechers hört, vergleicht er ihn mit seinen Datenbank-Einträgen und reagiert mit der Handlung, die am ehesten gewünscht sein könnte.
Natürlich macht ihr Roboter noch viele Fehler, räumen die Forscher ein, aber er ist bisherigen Versionen deutlich überlegen. In bis zu 64 Prozent der Fälle reagierte er richtig, auch wenn die Anweisungen ungewöhnlich ausgedrückt waren, Detail-Informationen fehlten oder sich das Umfeld geändert hatte. In einem Video veranschaulichen die Forscher dies. Darin macht der Roboter „Dave” ein Dessert nach den Anweisungen seines Gastes.
