PuppyGo ist ein vision language model, das große Sprachmodelle für verkörperte Agenten nutzt. Es kombiniert Informationen aus großen Sprachmodellen mit 3D-Wertkarten für Aufgaben der alltäglichen Manipulation. Die Robustheit gegenüber Störungen wird durch geschlossene visuelle Rückmeldungen ermöglicht.