Baldi ist die dreidimensionale Animation eines Gesichtes. Der virtuelle Gesprächspartner benutzt für seinen Unterricht die gleichen Mittel, mit denen tauben Kindern normalerweise Sprache beigebracht wird. Über ein Mikrofon kommunizieren die Kinder mit Baldi und können so ihre Leistungen verbessern. Der virtuelle Lehrer passt sich dem Lerntempo seiner Schüler an und zeigt ihnen, wie die feinen Bewegungen des Gesichtes den gewünschten Laut erzeugen. Bei einzelnen Wörtern erklärt die Computeranimation anhand von Mund-, Zahn- und Zungenstellung, wie sie richtig ausgesprochen werden.
Zusätzlich ermöglicht das Computerprogramm den Lehrern und Schülern, eine normale Unterrichtssituation zu simulieren. Die Kinder können Schulstunden und Hausaufgaben intensiv nachbearbeiten, um ihr Vokabular, das Lesen und die Rechtschreibung zu verbessern. Jeder Schüler erhält individuelle Instruktionen von Baldi. Der Lehrer kann sich währenddessen um einzelne Schüler noch intensiver kümmern.
Momentan wird das Programm an der Tucker-Maxon Oral School in Portland eingesetzt. Das Projekt leitet Ron Cole von der University of Colorado, Boulder. Lehrer und Schüler sind begeistert von dem virtuellen Lehrer. „Die Schüler zählen die Arbeit mit Baldi zu ihren Lieblingsbeschäftigungen“, sagt Cole. „Die Lehrer und Sprachtherapeuten berichten, dass sich die Lern- und Sprachfähigkeiten dramatisch verbessert haben.“