NTT Communications Corporation, Toei Company, Ltd. und NTT QONOQ, INC. gaben gemeinsam den sofortigen Start einer Kundendienst-Demonstration bekannt, bei der ein digitaler Mensch zur Kommunikation mit Menschen eingesetzt wird. In der Demonstration wird ein realistischer digitaler Mensch mit dem Namen "CONN", der durch die Kombination von menschenähnlichen Bildern, die von Toei Zukun Laboratory's digitaler Menschentechnologie1 generiert wurden, und menschenähnlichen Persönlichkeiten (Verhalten und Stimme), die mit NTT Human Informatics Laboratories's Körperbewegungsgenerierung und Stimmsynthese-KI-Technologie entwickelt wurden, mit Menschen interagieren, die den virtuellen Raum OPEN HUB Park2 von NTT Com besuchen. Anhand der Ergebnisse soll ermittelt werden, ob es möglich ist, digitale Menschen als neue Kontaktpunkte für kommerzielle Dienstleistungen zu nutzen.

CONN wurde aus den Gesichtern von neun realen Personen oder "Katalysatoren" entwickelt, die mit der neuesten Version von LightStage3 des Toei Zukun Labors gescannt wurden, woraufhin ein realistischer Mensch (digitaler Mensch) mit Hilfe von Computergrafiken erstellt wurde. Für die Persönlichkeit von CONN, einschließlich des Verhaltens und der Stimme, wurden die Motion-Capture-Daten und die Stimmdaten der Katalysatoren verwendet, um eine KI-Engine zu trainieren, die in Zusammenarbeit mit den NTT Human Informatics Laboratories entwickelt wurde und die das Verhalten und die Stimmcharakteristiken echter Menschen in CONN reproduzierte. Im letzten Schritt konvertierte eine von NTT Com entwickelte Software die Merkmalspunkte der erfassten Gesichts- und Persönlichkeitsdaten in 3DCG.4 Die Software generierte dann auf der Grundlage eines erlernten Programms digitale Bewegungen und Stimmen.

Wenn Menschen den OPEN HUB Park besuchen, kommuniziert CONN mit ihnen in einem natürlichen Stil und zeigt verschiedene Gesichtsausdrücke, Verhaltensweisen und Stimmlagen, als ob er tatsächlich denken würde, während er die Menschen durch die verschiedenen Zonen des virtuellen Parks führt. Empfangsbereich: CONN wird das Konzept des OPEN HUB Park mit Hilfe von Informationen vorstellen, die auf sieben LED-Monitoren angezeigt werden, die die Besucher mit einer AR-Brille betrachten. Präsentationsbereich: CONN wird auf einem lebensgroßen LED-Monitor erscheinen, um die auf dem Monitor angezeigten Videoinhalte zu erläutern, und außerdem eine kurze interaktive Fragerunde mit den Besuchern durchführen.

Bibliotheksbereich5: Tiere, die die Initiativen von Smart World symbolisieren, erscheinen in den AR-Brillen der Besucher und führen sie durch den Bibliotheksbereich. Der digitale Katalysator 3DCG CONN wird für mehrere Geräte optimiert, so dass die Besucher nahtlos zwischen der AR-Brille, den sieben LED-Monitoren und dem lebensgroßen Monitor wechseln können. Für die Demonstration wurde jedem Unternehmen eine bestimmte Rolle zugewiesen: NTT Com: Bereitstellung des Demonstrationsgeländes OPEN HUB Park, Vorbereitung des Evaluierungsszenarios, der Architektur und der Infrastruktur sowie Management der Qualitätskontrolle.

Toei: Beaufsichtigung, Produktion und Aufbau des digitalen Katalysatorsystems. QONOQ: Entwicklung von Software, Demonstrationsinhalten und zukünftigen Geschäftsmöglichkeiten. Die drei Unternehmen werden die Erkenntnisse aus der Demonstration nutzen, um Möglichkeiten für den Einsatz digitaler Menschen in ihren eigenen Unternehmen und in Lösungen für Kunden in einer Vielzahl von Branchen und Sektoren zu erkunden. Da die Herausforderungen des Arbeitskräftemangels und die Notwendigkeit, die Produktivität zu verbessern, in Japan zunehmen, versuchen die Unternehmen, Lösungen zu entwickeln, die fortschrittliche Technologien wie XR, das Metaverse und die Robotik einbeziehen.

Chatbots und virtuelle Charaktere sind zum Beispiel in Kontaktzentren und Geschäften weit verbreitet. Aber viele Menschen ziehen es immer noch vor, mit echten Menschen zu verhandeln, oder zumindest mit virtuellen Figuren, die sich wie echte Menschen bewegen und kommunizieren können. Vor diesem Hintergrund haben die drei Unternehmen CONN entwickelt, einen digitalen Menschen, der sich wie ein natürlicher Mensch verhält.

CONN kombiniert die Technologie zur Erzeugung digitaler Menschen des Toei Zukun Laboratory mit der KI-Technologie zur Erzeugung von Körperbewegungen6 und der KI-Technologie zur Sprachsynthese7 der NTT Human Informatics Laboratories. CONN wird als digitaler Katalysator8 für die Bereitstellung von Kundendiensten im OPEN HUB for Smart World9 dienen. Auf dieser Grundlage werden Möglichkeiten erforscht, digitale Menschen, die bisher hauptsächlich für die Unterhaltung entwickelt wurden, als neue Anlaufstellen für Unternehmensdienstleistungen zu nutzen.