Der Kunde wollte an der Jahresversammlung 2025 der American Society of Clinical Oncology (ASCO) teilnehmen. Die Veranstaltung behandelte den aktuellen Stand der Krebsbehandlung. Die Hauptanforderung war die Erstellung eines vollwertigen digitalen Avatars, der Interessierte über die Krebsbehandlung informieren sollte.
Der Avatar sollte die Nutzer mit speziellen Gesprächseinstiegen (sogenannten "Hooks") ansprechen und dann ihre Fragen zu den wichtigsten Aspekten von Krebs und dessen Behandlung beantworten.
Unser Kunde ist eine renommierte US-amerikanische Krebsklinik, ein Mitglied der American Society of Clinical Oncology (ASCO) mit jahrzehntelanger Erfahrung in der Krebsbehandlung. Die vom Kunden bereitgestellten Forschungsdaten und Experteninformationen bildeten die Grundlage für die Logik und Arbeitsprinzipien des zukünftigen Avatars.
USA
2 Monate
1 Spezialist
Die Arbeit am visuellen Avatar wurde zwischen Silk Data und unserem Partner aufgeteilt. Unser Partner übernahm die Verantwortung für alles im Zusammenhang mit 'Text-to-Speech'- und 'Speech-to-Text'-Technologien sowie für die optische Gestaltung des Avatars. Unser Team hingegen arbeitete am technischen Teil, der Programmierung, Tests und Integration des Endprodukts umfasste.
Darüber hinaus erforderte das Projekt ein Verständnis der Kernprinzipien der Ideen der Kundenfirma und der Mechanismen, die sie in ihrem digitalen Assistenten sehen wollten.
Sowohl unserem Unternehmen als auch unserem Partner wurde ein Satz von Kundenanweisungen und ursprünglichen Wünschen vorgelegt, die die Grundlage für die weitere Projektspezifikation bildeten. Die Spezifikation enthielt Informationen zu den Hauptaspekten der Arbeitsprinzipien des zukünftigen Avatars.
Der Avatar oder der Clinical Trial Patient Ambassador, namens Reggie, wird ein älterer männlicher Erwachsener sein, der eine Patientengruppe repräsentiert, die Input zum Design klinischer Studien gibt.
Der Avatar wird in den Konferenzraum hineinsprechen, um Passanten ins Gespräch zu ziehen. Nachdem ein Gespräch begonnen hat (nachdem ein Teilnehmer mit Reggie zu sprechen beginnt), wird der Avatar den Teilnehmer auffordern, bestimmte Krebsarten über das installierte iPad auszuwählen.
Der Avatar wird Informationen und Optionen für das weitere Gespräch bereitstellen. Fragen und Aussagen der Teilnehmer werden aufgezeichnet und vordefinierten Antworten zugeordnet. Zusätzlich zu diesen Schlüsselphrasen sollte Reggie auch in der Lage sein, auf zufällige Fragen der Teilnehmer zu reagieren. Der Avatar wird jedoch nur vordefinierte Themen besprechen und Teilnehmer von nicht genehmigten Themen wegleiten.
Die Ergebnisse des Gesprächs zwischen dem Konferenzteilnehmer und dem Avatar werden in Echtzeit auf einem Bildschirm angezeigt, sodass der Teilnehmer die Informationen bei Bedarf lesen kann.
Hinweis. Alle vom Avatar bereitgestellten Gesprächszeilen sind vordefiniert. Da die meisten Avatar-Antworten ein hohes Maß an Wissen und Expertise sowohl in der Gesundheitsbranche als auch in Bezug auf Krebsbehandlungsthemen erfordern, wurden die Skripte von der Kundenfirma bereitgestellt. Im Wesentlichen ist die Lösung ein KI-Chatbot, der nahtlos in ein Hologramm integriert wurde.
Es gibt drei Schlüsselaspekte bezüglich Reggies Gesprächseröffnung.
Der Avatar wurde programmiert, drei Gesprächseinstiege zu verwenden, um Teilnehmer zum Gespräch zu animieren, wenn er nicht aktiv in ein Gespräch verwickelt ist. Diese sind:
Der Avatar soll alle 20 Sekunden zwischen diesen drei Hooks wechseln.
Das installierte iPad fordert die Teilnehmer auf, eine der folgenden Kategorien von Krebsstudien auszuwählen:
Jede Kategorie hat einige Studienoptionen, und Reggie wird in der Lage sein, über jede davon zu sprechen.
Wenn es mehrere Studien in der Kategorie gibt, muss der Teilnehmer auf dem iPad auswählen, über welche Studie er mehr erfahren möchte. Wenn es nur eine Studie in der Kategorie gibt, beginnt der Avatar sofort, darüber zu sprechen, ohne Zwischenstufe.
Der Kunde wünschte sich auch, den Avatar vor themenfremden Gesprächen zu schützen. Zu diesem Zweck wurde eine spezielle Zeile erstellt:
„Das ist ein interessantes Thema, aber was ich wirklich besprechen möchte, ist, wie klinische Studien die Zukunft der Krebsbehandlung gestalten.“
Der Avatar wird diese Zeile als Antwort auf jede Frage liefern, die sich nicht auf die vordefinierten Kategorien bezieht.
Wenn die Frage des Nutzers das Thema Krebsbehandlung betrifft, aber über die Dutzende von vordefinierten Fragen und Antworten hinausgeht (wie „Können Sie die Wissenschaft dahinter erklären?“ oder „Wie kann ich mit einer Studienstelle in Kontakt treten?“), lautet die Antwort des virtuellen Avatars:
„Diese Frage wird besser von einem Vertreter am Informationsschrank für medizinische Fragen beantwortet. Ich kann Ihnen über [Liste der verbleibenden Themen] erzählen.“
Einer der Hauptaspekte der Arbeit von Reggie, dem digitalen Avatar, ist die Gesprächslandkarte – ein Gesprächssystem aus Themen, Fragen und Antworten, das innerhalb des Avatars festgelegt und feinabgestimmt ist.
In der Spezifikationsphase wurden nur drei Notizen definiert:
Reggie sollte wissen, dass er nicht zweimal in einem Gespräch dieselbe Frage zu derselben Studie stellen darf.
Der Avatar sollte wortgetreu vordefinierte Antworten liefern, um Missverständnisse oder Fehlinformationen zu vermeiden.
Bei Wörtern, von denen erwartet wird, dass sie schwer auszusprechen sind, wird es eine begleitende Audioaussprache geben.
Wie bereits erwähnt, gibt es sechs Hauptkategorien von Krebsstudien, und jede Kategorie enthält 1 bis 5 Studien.
Dann gibt es 8 Schlüsselthemenkategorien für jede der Studien. Diese sind:
Der Avatar kann bis zu einem Dutzend Fragen (direkt oder umschrieben) zu jedem Thema wahrnehmen. Für jedes Thema in jeder Studie ist jedoch nur eine Antwort vorbereitet. Dies wurde mit der Absicht gemacht, mögliche Mehrdeutigkeiten in den Antworten zu vermeiden.
Es wurden auch drei Hauptregeln definiert und als Gesprächspfad-Funktionalität implementiert.
Am Ende entsprach das Endprodukt allen ursprünglichen Anforderungen.
Der Avatar wurde erfolgreich bereitgestellt, implementiert und während der Jahresversammlung 2025 der American Society of Clinical Oncology eingesetzt. Reggie bot eine Woche lang, die die Konferenz dauerte, Hunderten von Besuchern Beratung und Unterstützung an.
"Dieses Projekt zeigt deutlich, dass fortschrittliche digitale Avatare die Realität sind, die immer mehr an Popularität gewinnen wird. Jetzt beantworten sie Ihre Fragen zu vordefinierten Szenarien, und in zehn Jahren werden sie Ihnen überallhin folgen.
Sicher, eine solche Prognose ist zu optimistisch, aber die Recherche in einem unserer Blogbeiträge zu KI-Avataren zeigt bereits einige herausragende Beispiele, die es in der Einzelhandels-, Fertigungs- und Unterhaltungsindustrie gibt. Wir glauben, dass weitere Innovationen nur eine Frage der Zeit sind."
Yuri Svirid, PhD. — CEO Silk Data
Ein digitaler Avatar ist eine grafische Darstellung einer echten Person oder einer Figur, die in einer digitalen Umgebung erstellt und eingesetzt wird. Obwohl der Begriff sich sogar auf einfache 2D-Icons beziehen kann, bezeichnen die meisten Menschen digitale Avatare als komplexe, interaktive und anpassbare 3D-Modelle, die in Filmen, Videospielen oder spezieller Software verwendet werden.
Die Erstellung eines fortschrittlichen digitalen Avatars ist ein eher komplexer Prozess. Er umfasst die Verwendung spezialisierter Software für Modellierung, Skulpturierung, Rigging, Bewegungs- und Spracherfassung und vieles mehr. Die fortschrittlichsten Avatare können auch Technologien des maschinellen Lernens für Selbstlernen und Anpassung nutzen. All diese Fähigkeiten können einen digitalen Avatar zu echten digitalen KI-Assistenten machen.
Digitale Avatare werden in zahlreichen Anwendungen eingesetzt. Sie repräsentieren Nutzer in Videospielen, virtuellen Reality-Meetings und Social-Media-Plattformen. Darüber hinaus sind sowohl primitive als auch fortschrittliche digitale Avatare entscheidend für das Metaverse, die virtuelle Zusammenarbeit und das digitale Storytelling. Heutzutage haben sie auch zunehmende Anwendungsfälle in KI und Robotik als visuelle Schnittstelle für autonome Systeme.
Unser Team
Fragen zur KI-Integration oder -Entwicklung?
