The GenAI4IDN Benchmark 2.0 - AI-Assisted Assessment of Generative AI Tools for the Design of Interactive Digital Narratives

Das Kapitel GenAI4IDN Benchmark 2.0 bietet eine eingehende Bewertung der neuesten generativen KI-Tools für interaktives digitales Narrativ-Design (IDN). Das Benchmarking-Rahmenwerk wurde auf 15 Tools aktualisiert, die eine größere Bandbreite an GenAI-Modellen abdecken, einschließlich Open-Source-Angeboten. Das Kapitel führt zwei neue Aspekte in das Rahmenwerk ein: iterative Aufforderung und die Auswirkungen kontextualisierter Aufforderung. Es entwickelt außerdem eine KI-gestützte Bewertungsmethode, um die schiere Menge der während des Benchmarking-Prozesses generierten Ergebnisse zu bewältigen. Die Evaluierung umfasst 15 übliche IDN-Designaufgaben mit jeweils vier Teilaufgaben und beinhaltet eine detaillierte Analyse der Fähigkeiten der Tools in den Bereichen Text-, Code-, Bild-, Video- und Musikgenerierung. Die Ergebnisse zeigen signifikante Verbesserungen bei der Bildgenerierung, Codegenerierung, Dialogbäumen und Hintergrundgeschichten. Das Kapitel schließt mit einer Diskussion über die Beschränkungen aktueller GenAI-Werkzeuge und die ethischen Bedenken hinsichtlich ihrer Verwendung. Die Ergebnisse heben das Potenzial von GenAI-Tools im IDN-Design hervor, betonen aber auch die Notwendigkeit angemessener Planung, Schulung und ethischer Überlegungen. Dieses Kapitel ist eine wertvolle Ressource für Fachleute, die den aktuellen Stand der GenAI-Tools und ihrer Anwendungen im interaktiven digitalen Erzähldesign verstehen wollen.