Last Call for Abstracts: LLM fails – Failed experiments with Generative AI and what we can learn from them
automatic English translation on our Workshop-Website: https://www.ids-mannheim.de/home/lexiktagungen/llm-fails Liebe Liste, wer hat noch nicht, wer will noch (mal)? Gerne möchten wir ein letztes Mal an folgenden Call for Abstracts erinnern: Am 8. und 9. April 2025 findet ein Workshop zum Thema „LLM fails. Gescheiterte Experimente mit Generativer KI und was wir daraus lernen können“ im Leibniz-Institut für Deutsche Sprache, Mannheim statt. Bei positiver Begutachtung der ausgearbeiteten short papers besteht die Möglichkeit, diese in einem Sonderheft des Journals for Language Technology and Computational Linguistics zu veröffentlichen. Nähere Informationen: Gescheiterte Experimente finden für gewöhnlich keinen Platz im wissenschaftlichen Diskurs, sie werden verworfen und nicht publiziert. Wir glauben, dass dadurch potenzieller Erkenntnisgewinn verloren geht. Schließlich ermöglicht eine systematische Reflexion über die Gründe des Scheiterns, angewendete Methoden zu hinterfragen und/oder zu verbessern. Zudem kann bei der Wiederholung zuvor gescheiterter Experimente explizit Fortschritt ermittelt werden, wenn diese dann gelingen. Die Diskussion und Dokumentation von Fehlschlägen schafft somit aus Perspektive der Methodenreflexion einen Mehrwert für die wissenschaftliche Gemeinschaft. Dies gilt umso mehr in einem Bereich wie der Forschung zu und mit Generativer Künstlicher Intelligenz, die nicht auf eine jahrzehntelange Tradition zurückblicken kann und in dem Best Practices erst ausgehandelt werden. In diesem Workshop stehen linguistische und NLP-Experimente mit Generativer Künstlicher Intelligenz im Fokus, die nicht die gewünschten Ergebnisse gebracht haben, beispielsweise, aber nicht beschränkt auf: • Einsatz einer Generativer KI als Named-Entity-Recognizer • Einsatz einer Generativer KI zur automatischen Transkription von gesprochenen Sprachdaten • Einsatz einer Generativer KI zur Erstellung von Wörterbuchartikeln • Einsatz einer Generativen KI zur Detektion von Sprachwandelphänomenen Im Beitrag sollte klar werden, inwiefern dieses Scheitern zum Erkenntnisgewinn bezüglich der Arbeit mit Generativer KI beitragen kann. Unveröffentlichte Beitragsvorschläge können bis zum 11.12.2024 (verlängert) in Form eines Abstracts (ca. 500-750 Wörter) in deutscher oder in englischer Sprache anonymisiert an folgende Mailadresse gesendet werden: llmfails(at)ids-mannheim.de Die 20-minütigen Vorträge können auf Deutsch oder Englisch gehalten werden. Über die Annahme der Beiträge entscheidet das Organisationsteam bis zum 16.12.2025. Bei Annahme des Beitrags wird die Ausarbeitung zu einem short paper (4-6 Seiten ohne Referenzen) auf Englisch bis zum 15.02.2025 erbeten. Die short papers werden im peer review (double blind) begutachtet und in einem Sonderheft des Journals for Language Technology and Computational Linguistics veröffentlicht. Wir freuen uns auf Ihren Beitrag! Herzliche Grüße Annelen Brunner, Christian Lang & Ngoc Duyen Tanja Tu Das Organisationsteam -- Dr. Ngoc Duyen Tanja Tu Leibniz-Institut für Deutsche Sprache Abteilung Grammatik Tel: +49 621-1581-242
participants (1)
-
Ngoc Duyen Tanja Tu