IRIS Kolloquium I Zusatztermin I Ana Barić: Recalibrating uncertainty for social science in the era of LLMs

29. April 2025, 14:00 Uhr

Zeit: 29. April 2025, 14:00 – 15:00 Uhr
Veranstaltungsort: Raum V 5.03 (PWR 05C—V 5.03)
Pfaffenwaldring 5C
Campus Vaihingen
Download als iCal:

Wir freuen uns, diese zusätzliche Session anbieten zu können. Unser Gast, Ana Barić, wird ihre Forschung vorstellen. Sie promoviert im Bereich NLP am TakeLab FER der Universität Zagreb. Ihre Forschungsinteressen reichen von der Erforschung der Modellunsicherheit in Sprachmodellen bis hin zu verschiedenen Themen der Computational Social Science, wie beispielsweise Sentimentanalyse und Bias-Erkennung.

Abstract

Das hohe Volumen an Vortrainingsdaten für LLMs kann als zweischneidiges Schwert betrachtet werden. Es ermöglicht zwar Generalisierung, führt aber aufgrund der in den Daten erfassten unterschiedlichen Perspektiven auch zu Rauschen und Komplexität bei der Bearbeitung subjektiver Aufgaben. Dies führt zu einer erhöhten Modellsensitivität und schwer interpretierbaren Ausgabevariationen. Um diese Herausforderungen zu bewältigen, können Unsicherheitsmethoden helfen, Datenambiguität zu bewältigen, die Robustheit zu verbessern und die Interpretierbarkeit zu steigern, was zu zuverlässigeren und transparenteren Erkenntnissen führt.

In diesem Vortrag betrachten wir das Unsicherheitsmodell für LLMs erneut und konzentrieren uns dabei auf Schätzung, Bewertung und Kalibrierung aus der Perspektive der Computational Social Science. Wir untersuchen das Dilemma zwischen Unsicherheit und Vertrauen, wie verschiedene Unsicherheitsquellen für subjektive Aufgaben genutzt werden können und den Zusammenhang zwischen Unsicherheit und menschlicher Labelvariation. Gleichzeitig beleuchten wir offene Herausforderungen an der Schnittstelle von Unsicherheit und Sozialwissenschaften.

Die Session findet auf Englisch statt.

Im Anschluss an das Kolloquium laden wir Sie zu Kaffee und Kuchen ein.

Das Wort Kolloquium vor dem Hintergrund einer wellenförmigen Struktur in Blautönen.
[Bild: SRF IRIS]

In unregelmäßigen Abständen verschicken wir einen Newsletter mit Informationen zu IRIS-Veranstaltungen. Damit Sie nichts verpassen, tragen Sie einfach Ihre E-Mail-Adresse ein. Sie erhalten in Kürze eine Bestätigungs-E-Mail, um sicherzugehen, dass Sie wirklich derjenige sind, der den Newsletter abonnieren möchte. Nach Erhalt dieser Bestätigung werden Sie in die Mailingliste aufgenommen. Es handelt sich um eine versteckte Mailingliste, d. h. die Abonnentenliste ist nur für den Administrator einsehbar.

Hinweis: Ohne Angabe der E-Mail-Adresse ist eine Bearbeitung Ihrer Anmeldung zum Newsletter nicht möglich. Ihre Angabe ist freiwillig und Sie können sich jederzeit vom Bezug des Newsletters wieder abmelden.

Newsletter-Anmelde-Seite

Vergangene Veranstaltungen


April 2025

März 2025

Februar 2025

Januar 2025

November 2024

Oktober 2024

Juli 2024

Juni 2024

Mai 2024

März 2024

Februar 2024

Januar 2024

Dezember 2023

November 2023

Oktober 2023

September 2023

Juli 2023

Juni 2023

Mai 2023

April 2023

März 2023

Februar 2023

Januar 2023

Dezember 2022

November 2022

Oktober 2022

Juli 2022

Juni 2022

Mai 2022

April 2022

Februar 2022

Januar 2022

Dezember 2021

November 2021

Oktober 2021

September 2021

Juli 2021

Zum Seitenanfang