Ziele und Inhalt:
In dem Workshop geht es um spezialisierte Large Language Models und spezialisiertes Prompting für die Geisteswissenschaften. In verschiedenen Impulsvorträgen und Hands-on-Sessions lernen Teilnehmende, wie sie offene, auf die geisteswissenschaftliche Forschung spezialisierte und lokale Modelle mit ihren eigenen Daten verwenden können und wie sie Prompts an geisteswissenschaftliche Fragen anpassen können. Ebenfalls reflektieren wir, wie Daten für ein Fine-Tuning oder Post-Training eines kleinen Sprachmodells aufbereitet werden können.
🤖 Spezialisierte LLMs für die Geisteswissenschaften – offene, lokale und forschungsnahe Modelle im Einsatz
✍️ Hands-on & Prompting-Praxis – eigene Textdaten nutzen und Prompts gezielt an geisteswissenschaftliche Fragestellungen anpassen
📐 Datenaufbereitung für Fine-Tuning & Post-Training kleiner Modelle
Tag 1
10:00 Uhr: Anmeldung
10:30 Willkommen / Einführung / Kennenlernen
11:15 Impuls 1: Offene und spezialisierte Modelle für die Geistewissenschaften | Sarah Oberbichler
12:15 Mittagspause
13:15 Hands-on: Lokal gehostete und forschungsnahe LLMs am eigenen Rechner | Sarah Oberbichler
14:45 Kaffeepause
15:00 Hands-on: Lokal gehostete LLMs mit eigenen Daten verwenden | Sarah Oberbichler
15:30 Impuls 2: Einführung in HuggingFace | Johanna Mauermann
15:45 Hands-on: Forschungsnahe Modelle mit HuggingFace Inference | Johanna Mauermann
16:45 Diskussion
17:15 Abschluss
18:00 Workshop-Abendessen (auf eigene Kosten) | alle Teilnehmenden
Tag 2
09:30 Willkommen
09:45 Impuls 1: Prompting und Benchmarking für die Geisteswissenschaften | Lauren Coetzee
10:45 Kaffeepause
11:00 Hands-On: Prompts an geisteswissenschaftliche Forschungsfrage anpassen und Benchmarking Strategien überlegen | Lauren Coetzee
12:00 Mittagspause
13:00 Impuls 2: Einführung in Fine-Tuning und Post-Training | Sarah Oberbichler
13:30 Hands-on: (Eigene) Daten für Fine-Tuning aufarbeiten | Sarah Oberbichler
14:45 Kaffeepause
15:00 Diskussion und Mentoring | Sarah Oberbichler/Lauren Coetzee/Johanna Mauermann
15:45 Schlusswort