Bitte wählen Sie die Bereiche, die Sie exportieren möchten:
Schulung RAG oder Fine-Tuning? Mit Python messen statt vermuten
Schulungsformen
Offene Schulung
- 2 Tage
- 5 gesicherte Termine
- Köln / Online
- 1.440,00 p. P. zzgl. MwSt.
- Dritter Mitarbeitende kostenfrei
- Learning & Networking in einem. Garantierte Durchführung ab 1 Teilnehmenden.
Inhouse-/Firmenschulung
- 2 Tage - anpassbar
- Termin nach Wunsch
- In Ihrem Hause oder bei der GFU
- Preis nach Angebot
- Lernumgebung in der Cloud
- Inhalte werden auf Wunsch an die Anforderungen Ihres Teams angepasst.
Individualschulung
- 2 Tage - anpassbar
- Termin nach Wunsch
- In Ihrem Hause oder bei der GFU
- Preis nach Angebot
- Lernumgebung in der Cloud
- 1 Teilnehmender = Fokus aufs Fachliche und maximaler Raum für individuelle Fragen.
Beschreibung
Dieses Seminar dreht die Reihenfolge und bleibt dann dabei. Am ersten Tag entsteht der Maßstab vor der Technik: Abnahmekriterium, ein Testsatz aus dreißig echten Fällen mit erwarteten Ausgaben, die erste Fassung gegen das Provider-SDK mit erzwungener strukturierter Ausgabe, und die Ausgangsmessung mit Kosten und Latenz. Am zweiten Tag wird verbessert, aber nur eine Sache je Durchgang und jede mit erneuter Messung: am Prompt, dann mit Retrieval samt getrennt gemessener Trefferquote, dann mit Fine-Tuning als dem, was es wirklich ist, nämlich ein Mittel für Format, Stil, Latenz und Kosten und nicht für Wissen. Am Ende steht eine begründete Entscheidung und ein Test, der sie haltbar macht.
Finden Sie das richtige LLM-Anwendungen Training aus unserem Portfolio.
Schulungsziel
Wer das Seminar besucht hat, kann für eine LLM-Funktion ein Abnahmekriterium formulieren und einen versionierten Testsatz anlegen, die Funktion gegen ein Provider-SDK mit erzwungener strukturierter Ausgabe bauen, eine Ausgangsmessung samt Kosten und Latenz festhalten, Prompt-, Retrieval- und Fine-Tuning-Varianten einzeln messen, die Trefferquote der Suche getrennt bewerten, die Entscheidung zwischen den drei Wegen mit Zahlen begründen und einen Regressionstest einrichten, der bei Verschlechterung scheitert.
Details
Inhalt
- Ziele und Erwartungen der Teilnehmenden
- Klärung individueller Lernziele und Erwartungen für ein praxisnahes und relevantes Seminar
- Tag 1: Maßstab und erste Fassung
- 1. Der Fall und der Maßstab
- Den eigenen Anwendungsfall auf eine Funktion mit einer Ausgabe zuschneiden
- Was „gut genug“ heißt: das Abnahmekriterium vor der ersten Zeile Code
- Welche Fehler teuer sind und welche hinnehmbar
- 2. Den Testsatz bauen
- Dreißig bis fünfzig Fälle aus echten Daten, mit erwarteter Ausgabe
- Die schweren Fälle bewusst aufnehmen, nicht die schönen
- Einen Teil zurückhalten, um Überanpassung zu erkennen
- Den Testsatz versionieren, damit Messungen vergleichbar bleiben
- Welche eigenen Daten überhaupt an einen Anbieter gehen dürfen und welche vorher zu ersetzen sind
- 3. Die erste Fassung gegen das Provider-SDK
- Direkt gegen das SDK von OpenAI, Anthropic oder Google, ohne Zwischenschicht
- Systemanweisung, Temperatur und die Parameter, die wirklich wirken
- Kosten und Latenz je Aufruf von Anfang an mitschreiben
- Wann eine Bibliothek wie PydanticAI oder LangChain sich lohnt und wann sie im Weg steht
- 4. Strukturierte Ausgaben erzwingen
- JSON Schema und Pydantic-Modelle als Vertrag
- Werkzeugaufrufe als die verlässlichere Form strukturierter Ausgabe
- Validieren und bei Verstoß wiederholen
- Weshalb Freitextausgaben jede Messung erschweren
- 5. Die Ausgangsmessung
- Exakter Vergleich, regelbasierte Prüfungen, Kennzahlen je Feld
- Ein Modell als Prüfer, und die Vorbehalte dagegen
- Streuung messen: dieselbe Eingabe mehrfach laufen lassen
- Die eine Zahl, gegen die alles Weitere verglichen wird
- Praxis-Übung (Tag 1): Für den eigenen Fall das Abnahmekriterium formulieren, einen versionierten Testsatz mit dreißig Fällen anlegen, die erste Fassung mit erzwungener strukturierter Ausgabe bauen und die Ausgangsmessung samt Kosten und Latenz je Aufruf festhalten.
- Tag 2: Verbessern, entscheiden, festhalten
- 6. Am Prompt arbeiten, kontrolliert
- Eine Änderung je Durchgang, dann erneut messen
- Prompts versionieren und jeder Messung zuordnen
- Beispiele im Prompt: wie viele helfen und ab wann sie schaden
- 7. Kontext hinzufügen: Retrieval
- Zerlegung der Dokumente, und warum die Schnittgröße die Qualität bestimmt
- Das Einbettungsmodell wählen und die Wahl belegen
- Stichwort- und Vektorsuche kombinieren, danach neu sortieren
- Die Trefferquote der Suche getrennt von der Antwortqualität messen
- Was in den Kontext gehört und was ihn nur verteuert
- 8. Wenn Retrieval nicht hilft
- Fehlerbilder, die Retrieval nicht beheben kann
- Woran man erkennt, dass das Problem in der Aufgabenstellung liegt
- Die Aufgabe zerlegen, statt den Kontext zu vergrößern
- 9. Fine-Tuning als Werkzeug, nicht als Säule
- Was es löst: Format, Stil, Latenz, Kosten
- Was es nicht löst: Wissen, Aktualität, Nachvollziehbarkeit
- LoRA und PEFT, Datenformat, Umfang, Kosten, Wiederholbarkeit
- Wann ein kleines angepasstes Modell günstiger ist als ein großes mit langem Prompt
- 10. Die Entscheidung treffen
- Die drei Wege auf demselben Testsatz gegeneinanderstellen
- Qualität, Kosten je Aufruf und Latenz in einer Tabelle
- Die Entscheidung schriftlich begründen, mit den offenen Punkten
- Was man dem eigenen Haus vorlegt und was man noch nicht behaupten kann
- 11. Die Messung haltbar machen
- Den Regressionstest in die Pipeline einbauen und bei Verschlechterung scheitern lassen
- Den Testsatz pflegen: welche neuen Fälle aufgenommen werden und welche nicht
- Was zu tun ist, wenn der Anbieter das Modell wechselt oder abkündigt
- Wann eine erneute Messung fällig ist, auch ohne eigene Änderung
- Praxis-Übung (Tag 2): Retrieval ergänzen, die Trefferquote der Suche getrennt von der Antwortqualität messen, die Retrieval-Variante gegen die Prompt-Variante stellen, die Entscheidung mit Qualität, Kosten und Latenz schriftlich begründen und den Regressionstest einrichten, der bei Verschlechterung scheitert.
Zielgruppe & Vorkenntnisse
- Python-Entwicklerinnen und -Entwickler, die eine LLM-Funktion in ein Produkt einbauen sollen
- Data Scientists, die zwischen Retrieval, Prompt und Fine-Tuning entscheiden müssen
- Architekten, die Qualität, Kosten und Latenz einer KI-Funktion vorab belegen müssen
- Verantwortliche, die ein hängendes LLM-Vorhaben wieder messbar machen wollen
Ihre Schulung
In Präsenz | Online |
|---|---|
| Lernmethode | |
Ausgewogene Mischung aus Theorie und praktischen Übungen auf persönlichem Schulungs-PC. | Wie auch bei unseren Präsenz-Seminaren: Ausgewogene Mischung aus Theorie und praktischen Übungen. Trainer durchgehend präsent. |
| Unterlagen | |
Seminarunterlagen oder Fachbuch inklusive. Das Fachbuch wählt der Trainer passend zum Seminar aus - Ihren individuellen Buch-Wunsch berücksichtigen wir auf Nachfrage gerne. | Seminarunterlagen oder Fachbuch inklusive (via DHL). Das Fachbuch wählt der Trainer passend zum Seminar aus - Ihren individuellen Buch-Wunsch berücksichtigen wir auf Nachfrage gerne. |
| Arbeitsmaterialien | |
DIN A4 Block, Notizblock, Kugelschreiber, USB-Stick, Textmarker, Post-its | |
| Teilnahmezertifikat | |
Nach Abschluss des Seminars erhalten Sie das Teilnahmezertifikat inkl. Inhaltsverzeichnis per E-Mail als PDF. | |
Organisation
In Präsenz | Online | |
|---|---|---|
| Teilnehmendenzahl | ||
min. 1, max. 8 Personen | ||
| Garantierte Durchführung | ||
Ab 1 Teilnehmenden* | ||
| Schulungszeiten | ||
| ||
| Ort der Schulung | ||
 GFU SchulungszentrumAm Grauen Stein 27 51105 Köln-Deutz oder online im Virtual Classroom oder europaweit bei Ihnen als Inhouse-Schulung Um ein optimales Raumklima zu gewährleisten, haben wir das Schulungszentrum mit 17 hochmodernen Trotec TAC V+ Luftreinigern ausgestattet. Diese innovative Filtertechnologie (H14 zertifiziert nach DIN EN1822) sorgt dafür, dass die Raumluft mehrfach pro Stunde umgewälzt wird und Schadstoffe zu 99.995% im HEPA-Filter abgeschieden und infektiöse Aerosole abgetötet werden. Zusätzlich sind alle Räume mit CO2-Ampeln ausgestattet, um jederzeit eine hervorragende Luftqualität sicherzustellen. | ||
| Räumlichkeiten | ||
Helle und modern ausgestattete Räume mit perfekter Infrastruktur | Bequem aus dem Homeoffice von überall | |
| Preisvorteil | ||
Dritter Mitarbeitende nimmt kostenfrei teil. Eventuell anfallende Prüfungskosten für den dritten Teilnehmenden werden zusätzlich berechnet - auch bei Seminaren inkl. Prüfungsgebühr. Hinweis: Um den Erfolg der Schulung zu gewährleisten, sollte auch der dritte Teilnehmende die erwarteten Vorkenntnisse mitbringen. | ||
| All-Inclusive | ||
Gebäck, Snacks und Getränke ganztägig, Mittagessen im eigenen Restaurant, täglich 6 Menüs, auch vegetarisch | Eine Auswahl unserer Frühstücks-Snacks und Nervennahrungs-Highlights senden wir Ihnen mit den Seminarunterlagen via DHL zu. | |
| Barrierefreiheit | ||
Das GFU-Schulungszentrum (Am Grauen Stein 27) ist barrierefrei | - | |
Buchen ohne Risiko
| Rechnungsstellung |
Erst nach dem erfolgreichen Seminar. Keine Vorkasse. |
| Stornierung |
Kostenfrei bis zum Vortag des Seminars |
| Vormerken statt buchen |
Sichern Sie sich unverbindlich Ihren Seminarplatz schon vor der Buchung - auch wenn Sie selbst nicht berechtigt sind zu buchen |
Kostenfreie Services
In Präsenz | Online |
|---|---|
|
|
Buchungsmöglichkeiten
Online oder in Präsenz teilnehmen
Sie können sowohl Online als auch in Präsenz am Seminar teilnehmen. Klicken Sie bei Ihrer Buchung oder Anfrage einfach die entsprechende Option an.
Gesicherte offene Termine
| Termin | Ort | Preis | ||
|---|---|---|---|---|
| 2027 | ||||
| 17.02.-18.02.2027 Plätze vorhanden Köln / Online 1.440,00 | Köln / Online | 1.440,00 | Buchen Vormerken | |
| 19.04.-20.04.2027 Plätze vorhanden Köln / Online 1.440,00 | Köln / Online | 1.440,00 | Buchen Vormerken | |
| 21.06.-22.06.2027 Plätze vorhanden Köln / Online 1.440,00 | Köln / Online | 1.440,00 | Buchen Vormerken | |
| 23.08.-24.08.2027 Plätze vorhanden Köln / Online 1.440,00 | Köln / Online | 1.440,00 | Buchen Vormerken | |
| 25.10.-26.10.2027 Plätze vorhanden Köln / Online 1.440,00 | Köln / Online | 1.440,00 | Buchen Vormerken | |
- Lernumgebung in der Cloud
- Inhalte werden auf Wunsch an die Anforderungen Ihres Teams angepasst.
- Lernumgebung in der Cloud
- 1 Teilnehmender = Fokus aufs Fachliche und maximaler Raum für individuelle Fragen.
- Alle folgenden Schulungsformen können auch Online als Virtual Classroom durchgeführt werden.
- Eine Offene Schulung findet zu einem festgelegten Zeitpunkt im voll ausgestatteten Schulungszentrum oder Online/Remote statt. Sie treffen auf Teilnehmende anderer Unternehmen und profitieren vom direkten Wissensaustausch.
- Eine Inhouse-/Firmen-Schulung geht auf die individuellen Bedürfnisse Ihres Unternehmens ein. Sie erhalten eine kostenfreie Beratung von Ihrem Seminarleiter und können Inhalte und Dauer auf Ihren Schulungsbedarf anpassen. Inhouse-Schulungen können Europaweit durchgeführt werden.
- Bei einer Individual-Schulung erhalten Sie eine 1-zu-1 Betreuung und bestimmen Inhalt, Zeit und Lerntempo. Der Dozent passt sich Ihren Wünschen und Bedürfnissen an.
Sie können unsere Schulungen auch als Remote Schulung im Virtual Classroom anfragen.
In drei Schritten zum Online Seminar im Virtual Classroom:
- Seminar auswählen und auf "Buchen" klicken
- Wählen Sie bei "Wie möchten Sie teilnehmen?" einfach "Online" aus.
- Formular ausfüllen und über den Button "Jetzt buchen" absenden.
Unser Kundenservice meldet sich bei Ihnen mit der Buchungsbestätigung.
Unsere Online Schulungen finden im Virtual Classroom statt. Ein Virtual Classroom bündelt mehrere Werkzeuge, wie Audio-Konferenz, Text-Chat, Interaktives Whiteboard, oder Application Sharing.
Vorteile von Virtual Classroom:
- Sie erhalten 1 zu 1 die gleiche Lernumgebung, die Sie auch vor Ort bei uns vorfinden
- Die technische Vorbereitung wird von den GFU-Technikern vorgenommen
- Sie erhalten remote Zugriff auf Ihren persönlichen Schulungs-PC im GFU-Seminarraum
- Die Virtual Classroom Lösung lässt sich auch im Browser betreiben
- Die GFU-Technik leistet wie gewohnt Soforthilfe bei Problemen
- Die Schulungsunterlagen bekommen Sie via DHL zugeschickt
- Sie sparen Reisekosten und Zeit
- 17. Feb. - 18. Feb. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
- 19. Apr. - 20. Apr. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
- 21. Jun. - 22. Jun. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
- 23. Aug. - 24. Aug. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
- 25. Okt. - 26. Okt. ✓ Noch einige Plätze frei ▶ Köln + Online/Remote
- Auch als Inhouse-Schulung, bundesweit mit Termin nach Wunsch und individuellen Inhalten
- Buchen ohne Risiko! Kostenfreie Stornierung bis zum Vortag des Seminars
Die Seminare der GFU finden in angenehmer Atmosphäre statt und sind perfekt organisiert. Profitieren Sie von dem Rundum-Service der GFU!
Machen Sie sich keinen Kopf um die Anreise! Unser Shuttle fährt Sie. Oder Sie parken einfach auf einem extra für Sie reservierten Parkplatz.
Hotelzimmer gesucht? Wir organisieren Ihnen eins. Ihr Vorteil: Sie sparen Zeit und Geld!
Stornierung bei offenen Seminaren kostenfrei bis einen Tag vor Schulungsbeginn.
Unsere Techniker sind immer zur Stelle, egal ob online oder vor Ort.