Datenqualität und KI-Trainingsdaten
Praktische Checklisten für Teams, die Daten für KI-Training vorbereiten. Sie beschreiben allgemeine Praxis; wo unser eigener Dienst erwähnt wird, befindet er sich in Entwicklung.
- Alle Dateitypen
KI-Datensatz bereinigen: Bilder, Video und Text prüfen
Checkliste zur Bereinigung von KI-Trainingsdaten für Bilder, Video und Text: defekte Dateien, Duplikate, Unschärfe, eingefrorene Videos, personenbezogene Daten und eine Dokumentation Ihrer Entscheidungen.
- Bilder
Bilddatensatz bereinigen: Checkliste vor dem KI-Training
Checkliste zur Bereinigung von Bilddatensätzen vor dem KI-Training: defekte Dateien, Duplikate, Unschärfe, Belichtung, personenbezogene Daten und Dokumentation.
- Text
Personenbezogene Daten in Trainingsdaten (Text) finden
So finden Sie E-Mail-Adressen, Telefon-, Ausweis-, Karten- und Kontonummern sowie offengelegte Schlüssel in Textdatensätzen vor dem KI-Training.
- Regulierung
EU AI Act Artikel 10: Was er für Ihre Trainingsdaten bedeutet
Was Artikel 10 des EU AI Act über Trainings-, Validierungs- und Testdaten für Hochrisiko-KI-Systeme sagt, mit einer praktischen Checkliste für Daten-Governance und Dokumentation.
- Video
Videodatensätze prüfen: eingefrorene und dunkle Aufnahmen
Videodaten vor dem KI-Training prüfen: eingefrorene Bilder, dunkle und überbelichtete Abschnitte, Unschärfe, fehlende Frames, defekte Dateien, mit Timecodes.
- Arbeitsablauf
Daten vorbereiten, um eine eigene KI zu trainieren
Schritt für Schritt: Bilder, Video und Text vorbereiten, um ein eigenes KI-Modell zu trainieren oder feinabzustimmen, von der Aufgabendefinition über Sammlung und Bereinigung bis zur Aufteilung und Dokumentation.
- Text
Firmendaten für das Fine-Tuning eines LLM vorbereiten
Support-E-Mails, Chats und Dokumente zu sauberen Fine-Tuning-Daten für ein LLM machen: Format, Duplikate, personenbezogene Daten, Geheimnisse, Evaluierung.
- Arbeitsablauf
Annotation und Label-Qualität im Datensatz prüfen
Label-Probleme in Bild-, Video- und Textdatensätzen finden und beheben: Richtlinien, Übereinstimmung, fehlende und falsche Labels, Klassenbalance und Leakage.
- Alle Dateitypen
Duplikate und Beinahe-Kopien im Datensatz finden
Warum Duplikate KI-Trainingsdaten schaden und wie Sie exakte Duplikate und Beinahe-Kopien in Bild-, Video- und Textdaten finden, auch über Aufteilungen hinweg.
- Regulierung
DSGVO und KI-Trainingsdaten: Was Sie vor dem Training prüfen sollten
Praktischer Überblick über DSGVO-Fragen bei KI-Trainingsdaten: wann Daten personenbezogen sind, Rechtsgrundlage, Zweck, Datenminimierung, Anonymisierung gegenüber Pseudonymisierung und Dokumentation.
- Arbeitsablauf
Datensatz dokumentieren: ein praktisches Datenblatt
Was Sie über einen KI-Datensatz festhalten sollten: Zweck, Quellen, Bereinigung, Annotation, Aufteilung, personenbezogene Daten, Lücken. Mit kurzer Vorlage.
- Video
Unterwasservideos in der Aquakultur: Qualität prüfen
Unterwasservideos aus Fischfarmen vor dem KI-Training prüfen: eingefrorene und dunkle Aufnahmen, Linsenbewuchs, Trübung, Unschärfe, Fischzählung, mit Timecodes.
- Bilder
Produktbilder im E-Commerce vor dem KI-Training prüfen
Produkt- und Retourenfotos vor dem KI-Training für Suche, Katalog oder Schadenserkennung prüfen: Duplikate, Unschärfe, Belichtung, Hintergründe, Personen, Text.
- Regulierung
EU AI Act Artikel 10: Checkliste für Trainingsdaten
Checkliste zu Artikel 10 des EU AI Act: Daten-Governance für Trainings-, Validierungs- und Testdaten von Hochrisiko-KI-Systemen, nach dem geänderten Text.
- Regulierung
Was der EU AI Act von jedem Unternehmen mit KI verlangt
Nicht nur Hochrisiko-KI: die breit geltenden Pflichten des EU AI Act wie KI-Kompetenz und Transparenz, und die Rollen Anbieter und Betreiber einfach erklärt.
- Regulierung
GPAI-Trainingsdaten: was die Vorlage des KI-Büros verlangt
Artikel 53 des EU AI Act: wer eine Zusammenfassung der Trainingsinhalte veröffentlichen muss, was die Vorlage des KI-Büros verlangt, Aktualisierung und Fristen.
- Regulierung
Urheberrecht und KI-Trainingsdaten in der EU
Was AI Act und EU-Urheberrecht von Anbietern von KI-Modellen verlangen: Urheberrechtsstrategie, Nutzungsvorbehalte gegen Text und Data Mining, robots.txt.
- Regulierung
Fine-Tuning: Wann werden Sie Anbieter nach dem EU AI Act?
Wann Fine-Tuning eines KI-Modells mit allgemeinem Verwendungszweck Sie zum Anbieter macht, was Sie dokumentieren müssen und was für Hochrisiko gilt.
- Regulierung
Ist mein KI-System ein Hochrisiko-System nach dem EU AI Act?
Wann ein KI-System nach dem EU AI Act als hochriskant gilt: Produkte nach Anhang I, die acht Bereiche in Anhang III, die Ausnahme in Artikel 6 Absatz 3, Termine.
- Regulierung
EU AI Act Anhang IV: der Abschnitt zu Trainingsdaten
Was Anbieter von Hochrisiko-KI-Systemen nach Anhang IV des EU AI Act zu Trainingsdaten dokumentieren: Datenblätter, Herkunft, Auswahl, Kennzeichnung, Bereinigung.
- Regulierung
Der EU AI Act in Norwegen: Stand im EWR
Gilt der EU AI Act in Norwegen? Stand der Übernahme in den EWR, das geplante norwegische KI-Gesetz, die Aufsichtsbehörde und Urheberrecht für Trainingsdaten.