TRACKING / VOS / AKTION / POSE

Videoannotation, verfolgt über jedes Frame.

Multi-Object-Tracking, Video-Objektsegmentierung, Aktionslokalisierung, Pose, Re-ID. SAM 2-assistiert, Kappa-gesteuert, HOTA-berichtet pro Lieferung.

HOTA- und IDF1-Berichte Datenresidenz im EWR

Ein sauberes Frame kann einen gebrochenen Track verbergen.

Eine Bounding Box kann zu einem Zeitpunkt korrekt sein, während die Sequenz um sie herum scheitert.

Dasselbe Objekt kann hinter einem Verdecker verschwinden, das Sichtfeld verlassen, bei anderer Beleuchtung zurückkehren oder in eine andere Kamera wechseln. Eine brauchbare Annotation muss Identität, Begrenzung und Ereigniszustand durchgehend korrekt erhalten.

Prüfen Sie die Sequenz als Track, nicht als Stapel von Bildern.

Straßenüberquerung in der Videoannotation: vier Fußgänger tragen getrackte Bounding Boxes, einer von ihnen geht hinter einem anderen.
Referenz-Frame f 0208 · alle Tracks gültig Protokoll f 0232 · Identitätsbruch
Illustrative Annotationsauswertung. Der Auftrag definiert die tatsächlichen Klassen, Schwellenwerte, Konfidenzfelder und das Ausgabeschema.

Was die Auswertung offenlegt

IdentitätskontinuitätBehält dasselbe Objekt über Sichtbarkeitswechsel hinweg dieselbe Track-ID?

Track-Protokoll

Fenster f 0182 - f 0271 · 90 Frames · eine Kamera
ID 01
ID 02
ID 03
teilweiseteilw.
verdeckt
Track endet
ID-Wechsel
ID 17
als neue Identität wieder eingetretenwieder da, neue ID
geschlichtet
ID 04
verdeckt ID 03verdeckt 03
Aktion
Überqueren

Der Fehler zeigt sich oft zwischen zwei für sich korrekten Frames.

Bei reguliertem Videomaterial ist das Annotationsprotokoll Teil der Lieferung.

Ontologie, De-Identifizierung, Prüferzugriff und Änderungshistorie sind keine administrativen Details, die nach der Annotation ergänzt werden. Sie entscheiden darüber, ob die resultierenden Daten im vorgesehenen Workflow verstanden, geprüft und verwendet werden können.

Ein beleuchteter Gang bei Nacht, eine Person in der Ferne, auf ganzer Länge begrenzt von einer dunklen Glaswand, deren vordere Kante von oben nach unten durch das Bild verläuft.

Die Annotationsspezifikation kann dokumentieren:

  • Klassendefinitionen
  • Quell- und Herkunftsfelder
  • Stichprobenentscheidungen
  • Annotations- und Prüfmethoden
  • bekannte Einschränkungen
  • Versions- und Änderungshistorie

Diese Unterlagen können die eigene Data Governance und technische Dokumentation des Kunden unterstützen.

Enthält das Material Gesichter, Kennzeichen, Patient:innen, Beschäftigte oder andere identifizierbare Personen, legt der Auftrag fest:

  • was erhalten bleiben muss
  • was entfernt oder umgewandelt werden muss
  • wer auf das Material zugreifen darf
  • welche Prüfer:innen eingeschränkten Zugriff benötigen
  • wie Ausnahmen protokolliert werden
  • was nachgelagert geliefert werden darf

Die Methode wird anhand des vorgesehenen Einsatzzwecks und des Restrisikos gewählt. Das Projekt geht nicht davon aus, dass eine generische De-Identifizierungsmethode für jede Art von Video ausreicht.

Verarbeitet YPAI personenbezogene Daten im Auftrag des Kunden, kann der Auftrag festlegen:

  • Rollen von Verantwortlichem und Auftragsverarbeiter
  • freigegebene Umgebungen
  • Berechtigungen der Prüfer:innen
  • Unterauftragsverarbeiter
  • Übermittlungen
  • Aufbewahrung
  • Löschung
  • Verantwortlichkeiten für Vorfälle und Audits

Standardmäßig Datenresidenz im EWR. Datenresidenz, Übermittlungen und Unterauftragsverarbeiter werden pro Projekt festgelegt.

Fünf Annotationsarten. Fünf verschiedene Definitionen von korrekt.


Die Annotationsart bestimmt, was gelabelt wird, wie zeitliche Konsistenz geprüft wird, welche Metriken aussagekräftig sind und was die endgültige Lieferung enthält.

Gleiches Material, andere Definition von korrekt

Multi-Object-Tracking

Die Annotation folgt dem Objekt durch Sichtbarkeitswechsel und behält seine persistente Identität bei.

YPAI grenzt das Annotationsobjekt ab, bevor die Werkzeuge gewählt werden.

5 Alternativen · 5 gemeinsame Felder
  • Was annotiert wird Objekte werden Frame für Frame lokalisiert und erhalten persistente Identitäten.

    Die Schwierigkeit Die Identität muss teilweise Sichtbarkeit, vollständige Verdeckung, Verlassen der Szene und Wiedereintritt überstehen.

    Typisches Ergebnis Bounding Boxes, Track-IDs, Sichtbarkeitszustände und Attribute auf Frame-Ebene.

    Relevante PrüfungTrack-Kontinuität, ID-Wechsel, Fragmentierung, HOTA und IDF1 wo zutreffend.

    Übliche Einsatzbereiche Fahrzeuge, Personen, Geräte, Tiere und andere bewegte Objekte.

  • Was annotiert wird Jedes Objekt erhält über die Sequenz eine Maske auf Pixelebene, verknüpft mit einer durchgehenden Identität.

    Die Schwierigkeit Die Maske muss geometrische Genauigkeit und Instanzkontinuität erhalten, während sich Form, Beleuchtung und Sichtbarkeit ändern.

    Typisches Ergebnis Masken pro Frame, Objekt-IDs, Sichtbarkeitszustände und Ausnahmeprotokolle.

    Relevante PrüfungMaskenüberlappung, Grenzqualität, übersehene Objekte und Identitätskontinuität.

    Übliche Einsatzbereiche Feine Objektgrenzen, chirurgische Szenen, Inhaltsbearbeitung und Vordergrundextraktion.

  • Was annotiert wird Aktionen oder Ereignisse erhalten eine Klasse sowie einen zeitlichen Start- und Endpunkt.

    Die Schwierigkeit Das erste sichtbare Anzeichen einer Aktion, ihr vollständiger Beginn und der Abschluss der Aufgabe sind unterschiedliche Grenzen.

    Typisches Ergebnis Zeitsegmente, Aktionsklassen, Akteurverknüpfungen und Regeln für überlappende Ereignisse.

    Relevante PrüfungGrenztoleranz, Klassengenauigkeit und mean average precision bei den vereinbarten Schwellenwerten für zeitliche Überlappung.

    Übliche Einsatzbereiche Operationsphasen, Sportaktionen, industrielle Tätigkeiten, Sicherheitsereignisse und Inhaltsverständnis.

  • Was annotiert wird Gelenk-Keypoints werden über Frames verknüpft und persistenten Personenidentitäten zugeordnet.

    Die Schwierigkeit Keypoints müssen bei Bewegung, Verdeckung, Anschnitt und Perspektivwechsel anatomisch kohärent bleiben.

    Typisches Ergebnis Keypoints, Skelette, Sichtbarkeitsflags und Personen-Track-IDs.

    Relevante PrüfungKeypoint-Genauigkeit, fehlende Gelenke, Identitätskontinuität und zeitliche Konsistenz.

    Übliche Einsatzbereiche Sport, Rehabilitation, Animation, Ergonomie und Analyse menschlicher Aktivitäten.

  • Was annotiert wird Dieselbe Person oder dasselbe Objekt wird über nicht überlappende Kameras oder getrennte Sequenzen verknüpft.

    Die Schwierigkeit Kleidung, Blickwinkel, Beleuchtung, Kameraqualität und verstrichene Zeit können sich ändern, während die Identität konsistent bleiben muss.

    Typisches Ergebnis Kameraübergreifende Identitätsverknüpfungen, Übergabeereignisse, Zeitstempel und Ausnahmeprotokolle.

    Relevante PrüfungIdentitätskonsistenz, falsche Verknüpfungen, fehlende Verknüpfungen und projektspezifische Retrieval- oder Tracking-Metriken.

    Übliche Einsatzbereiche Multikamera-Betrieb, Verweildaueranalyse im Handel, Sport und autorisierte Sicherheits-Workflows.

Ein Projekt kann Annotationsarten kombinieren, wenn das Modell mehr als eine Definition von korrekt im selben Material benötigt.

Anfrage senden

Die Ontologie ändert sich mit dem Material.

Automobil-, OP-, Überwachungs-, Sport- und Handelsvideos können alle Tracks, Masken oder Ereignislabels verwenden. Sie verwenden nicht dieselben Objektdefinitionen, Datenschutzgrenzen oder Prüflogiken.

Erkennen Sie zuerst das Material. Definieren Sie den Annotationsvertrag aus seiner betrieblichen Realität.

  • Automobil

    Annotiert Fahrer:innen, Insassen, Blickrichtung, Gesten, Fahrzeuge, Fußgänger, Radfahrende, Fahrstreifen und zeitliche Ereignisse.

    Betrieblicher Rahmen Aufnahmen im Fahrzeuginnenraum und nach außen gerichtete Aufnahmen erfordern unterschiedliche Regeln für Identität, Sichtbarkeit und Szene. Datenschutz- und Sicherheitsanforderungen werden anhand des tatsächlichen Projekts abgegrenzt.

    Referenzstrukturen Fahrerüberwachung, Insassenüberwachung, Multi-Object-Tracking, Aktions- und Gestentaxonomien.

  • Überwachung und Sicherheit

    Annotiert Personen, Objekte, Bewegung, kameraübergreifende Identität, Zonen und Ereignisse.

    Betrieblicher Rahmen Rechtsgrundlage, Zugriff, Aufbewahrung, Beschilderung und Verhältnismäßigkeit müssen für die vorgesehene Bereitstellung geklärt sein. Bei systematischer Überwachung kann eine DSFA erforderlich sein.

    Referenzstrukturen MOT, Re-Identifikation, Ereignisfenster, Eintritts- und Austrittszustände, Kameraübergaben.

  • OP-Video

    Annotiert Instrumente, Anatomie, Operationsphase, Aktionen und Interaktionen.

    Betrieblicher Rahmen Gesundheitsdaten, Patientenkennungen, Qualifikationen der Prüfer:innen und eingeschränkter Zugriff werden vor Beginn der Annotation festgelegt.

    Referenzstrukturen Phasen-, Instrumenten- und Anatomietaxonomien. Öffentliche Forschungsdatensätze können in das Schemadesign einfließen, vorbehaltlich ihrer Zugangs- und Lizenzbeschränkungen.

  • Sportanalyse

    Annotiert Spieler:innen, Ball, Pose, Aktionen, Formationen, Ballbesitz und räumliche Ereignisse.

    Betrieblicher Rahmen Rechte am Material, Athletendaten, Ligavereinbarungen und die vorgesehene kommerzielle Nutzung müssen für den Auftrag geklärt sein.

    Referenzstrukturen Tracking-, Pose- und Aktionstaxonomien, wie sie in Benchmarks der Sportforschung verwendet werden.

  • Handel und Content

    Annotiert Personen, Warteschlangen, Verweilzonen, Bewegung, Interaktionen, Einstellungen und Inhaltsereignisse.

    Betrieblicher Rahmen Das Projekt kann eine Interessenabwägung, eine festgelegte Aufbewahrung und einen dokumentierten Moderations- oder Diebstahlpräventionszweck erfordern.

    Referenzstrukturen Verweilereignisse, Warteschlangenzustände, Zonenein- und -austritt, Schnittgrenzen und Inhaltslabels.

Die Produktion beginnt an einem Gate.


Schema, Richtlinie und Kalibrierung dienen derselben Entscheidung:

Ist der Annotationsvertrag stabil genug, um zu skalieren?

  1. Schema und Richtlinie für sensible Inhalte

    Festlegen:

    • Klassentaxonomie
    • Regeln für Identitätskontinuität
    • Umgang mit sensiblen Inhalten
    • erforderliche Attribute
    • Ausgabestruktur
    • unzulässige oder ausgeschlossene Labels

    Ergebnis Versioniertes Schema und Richtlinie für sensible Inhalte.

  2. Annotationsrichtlinie

    Klären:

    • Verdeckung
    • teilweise Sichtbarkeit
    • Anschnitt
    • Verlassen der Szene und Wiedereintritt
    • überlappende Objekte
    • Aktionsgrenzen
    • Mehrdeutigkeit
    • Eskalationsregeln

    Ergebnis Versionierte Annotationsrichtlinie.

  3. Kalibrierungsrunde

    Eine gemeinsame Teilmenge wird vor der Produktion annotiert und geprüft.

    Die Runde dient dazu, Folgendes offenzulegen:

    • unklare Anweisungen
    • fehlende Grenzfälle
    • inkonsistenter Umgang mit Objektidentitäten
    • schwache Klassengrenzen
    • unpassende Metriken
    • Uneinigkeit unter Prüfer:innen

    Uneinigkeit fließt in Schema und Richtlinie zurück.

    Ergebnis Kalibrierungsprotokoll und Überarbeitungsentscheidungen.

  4. Das Gate

    Ein dunkler Prüfbereich: Prüfer:innen an Arbeitsplätzen mit Videomaterial und Wellenform auf ihren Monitoren, ein Kalibrierziel und Filmkoffer entlang des Tisches und eine beleuchtete Linie über seine gesamte Länge.

    Soweit die Metriken auf die Aufgabe zutreffen, lautet das Referenz-Produktionsgate:

    • Kappa Projektspezifisch
    • IDF1 0,75+
    • HOTA 0,65+

    Die Leistungsbeschreibung (SOW) bestätigt, welche Metriken gelten, und kann strengere oder aufgabenspezifische Schwellenwerte festlegen.

    Runde eins

    Eine oder mehrere zutreffende Anforderungen liegen noch unter dem Gate.

    Ergebnis Zurück zur Kalibrierung

    Der Annotationsvertrag geht zurück an Schema, Richtlinie oder Kalibrierung.

    Runde zwei

    Alle zutreffenden Anforderungen erreichen das vereinbarte Gate.

    Ergebnis Produktion startet

    Erst dann startet die Produktion.

  5. Produktion

    Die Produktion kann Keyframe-Annotation, assistiertes Tracking, Interpolation und menschliche Prüfung kombinieren, wo die Methode zum Material und zum Abnahmeplan passt.

    Assistiertes Tracking übernimmt die Frames zwischen den Keyframes. Über die Korrektheit wird am vereinbarten Prüfgate entschieden.

    Ergebnis Annotiertes Video, Tracks, Masken, Ereignisse oder Keypoints im vereinbarten Format.

  6. QA, Schlichtung und Lieferung

    Die Produktions-QA kann umfassen:

    • Stichprobenprüfung
    • Prüfungen der Track-Kontinuität
    • Prüfung von ID-Wechseln
    • Grenzprüfung
    • klassenspezifische Prüfungen
    • Schlichtung strittiger Elemente
    • Ausnahmebehandlung
    • versionierte Exporte

    Ergebnis Abgenommene Lieferung, Qualitätsprotokoll und Erklärung zu bekannten Einschränkungen.

Ein Gate. Eine protokollierte Entscheidung. Ein sichtbarer Weg zurück, wenn der Vertrag nicht bereit ist.

Anfrage senden

Die Annotation ist die Sequenz, nicht der Screenshot.

Ein Produktions-Track protokolliert, was zwischen den ausgewählten Frames geschehen ist.

PROTOKOLL DER TRACK-KONTINUITÄT

track-continuity.json

EREIGNISSE FÜR DIE PRÜFUNG PROTOKOLLIERT

  • Eintritt

    Das Objekt wird beobachtbar und erhält seine erste projektdefinierte Identität.

  • Teilweise Verdeckung

    Die Sichtbarkeit ändert sich, doch die Regeln für Identität und Begrenzung bleiben aktiv.

  • Vollständige Verdeckung

    Das Objekt ist vorübergehend nicht beobachtbar. Das Protokoll unterscheidet Verdeckung von bestätigtem Austritt.

  • Wiedereintritt

    Das Objekt kehrt zurück. Die Prüfer:in bestätigt, ob die frühere Identität weiterhin gilt.

  • ID-Wechsel

    Das System oder die Annotator:in verknüpft das Objekt falsch. Der genaue Übergang wird zur Korrektur oder Schlichtung markiert.

  • Aktionsgrenze

    Die Sequenz protokolliert, wo das definierte Ereignis beginnt, andauert und endet.

  • Menschliche Prüfung

    Übergänge mit geringer Konfidenz oder mehrdeutige Übergänge gehen nach den Eskalationsregeln des Projekts an eine Prüfer:in.

Das Diagramm ist schematisch. Die Produktionsarbeit erfolgt am Material und an der freigegebenen Ontologie des Kunden.

Wo unterstützende Werkzeuge Masken oder Tracks vorschlagen, konzentriert sich die menschliche Prüfung auf die Fälle, die über die Abnahme entscheiden: Verdeckung, Identitätskontinuität, Grenzdrift, Szenenübergabe und mehrdeutige Ereignisse.

Was die Sequenz liefern kann

  • persistente Track-IDs
  • Boxes oder Masken auf Frame-Ebene
  • Sichtbarkeits- und Verdeckungszustände
  • Ereignisintervalle
  • Protokolle der Kameraübergaben
  • Prüf- und Schlichtungsereignisse
  • versionierte Korrekturen

Ein Benchmark-Schema kann ins Projekt einfließen. Die Rechte an seinem Material nicht.

Öffentliche Benchmarks können helfen, Taxonomie, Ausgabeformat und Evaluierung zu definieren.

Forschungszugang, Annotationslizenzen und vertraute Dateiformate gewähren nicht automatisch das Recht, das zugrunde liegende Material für kommerzielles Modelltraining oder die Bereitstellung zu nutzen.

YPAI behandelt Benchmark-Struktur und Rechte an den Quelldaten als getrennte Fragen.

  • MOTChallenge

    Multi-Object-Tracking Bounding Boxes auf Frame-Ebene und persistente Track-IDs

    Abstimmung von Tracking-Format und Evaluierung

    Forschungs- und nichtkommerzielle Bedingungen müssen gegen die vorgesehene Nutzung geprüft werden.

  • DAVIS

    Video-Objektsegmentierung Instanzmasken pro Frame

    Evaluierung von Masken und zeitlicher Konsistenz

    Öffentlicher Forschungszugang begründet keine kommerziellen Trainingsrechte.

  • YouTube-VOS

    Großskalige Video-Objektsegmentierung Instanzmasken über Sequenzen hinweg

    Referenz für Taxonomie und VOS-Evaluierung

    Rechte am zugrunde liegenden Video und Annotationsrechte müssen getrennt geprüft werden.

  • Kinetics-700

    Aktionserkennung Aktionsklassen auf Clip-Ebene

    Referenz für Aktionstaxonomie

    Eine Annotationslizenz verleiht nicht zwingend Rechte am Quellvideo.

  • AVA

    Aktionslokalisierung Boxes pro Frame mit Labels für atomare Aktionen

    Raumzeitliche Aktionsevaluierung

    Quellmaterial, Annotationen und nachgelagerte Nutzung müssen jeweils geprüft werden.

  • Cholec80

    Chirurgischer Workflow Operationsphasen und Instrumentenlabels

    Referenz für Taxonomien klinischer Videos

    Beschränkungen für Forschung, klinischen Zugang und Patientendaten bleiben außerhalb einer generischen Annotationslizenz.

Ein vertrautes Schema ist kein Nachweis, dass das Material dahinter genutzt werden darf.

Jede Quelle, Lizenz und zulässige Nutzung wird für den Auftrag geprüft.

Das Nachweispaket wird vor der Produktion definiert.

Die Lieferung ist mehr als gelabelte Frames.

Die Leistungsbeschreibung (SOW) benennt die Unterlagen, die der Kunde erhält, wie sie sich auf die Daten beziehen und welche technischen oder Governance-Fragen sie beantworten.

  • Annotationsvertrag

    • Klassenschema
    • Annotationsrichtlinie
    • Richtlinie für Objektidentität und Tracking
    • Regeln für zeitliche Grenzen
    • Richtlinie für Verdeckung und teilweise Sichtbarkeit
    • Versions- und Änderungshistorie
    Repräsentatives Ergebnis

    guideline.v3.pdf

  • Kalibrierungs- und Qualitätsprotokoll

    • Kalibrierungsstichprobe
    • zutreffende Metriken
    • Schwellenwertentscheidungen
    • Analyse der Uneinigkeit
    • Überarbeitungsmaßnahmen
    • Urteil am Produktionsgate

    hota-idf1.csv

  • Protokoll der Track-Kontinuität

    • Track-Längen
    • ID-Wechsel
    • Fragmentierung
    • Ausnahmen bei Verdeckung und Wiedereintritt
    • Ergebnisse kameraübergreifender Übergaben, soweit zutreffend

    track-continuity.json

  • Protokoll zu sensiblen Inhalten und De-Identifizierung

    • projektspezifische Richtlinie
    • ausgeschlossene oder umgewandelte Felder
    • Zugriffsbeschränkungen
    • Ausnahmen
    • Entscheidungen der Prüfer:innen
    • verbleibende Einschränkungen
  • Verarbeitungs- und Lieferprotokoll

    Enthält, soweit zutreffend
    • Rollen und Weisungen
    • freigegebene Umgebung
    • Unterauftragsverarbeiter und Übermittlungsentscheidungen
    • Liefermanifest
    • Versionshistorie des Datensatzes
    • Aufbewahrungs- und Löschbedingungen
    • bekannte Einschränkungen

    article-30-records.pdf

Das genaue Nachweispaket wird in der Leistungsbeschreibung und den geltenden Bedingungen zur Datenverarbeitung definiert.

Diese Unterlagen unterstützen die eigene technische, beschaffungsbezogene und regulatorische Prüfung des Kunden.

Bringen Sie das Material, das Modellziel und das Abnahmeproblem mit.

Eine kurze Beschreibung genügt für den Start.

YPAI ermittelt die passende Annotationsart, die offenen Ontologieentscheidungen, die Grenze für Daten und Rechte und den ersten Kalibrierungsschritt.

Sie bringen mit10
  • das Modell- oder Produktziel
  • Beispielmaterial, sofern verfügbar
  • die Videodomäne
  • die relevanten Objekte, Aktionen oder Identitäten
  • das erwartete Volumen und die Volumeneinheit
  • das erforderliche Ausgabeformat
  • Aspekte sensibler Inhalte
  • bestehende Ontologie- oder Benchmark-Referenzen
  • Abnahmekriterien
  • Zielzeitplan
YPAI liefert zurück11
  • Machbarkeitseinschätzung
  • empfohlene Annotationsart oder Kombination
  • offene Ontologie- und Richtlinienentscheidungen
  • vorgeschlagene Kalibrierungsmethode
  • zutreffende Qualitätsmetriken
  • Prüfungs- und Schlichtungsmodell
  • Anforderungen an Datenverarbeitung und Rechte
  • Lieferstruktur
  • Vorschlag für das Nachweispaket
  • Zeitplan und Preisgrundlage
  • vorgeschlagenes erstes Gate

Wir antworten innerhalb eines EU-Geschäftstags mit den Fragen, die vor einem Pilotprojekt oder einem Produktionsumfang geklärt werden müssen.

Antworten, die ins erste Gespräch gehören.

Wie gehen Sie mit Gesichtern, Kennzeichen und Patientenkennungen um?

Der Umgang wird vor Beginn der Annotation vereinbart, anhand des vorgesehenen Einsatzzwecks und des Restrisikos.

Je nach dieser Bewertung kann das Projekt Ausschluss, Maskierung, Unkenntlichmachung, Ersetzung, eingeschränkten Zugriff, Entfernung von Metadaten oder eine reduzierte Darstellung wie eine reine Skelettausgabe verwenden.

Was gewählt wurde, welche Ausnahmen gewährt wurden und welche Einschränkungen bleiben, wird für den Auftrag dokumentiert.

Kann YPAI kameraübergreifende Re-Identifikation übernehmen?

Ja, wenn der Auftrag Folgendes festlegt:

  • Kameratopologie
  • Eintritts- und Austrittszustände
  • Übergaberegeln
  • Identitätsattribute
  • Annahmen zu Zeitlücken
  • zulässige Mehrdeutigkeit
  • Eskalation an Prüfer:innen
  • Evaluierungskriterien

Die Lieferung kann kameraübergreifende Identitätsverknüpfungen, Übergabeereignisse, die Prüfung falscher Verknüpfungen und projektspezifische Kontinuitätsberichte umfassen.

Verwenden Sie SAM 2 oder andere Werkzeuge für assistierte Annotation?

Unterstützende Segmentierung und unterstützendes Tracking können eingesetzt werden, wo sie zum Material, zur Ontologie und zum Abnahmeplan passen.

Das Werkzeug definiert nicht, was korrekt ist.

Menschliche Prüfer:innen bleiben für die vereinbarten Prüfungen verantwortlich, insbesondere bei Verdeckung, Identitätskontinuität, Grenzdrift, Szenenwechseln und mehrdeutigen Ereignissen.

Die Werkzeuge werden bei der Abgrenzung bestätigt und nicht als feste Methode für jedes Projekt zugesagt.

Wo wird das Video verarbeitet?

Der Auftrag legt Verarbeitungsumgebung, Zugriffsmodell, Datenresidenz, Unterauftragsverarbeiter und Übermittlungskontrollen fest.

Standardmäßig Datenresidenz im EWR; Unterauftragsverarbeiter und Übermittlungen werden pro Auftrag vereinbart.

Vom Kunden kontrollierte Umgebungen oder andere eingeschränkte Workflows können bei der Abgrenzung bewertet werden; die Machbarkeit hängt jedoch von den technischen, sicherheitsbezogenen und betrieblichen Anforderungen ab.

Wie wird die Annotationsqualität gemessen?

Die Metrik folgt der Annotationsaufgabe.

Tracking kann HOTA, IDF1, ID-Wechsel und Fragmentierung verwenden.

Segmentierung kann Überlappungs- und Grenzmaße verwenden.

Aktionslokalisierung kann mean average precision bei Schwellenwerten für zeitliche Überlappung verwenden.

Pose kann Keypoint-Metriken plus Identitätskontinuität verwenden.

Kein universeller Genauigkeitsprozentsatz ist über all diese Aufgaben hinweg aussagekräftig.

Was passiert, wenn Annotator:innen uneinig sind?

Uneinigkeit wird protokolliert, nicht stillschweigend überschrieben.

Das Element kann übergehen an:

  • Prüfung im zweiten Durchgang
  • Prüfung durch erfahrene Prüfer:innen
  • Prüfung durch Fachspezialist:innen
  • Schlichtung
  • Überarbeitung der Richtlinie
  • Überarbeitung des Schemas
  • eine weitere Kalibrierungsrunde

Wiederkehrende Uneinigkeit ist ein Befund über den Annotationsvertrag, nicht nur über die Leistung der Bearbeitenden.

Welche Ausgabeformate können Sie liefern?

Das genaue Format wird in der Leistungsbeschreibung (SOW) festgelegt.

Übliche Strukturen können umfassen:

  • Tracks im MOT-Stil
  • Boxes, Masken oder Keypoints im COCO-Stil
  • JSON auf Frame- und Sequenzebene
  • JSONL- oder CSV-Datensätze
  • Zeitsegmente
  • Maskenkodierungen
  • CVAT-kompatible Exporte
  • kundendefinierte Schemas

Jede Lieferung enthält ein Manifest, das die vereinbarten Dateien, Versionen und Felder ausweist.

Kann YPAI in unserer bestehenden Annotationsumgebung arbeiten?

Ja, sobald der Auftrag festgelegt hat, wie wir darin arbeiten.

Der Auftrag muss festlegen:

  • unterstützte Import- und Exportformate
  • Zugriff für Nutzer:innen und Prüfer:innen
  • Sicherheitskontrollen des Kunden
  • Audit-Logging
  • Beschränkungen für Datenbewegungen
  • Integrationsanforderungen
  • Verantwortung für Werkzeuge und Support

YPAI kann eine vom Kunden kontrollierte Umgebung bewerten oder einen verwalteten Workflow vorschlagen.

Beginnen Sie mit der Sequenz, die Ihr Modell verstehen muss.

Bringen Sie Material, Annotationsziel, Klassen, Ausgabeanforderungen und Abnahmeproblem mit.

YPAI liefert den vorgeschlagenen Projektumfang, die offenen Entscheidungen, den Kalibrierungsplan und das Nachweispaket, das zur Evaluierung der ersten Lieferung nötig ist.

Erste Rückmeldung zum Umfang innerhalb eines EU-Geschäftstags. Die Produktion beginnt erst, wenn der Annotationsvertrag und das zutreffende Abnahmegate vereinbart sind.

FAQ

Häufig gestellte Fragen

Welche Videoannotationsaufgaben liefert YPAI?

YPAI liefert Objekterkennung und Tracking über Frames hinweg, Instanzsegmentierung mit zeitlichen IDs, Aktionserkennung und Labeling von Ereignissegmenten, kameraübergreifende Re-Identifikation, 3D-Tracking mit Sensorfusion, Posen- und Gestenannotation sowie dichte Keypoint-Markierung pro Frame. Das Ergebnis ist pro Frame und pro Track strukturiert, sodass nachgelagerte Trainingspipelines die benötigte Granularität wählen können, ohne die Annotation erneut durchzuführen.

Welche Videoformate und Auflösungen verarbeitet YPAI?

Standardcodecs (H.264, H.265, VP9, AV1) und Containerformate (MP4, MOV, MKV) werden unterstützt. Die Arbeitsauflösung wird an die Pipeline des Kunden angepasst, statt auf 1080p festgelegt zu sein, sodass 4K-Fahrzeugaufnahmen, Drohnenbilder und Überwachungsstreams mit geringerer Auflösung gleichermaßen verarbeitet werden. Zeitgestempelte Sensorspuren (LiDAR, Radar, IMU) können bei Aufträgen für autonome Fahrzeuge synchron zum Video annotiert werden.

Wie geht YPAI mit der Annotation langer Videos um?

Lange Videos werden in prüffreundliche Segmente aufgeteilt, mit segmentübergreifender Validierung auf Frame-Ebene, damit Track-IDs über die Schnittpunkte hinweg konsistent bleiben. Annotator:innen spezialisieren sich nach Domäne (Szenenverständnis im Automobilbereich, Diebstahlprävention im Handel, industrielle Bildverarbeitung, OP-Aufzeichnungen), statt beliebige Inhalte im Wechsel zu bearbeiten. Die IAA auf Tracking-Metriken (HOTA, MOTA) wird pro Batch berichtet.

Kann YPAI Wahrnehmungsdaten für autonome Fahrzeuge annotieren?

Ja. Fusionsannotation aus mehreren Kameras, LiDAR und Radar für ADAS- und Wahrnehmungsstacks autonomer Fahrzeuge ist ein wiederkehrender Auftragstyp. Die Lieferung umfasst projektspezifische Taxonomien, Rückverfolgbarkeit, Dokumentation von Grenzfällen und Nachweise nach Artikel 10 des EU AI Act (KI-Verordnung) für den Prüfpfad des Kunden. Siehe Automobillösungen für das umfassendere Auftragsmodell.

Welche Ausgabeformate liefert YPAI für Video?

Lieferungen erfolgen in COCO-Video, CVAT, im KITTI-Tracking-Format, als benutzerdefiniertes JSON mit Frame- und Track-Schemas sowie in jedem vom Kunden vorgegebenen Format. Frame-genaue Zeitstempel und die Synchronisierung der Sensorspuren bleiben beim Export erhalten. Das Lieferpaket enthält ein Kalibrierungsprotokoll, wenn eine Multisensor-Ausrichtung durchgeführt wurde.

Wie werden Aufträge zur Videoannotation bepreist?

Die Preisgestaltung erfolgt pro Projekt nach der Abgrenzung. Kostentreiber sind die Stunden an Quellvideo, die angestrebte IAA, die Labeldichte pro Frame und etwaige Anforderungen an die Multisensor-Fusion. Ein Pauschalpreis pro Videominute spiegelt die tatsächlichen Kosten selten wider. Das Abgrenzungsgespräch über /contact-us/ ergibt ein schriftliches Angebot mit einzeln aufgeführten Kostentreibern, sodass der Kunde sieht, welche Dimensionen gegeneinander abgewogen werden.

Ist Videoannotation bei Material mit Personen DSGVO-konform?

Material mit identifizierbaren Personen wird nach der DSGVO auf einer dokumentierten Rechtsgrundlage verarbeitet. Wo der Anwendungsfall es erfordert, führt YPAI Durchgänge zur Unkenntlichmachung oder Gesichtsverfremdung für identifizierbare Personen durch, die keine Einwilligung für nachgelagertes Modelltraining erteilt haben. Der Entscheidungsbaum wird in der Leistungsbeschreibung (SOW) dokumentiert, und der Auftragsverarbeitungsvertrag (AVV) regelt die Verarbeitungsbedingungen.