FAQ

Häufig gestellte Fragen

Die Fragen, die uns tatsächlich gestellt werden, beantwortet in der Länge, die sie verdienen, statt in einem Satz. Gruppiert, damit Sie Ihre finden, ohne den Rest zu lesen.

Wenn etwas hier nicht abgedeckt ist, schicken Sie es mit Ihrer Anfrage – wir beantworten es direkt, statt Sie auf diese Seite zurückzuverweisen.

01

Einstieg

Wie eine erste Zusammenarbeit aussieht.

Mit einem abgegrenzten Pilotprojekt. Sie schicken eine repräsentative Datenprobe und eine Beschreibung, was das Modell tun soll; wir entwerfen die Richtlinienentscheidungen, die die Aufgabe verlangen wird, annotieren eine kleine Charge und berichten die daran gemessene Übereinstimmung. Das Pilotprojekt ist dazu da herauszufinden, wo zwei vernünftige Annotatoren uneins sind, denn dort ist Ihre Spezifikation unvollständig. Dimensionierung und Preis der Produktion folgen aus dem, was der Pilot misst, und nicht aus einer Schätzung.

Eine Datenprobe, die Aufgabenbeschreibung, das benötigte Ausgabeformat und etwaige Randbedingungen – Termin, Vertraulichkeitsanforderungen, Tooling, in dem wir arbeiten sollen. Ein Angebot allein aus einer Aufgabenbeschreibung ist geraten; wir schauen lieber eine Stunde auf echte Daten, als eine Zahl zu nennen, die sich nach der ersten Charge ändert.

Typischerweise ein bis drei Wochen ab Eingang der Daten, je nachdem, wie viel Spezifikationsarbeit die Aufgabe braucht. Der größte Teil dieser Zeit geht in den Entwurf der Richtlinie und in die Kalibrierung, nicht in die Annotation. Eine Aufgabe mit vorhandener, erprobter Richtlinie geht deutlich schneller.

Kein festes Mindestvolumen. Wir führen kleine Pilotprojekte durch und skalieren bis zu Produktionsprogrammen mit hohem Volumen. Eine praktische Untergrenze setzen die Einrichtungskosten – Richtlinienarbeit, Tooling und Kalibrierung sind weitgehend unabhängig vom Volumen, sodass ein sehr kleiner einmaliger Auftrag einen unverhältnismäßigen Anteil davon trägt. Wir sagen Ihnen, wenn das der Fall ist, statt darum herum zu kalkulieren.

Je Arbeitseinheit – je Element, je Audiostunde, je Bild, je Bewertung – mit einem Satz, der sich nach Aufgabenkomplexität, Prüftiefe und erforderlicher Expertise richtet. Die Entwicklung der Richtlinie und die Kalibrierung werden getrennt abgegrenzt, weil sie echte Arbeit sind, die vor dem ersten gelabelten Element stattfindet. Gespräche zur Abgrenzung eines Pilotprojekts berechnen wir nicht.

02

Leistungen und Umfang

Was wir tun und wo wir nicht die Richtigen sind.

Auf Japanisch sind wir ausgelegt. Japanisch-englische zweisprachige Arbeit übernehmen wir – Übersetzungsprüfung, sprachübergreifendes Alignment, parallele Evaluationssets –, weil sie auf demselben japanischen Urteil beruht. Bei Volumenarbeit in anderen Sprachen sagen wir Ihnen lieber offen, dass wir nicht der richtige Anbieter sind, als das Projekt anzunehmen und weiterzuvergeben.

Ja. Wir arbeiten in kundenseitig bereitgestellten Plattformen und virtuellen Desktops, auch dort, wo die Richtlinie verlangt, dass Daten Ihre Infrastruktur nie verlassen, und in unserer eigenen abgesicherten Umgebung, wenn Sie keine Zugänge einrichten möchten. Das Tooling ändert sich; die Richtlinie, die Prüfdurchläufe und die QA-Berichte nicht.

Wir erheben und erstellen Daten dort, wo es japanischsprachige Arbeit ist – Instruction-Daten schreiben, Evaluations-Prompts konstruieren, skriptbasierte Sprachaufnahmen erstellen, Dokumentproben beschaffen. Wir sind kein allgemeiner Datenerhebungsbetrieb, und für großangelegte Felderhebungen wären Sie bei einem Spezialisten besser aufgehoben.

Ja, und das Erste, was wir tun, ist deren Richtlinie zu lesen und eine Stichprobe der gelieferten Daten blind neu zu annotieren. Das zeigt Ihnen, was Sie tatsächlich haben – auch, ob die bestehenden Labels in sich konsistent sind –, bevor wir etwas hinzufügen. Einen Datensatz fortzuschreiben, ohne zu messen, was er derzeit enthält, ist der Weg, auf dem sich Inkonsistenz aufaddiert.

Ja. Ein dediziertes Team ist bei langlaufenden KI-Programmen üblich, wo dieselben Annotatoren die Richtlinie fortführen und ihr angesammelter Kontext ein echter Wert ist. Es ist zugleich die Konstellation, in der Richtliniendrift am meisten zählt, deshalb gehört eine regelmäßige Nachkalibrierung gegen ein Gold-Set dazu.

03

Japanische Sprache

Was japanische Abdeckung in der Praxis heißt.

Förmliche und informelle Register über Kanji, Hiragana, Katakana und lateinische Schrift hinweg, einschließlich Höflichkeitssprache, regionaler Variation, Slang, Branchenjargon und gemischt japanisch-englischer Fachtexte. Normalisierungsregeln für Schriftwahl, Ziffern, Interpunktion, Emoji und vollbreite Zeichen werden beim Kickoff vereinbart, denn diese Entscheidungen bestimmen, ob das Korpus in sich konsistent ist.

Ja. Das zählt bei Urteilen, die davon abhängen, wie ein Satz ankommt, und nicht davon, was er bezeichnet – ob eine Ablehnung als Ablehnung gelesen wird, ob ein Höflichkeitsgrad zur Beziehung passt, ob eine Formulierung übersetzt klingt. Bei mechanischen Aufgaben mit enger Richtlinie ist diese Anforderung weniger kritisch, und wir besetzen entsprechend, statt Expertise zu berechnen, die eine Aufgabe nicht braucht.

Ja, mit dem Vorbehalt, dass Dialektabdeckung eine Besetzungsfrage ist und wir konkret sagen werden, welche Varianten wir zuverlässig abdecken können. Die wichtigere Entscheidung liegt davor: ob Dialekt so transkribiert wird, wie er gesprochen wird, oder auf Standardjapanisch normalisiert wird. Diese Wahl verändert den Datensatz vollständig und muss bewusst getroffen werden.

Durch eine schriftliche Normalisierungskonvention, angewendet bei der Annotation und vor der Lieferung durch automatische Prüfungen durchgesetzt. Sie deckt die Schriftwahl für häufige Wörter, die Langvokalschreibung in Katakana, arabische gegenüber Kanji-Ziffern, vollbreite und halbbreite Zeichen, Abstände um lateinischen Text und die Interpunktion ab. Orthografische Variation ist der häufigste Defekt in unspezifizierten japanischen Datensätzen und der am leichtesten vermeidbare.

Ja, und wir übernehmen lieber Ihren, als Ihnen unseren aufzudrängen – ein Modell, das bereits in Ihrem Hausstil schreibt, sollte das weiter tun. Was wir tun werden, ist, ihn im Pilotprojekt an echten Grenzfällen zu prüfen, denn die meisten Styleguides haben zwei oder drei Regeln, die sich im Kontakt mit echten Daten als widersprüchlich erweisen.

04

Qualität und Lieferung

Wie Qualität gemessen wird und was ankommt.

Inter-Annotator-Übereinstimmung mit zufallskorrigiertem Koeffizienten, Gold-Set-Genauigkeit, Entscheidungsquote und Fehlerzahlen, aufgeschlüsselt nach einer benannten Taxonomie statt als eine einzige Defektsumme. Alles wird je Label oder Kriterium berichtet statt vermischt, denn eine Mischzahl verbirgt genau die Kategorie, die versagt. Die Qualitätsseite legt dar, wie jede Zahl berechnet wird und was sie nicht erfasst.

JSONL, CSV, CoNLL-U, COCO, SRT, CTM, TextGrid, hOCR und eigene Schemata, die beim Kickoff definiert werden. Span-Daten enthalten unter jedem gewählten Tag-Format immer Zeichen-Offsets, sodass ein späterer Tokenizer-Wechsel ein Re-Export statt einer Neuannotation ist. Jede Charge wird mit ihrer Richtlinienversion und einem Änderungsprotokoll zur vorherigen geliefert.

Korrekturen laufen über denselben Prüf- und Entscheidungsweg wie die Erstbearbeitung – eine schnelle Korrekturspur ist der Weg, auf dem Datensätze zwischen Chargen driften. Ist die Ursache eine Richtlinienlücke, überarbeiten wir die Richtlinie und arbeiten die betroffenen Elemente nach, nicht nur die von Ihnen markierten, denn dieselbe Lücke wird denselben Fehler an anderer Stelle erzeugt haben.

Der Durchsatz hängt von Aufgabenkomplexität, Prüftiefe und der echten Mehrdeutigkeit in den Daten ab und schwankt zwischen Aufgaben stärker, als die meisten Schätzungen zugeben. Wir messen den tatsächlichen Durchsatz im Pilotprojekt an Ihren Daten und legen darauf einen Plan fest. Ein Liefertermin, der genannt wird, bevor jemand Ihre Daten annotiert hat, ist eine Vermutung im Gewand einer Zusage.

Wir sehen uns die konkreten Elemente gemeinsam mit Ihnen an. Meist trifft eines von drei Dingen zu: Die Richtlinie war mehrdeutig, dann überarbeiten wir sie und arbeiten nach; die Richtlinie war klar und wurde falsch angewendet, dann korrigieren wir und spielen es in die Prüfung zurück; oder die Richtlinie sagt etwas, das Sie nicht mehr wollen, dann ist die Änderung eine Umfangsentscheidung. Eine Abweichung einem dieser drei Fälle zuzuordnen ist produktiver, als über das einzelne Label zu streiten.

05

Sicherheit, Recht und Vertrag

Vertraulichkeit, Verträge und wie wir mit dem Einkauf arbeiten.

Ein NDA, bevor irgendetwas übermittelt wird, ein Auftragsverarbeitungsvertrag, wo personenbezogene Daten im Spiel sind, rollenbasierter Zugriff beschränkt auf die im Projekt eingesetzten Personen, eine isolierte Arbeitsumgebung sowie Aufbewahrungs- und Löschregeln, die in den Vertrag geschrieben und nicht einer Richtlinie überlassen werden. Die Sicherheitsseite behandelt jede Maßnahme und, ebenso wichtig, das, was wir nicht behaupten.

Wir behaupten keine Zertifizierung, die nicht in unserem Vertrag mit Ihnen steht. Fragen Sie nach einem bestimmten Schema, und Sie bekommen eine direkte Antwort, auch dann, wenn sie Nein lautet. Wir verlieren ein Beschaffungsverfahren lieber, weil wir korrekt sind, als es mit einer Behauptung zu bestehen, die kein Audit übersteht.

Ihnen. Die Ergebnisse und die daraus abgeleiteten Annotationen gehören nach dem Projektvertrag Ihnen. Wir bewahren keine Kundendaten zur internen Weiterverwendung, zum Modelltraining oder als Referenzmaterial auf, und jedes auf dieser Website gezeigte Beispielmaterial ist unser eigenes und wurde zur Veranschaulichung erstellt.

Ja, das ist bei Enterprise-Projekten üblich. Wo uns eine Klausel zu etwas verpflichtet, das wir tatsächlich nicht leisten können – eine bestimmte Genauigkeitszahl, eine Zertifizierung, die wir nicht haben –, sagen wir das und schlagen eine alternative Formulierung vor, statt zu unterschreiben und zu hoffen. Das Gespräch ist langsamer – und am Ende kürzer als die Alternative.

Wo Unterauftragsvergabe stattfindet, wird sie offengelegt, und sie unterliegt denselben Vertraulichkeitspflichten, die unsere eigenen Mitarbeitenden binden. Sie wird nie stillschweigend unterstellt. Wenn Ihre Richtlinie Unterauftragsvergabe vollständig untersagt, sagen Sie es uns, und wir bestätigen vor Ihrer Zusage, ob wir das Projekt auf dieser Grundlage besetzen können.

06

Experten-Annotation

Fachexperten und die Grenzen dessen, was wir behaupten.

Für Projekte, die das erfordern, stellen wir Teams um die benötigte Fachexpertise herum zusammen; dazu können Personen mit einschlägigen Qualifikationen oder praktischer Erfahrung in Bereichen wie Recht, Steuern, Rechnungswesen, Arbeits- und Sozialversicherungsrecht oder Registerverfahren gehören. Wir unterhalten keinen festen Pool zugelassener Berufsträger. Die Verfügbarkeit wird je Projekt anhand von Umfang, Volumen, Spezialisierung und Zeitplan beurteilt, und wenn eine Qualifikation für Ihr Projekt nicht verfügbar gemacht werden kann, sagen wir Ihnen das vor Projektbeginn.

Danach, welche Art von Urteil die Aufgabe verlangt. Terminologie und Dokumentkonventionen lassen sich mit einem guten Lexikon und einer Kalibrierungsrunde an einen geschulten Annotator weitergeben, und für die meiste Arbeit ist das die bessere Antwort – schneller, konsistenter und günstiger. Ein Fachexperte ist angebracht, wenn das Urteil selbst ein fachliches ist: ob eine Auslegung vertretbar ist, ob eine Antwort einen Leser über seine Pflichten in die Irre führen würde.

Ja. Fachexperten können generierte Antworten nach sachlicher Richtigkeit, Qualität der Argumentation, fachlicher Angemessenheit und Einhaltung Ihrer Kriterien bewerten und Präferenz-Rankings für Alignment-Arbeit, Benchmark-Sets, Retrieval-Evaluation und Red Teaming erstellen. Die Begründung hinter jedem Urteil wird festgehalten, und das ist meist der Grund, warum eine Expertenbewertung ihren Preis wert ist.

Nein. Sie annotieren und bewerten Daten. Das Ergebnis sind Trainings- oder Evaluationsdaten für Ihr KI-System, keine rechtliche, steuerliche oder buchhalterische Beratung für Sie oder Ihre Nutzer, und nichts, was in einem Annotationsprojekt entsteht, darf einem Endnutzer als fachliche Beratung präsentiert werden. Wir sagen das ausdrücklich, weil die Unterscheidung für beide Seiten zählt.

Noch eine Frage offen?

Stellen Sie sie direkt.

Schicken Sie sie mit Ihrer Anfrage, und Sie bekommen eine konkrete Antwort von jemandem, der die Art Projekt, die Sie beschreiben, schon durchgeführt hat – keinen Link zurück auf diese Seite.

Wir antworten innerhalb eines Werktags.