Wir bei Comms Multilingual wissen, wie wichtig es ist, der Assessment- und Zertifizierungsbranche genaue und kulturell relevante Übersetzungen zu liefern.
Unser erklärtes Ziel sind Dienstleistungen höchster Qualität. Das bedeutet, dass wir Dienstleistungen anbieten wollen, die im Allgemeinen nicht von den üblichen Übersetzungsbüros angeboten werden. Lesen Sie weiter, um zu erfahren, wie wichtig die Erhebung normativer Daten ist, welche Rolle sie bei der Übersetzung psychometrischer Assessments spielt und wie Ihre Organisation von unserer Kompetenz profitieren kann.
Was bedeutet Erhebung normativer Daten?
Normative Daten werden erhoben, um Fragen der Validität zu klären und die Gleichwertigkeit der Interpretationen in den verschiedenen Ländern zu beurteilen. Dieser Schritt trägt dazu bei, die kulturübergreifende Vergleichbarkeit zu erhöhen.
Unsere Kunden stellen uns die demografischen Spezifikationen für ihr spezielles Assessment zur Verfügung. Wir wählen dann zwischen 200 und 600 Personen aus, die das Assessment entweder online oder in Papierform absolvieren.
Die Ergebnisse können dann als Normen dienen, an denen zukünftige Assessment-Teilnehmer in diesem Land gemessen werden können.
Die Rolle der Erhebung normativer Daten bei Übersetzungen von Assessments
Bei der Übersetzung von Assessments, die in mehreren Sprachen und Kulturen genutzt werden sollen, ist es unbedingt erforderlich, die kulturellen und sprachlichen Unterschiede zu berücksichtigen, die die Testergebnisse beeinflussen können. Die Erhebung normativer Daten spielt eine entscheidende Rolle in diesem Prozess, denn sie ermöglicht:
- Fairness
Die Erhebung normativer Daten hilft bei der Ermittlung potenzieller Verzerrungen, zu denen es kommen kann, wenn Assessments in unterschiedlichen kulturellen oder sprachlichen Gruppen durchgeführt werden. Sie stellt sicher, dass die Testergebnisse die Fähigkeiten und Kompetenzen von Bewerbern mit unterschiedlichem Hintergrund korrekt widerspiegeln. - Validität
Validität ist für jedes Assessment ein grundlegendes Kriterium. Normative Daten tragen dazu bei, die Validität von Assessments in verschiedenen Sprachversionen durch quantitative Analysen zu erhalten. Sie liefern den Nachweis, dass der Test in verschiedenen kulturellen Kontexten das misst, was er messen soll. - Anpassung der Bewertungsskalen
Normative Daten ermöglichen eine Anpassung der Bewertungsskalen, die unterschiedlichen Sprachen, Kulturen und Bildungssystemen Rechnung trägt. Diese Anpassung stellt sicher, dass die Testteilnehmer Ergebnisse erhalten, die in ihrem kulturellen Kontext aussagekräftig sind.
Erhebung normativer Daten – ein Beispielprojekt
Einer unserer Kunden, ein Herausgeber psychometrischer Tests, beauftragte uns mit der Übersetzung eines Fehlererkennungstests in mehrere europäische Sprachen. Im Rahmen des Prozesses wurden wir gebeten, 250 Antworten aus einer repräsentativen Stichprobe der Population in mehreren dieser Länder einzuholen, um bei der Normierung und Validierung des Assessments zu helfen. Dies erforderte die enge Zusammenarbeit mit einem Panel-Anbieter, um geeignete Personen für die Befragung zu rekrutieren und die Schnittstelle zwischen dem Testsystem des Kunden und dem Belohnungssystem des Panel-Anbieters zu programmieren.
Dynamische Verknüpfung und Datenqualität
Mehrere Aspekte erleichtern die Sicherung der Qualität der erhobenen normativen Daten erheblich. Dazu zählt auch die Zusammenarbeit mit einem erstklassigen Datenpanel-Anbieter. Dieser sollte die Qualität der von den Befragten eingegebenen Daten verfolgen – nicht nur bei Ihrem eigenen Assessment, sondern auch bei allen Daten, die von derselben Person in anderen Studien eingegeben wurden. Dadurch wird sichergestellt, dass die Befragten ernsthaft und ehrlich antworten.
Es lohnt sich, darauf zu achten, dass Ihr Assessment auch Kontrollmechanismen enthält, um „Raser“ zu ermitteln. Dies sind Personen, die bei einem Assessment immer nach demselben Muster antworten oder sich nicht genug Zeit für die Fragen nehmen, sodass ihre Antworten bei der Bildung der Normgruppen nicht berücksichtigt werden können.
Die Verwendung einer „dynamischen“ Verknüpfung mit der Plattform zur Datenerhebung bedeutet, dass nur Eingaben, die die Kriterien für qualitativ hochwertige Daten erfüllen, belohnt werden. So kann das in der Realität funktionieren:
- Ein Teilnehmer wird zusammen mit der eindeutigen Teilnehmer-ID des Panel-Anbieters in der URL (einer dynamischen URL) an die Testplattform gesendet.
- Die ID des Teilnehmers wird von der Testplattform während der gesamten Durchführung des Assessments gespeichert.
- Wenn das Assessment abgeschlossen ist oder für ungültig erklärt wird (weil z. B. die Fragen zu schnell oder immer gleich beantwortet wurden), wird der Teilnehmer zusammen mit der eindeutigen Teilnehmer-ID und einem Statuscode, z. B. „Geschwindigkeit“ oder „Annehmen“, an eine vom Datenpanel-Anbieter gehostete URL zurückgeschickt.
- Diejenigen, deren Assessment-Teilnahme als gültig gewertet wird, erhalten eine Belohnung, während diejenigen, die die Fragen zu schnell oder immer gleich beantwortet haben, nicht belohnt werden.
Anforderungen an die Erhebung normativer Daten für übersetzte Assessments
Wenn Sie gern mehr darüber erfahren möchten, wie wir Sie bei der Entwicklung von Normen für Ihr übersetztes Assessment unterstützen können, nehmen Sie bitte Kontakt mit uns auf.
Wir müssen die typische Testbearbeitungszeit, den Umfang und die Zusammensetzung der Stichprobe kennen, die Sie benötigen, und wissen, wie Sie das Assessment durchführen wollen (d. h., muss es separat gehostet werden oder können Sie Links zur Weiterleitung einrichten?). In der Regel vereinbaren wir ein Telefongespräch, um Ihre Anforderungen zu klären, bevor wir den für uns am besten geeigneten Datenpanel-Anbieter ermitteln und Ihnen einen Kostenvoranschlag unterbreiten.
