Eye Tracking in der angewandten Sprachforschung

Eye Tracking in der angewandten Linguistik und Sprachforschung ist ein starkes Werkzeug, um Einblicke in die inneren Abläufe dieses komplexen kognitiven Prozesses zu gewinnen. Forscher nutzen Eye Tracking als experimentelle Methode, um Linguistik zu verstehen, und haben es im Zentrum von Experimenten, die sich auf Aspekte wie Aufmerksamkeit und Kognition, Wahrnehmung, nonverbale Kommunikation, Grammatik, Spracherwerb, Fremdsprachen- und bilinguale Studien sowie sogar Sprachstörungen konzentrieren. Eye Tracking ist ein leistungsfähiges Werkzeug, das mit dem richtigen Design und Ansatz in jede Forschung zur angewandten Linguistik integriert werden kann.

1. Quantifizierung der Blickrichtung während der Sprachwahrnehmung

Sprachwahrnehmung in der Psycholinguistik und Kommunikation bezieht sich auf die angeborenen Prozesse, die das Hören, Interpretieren und Verstehen von Sprache ermöglichen. Eye Tracking kann während der Sprachwahrnehmung integriert werden, um die Blickrichtung zu quantifizieren.

Zum Beispiel, wenn ein Forscher den Teilnehmern ein Video zeigt, kann das Eye Tracking während der Dauer des Videos verfolgt werden, während die Sprachwahrnehmung erfolgt. Ebenso kann Eye Tracking während Leseaufgaben integriert werden, während der Teilnehmer herausgefordert wird, laut zu lesen oder Texte verschiedener Größen und Schriften zu lesen.

Es gibt viele Möglichkeiten, um linguistische Studien in Labvanced zu gestalten, die bereits von Studenten und Forschern erforscht und veröffentlicht wurden. Die Integration von Eye Tracking in Ihre Linguistik- und Sprachforschung ist eine weitere Methode, die es zu erkunden gilt, um eine zusätzliche Datenschicht zu erhalten.

Lesen Sie diese peer-reviewed Studie in der Zeitschrift Behavior Research Methods, die die Genauigkeit der webcam-basierten Eye Tracking-Technologie von Labvanced mit EyeLink vergleicht.

2. Verfolgung nonverbaler Kommunikation

Nonverbale Kommunikation ist ein weiteres Stück des Sprachpuzzles und kann interessante Themen wie Folgendes umfassen:

• Körpersprache
• Gebärdensprache

Nonverbale Kommunikation ist stark von visuellen Eingaben für das Verständnis abhängig. Daher kann Eye Tracking einige Einblicke in die Beziehung zwischen der Aufmerksamkeit des Teilnehmers und den anschließenden Wahrnehmungen bieten.

3. Sakkaden, Fixationen und Kopflage

Augenbewegungen werden zunehmend in der angewandten Linguistik verwendet, da sie Aufmerksamkeit und innere Mechanismen während des Sprachverständnisses und der Sprachproduktion anzeigen können. Psycholinguisten sind daran interessiert, verschiedene Arten von Augenbewegungen, wie Sakkaden oder Fixationen, zu messen, da sie eine quantifizierbare Antwort auf klassische Fragen zur Sprache liefern (Tanenhaus, 2007).

Fixationen & Sakkaden

Im Allgemeinen sind Sprache und Augenbewegung tief miteinander verbunden. Ein klassisches Beispiel, wie Augenbewegungen das Sprachverständnis beeinflussen, ist der transposed letter effect, bei dem zwei Buchstaben in einem Wort vertauscht werden. 1958 waren die Forscher Bruner und O’Dowd die ersten, die diesen Effekt nutzten, um festzustellen, wie die Reaktionszeit beeinflusst wurde.

Seitdem haben Forscher gezeigt, dass beim Lesen die Augen nicht auf einen Buchstaben zur gleichen Zeit fixieren, sondern von Fixationspunkt zu Fixationspunkt springen. Im 21. Jahrhundert untersuchen Forscher immer noch Sakkaden und nutzen Eye Tracking-Technologie in Experimenten, um linguistische Fragen zu beantworten, wie ob Morpheme eine Rolle beim transposed letter effect spielen (Stites, Federmeier, & Christianson, 2016).

Kopflage

Neben Eye Tracking sind viele Forscher in der angewandten Linguistik und Sprache daran interessiert, die Kopflage zu quantifizieren. Dies gilt insbesondere für die Arbeit mit Online-Lösungen wie Labvanced, da die Kopfverfolgung eine wichtige Variable ist, die berücksichtigt werden muss.

Die folgende Demo gibt einen Einblick, wie die Kopflage mithilfe datengestützter Bereichselemente quantifiziert werden kann, die sich basierend auf den Kopfkoordinaten im Raum bewegen. Probieren Sie es hier aus.

4. Untersuchung der Aufmerksamkeit während der Sprache

Eye Tracking ist nicht nur ein Mittel zur Quantifizierung von Augenbewegungen, sondern auch der Aufmerksamkeit des Teilnehmers. Mit Eye Tracking können Forscher bestimmen, wo Aufmerksamkeitsressourcen während des linguistischen Experiments zugewiesen sind. Ob die Sprachaufgabe für Kleinkinder oder ältere Menschen konzipiert ist, ob der Fokus auf Fremdsprachen, Spracherwerb, Wahrnehmung oder sogar Sprachstörungen liegt, Eye Tracking zeigt, wie sich die Aufmerksamkeit auf visuelle Hinweise im Laufe der Zeit verändert und worauf der Teilnehmer achtet, wenn er mit mehreren visuellen Hinweisen konfrontiert wird.

📌 Veröffentlichungshighlight: Wörter vor Bildern - Die Rolle der Sprache bei der Beeinflussung der visuellen Aufmerksamkeit

Die Studie nutzte Labvanced’s Webcam Eye Tracking, um zu untersuchen, wie die semantische Verarbeitung von Wort- und Objektprimern die visuelle Aufmerksamkeit und die Zielerkennung beeinflusst. Das Experiment verwendete ein wiederholtes Messdesign und umfasste zwei Teile:

• Experiment 1: Die Teilnehmer sahen entweder echte Wörter oder Pseudowörter als Primer, gefolgt von einem räumlichen Hinweis, der sie zu einem Ziel leitete. Ziel war es, zu bewerten, wie diese Primer die Geschwindigkeit der Zielerkennung beeinflussten.
• Experiment 2: Den Teilnehmern wurden echte Objekte oder Pseudo-Objekte als Primer präsentiert, die entweder zum Ziel passten oder nicht passten. Dieses Experiment hatte das Ziel, die Auswirkungen von semantischer und perceptueller Kongruenz auf das Aufmerksamkeitsengagement und die Zielerkennung zu untersuchen.

Gesammelte Daten: Reaktionszeiten, Eye Tracking-Daten (Fixationen der Teilnehmer und Aufmerksamkeitspatterns zur Sicherstellung der zentralen Fixation) sowie Details zu den Arten von Primern (echte Wörter, Pseudowörter, bekannte Objekte, unbekannte Objekte) und deren Übereinstimmungsstatus (Übereinstimmung vs. Nichtübereinstimmung) mit den Zielen.

Ergebnisse: Semantisches Wissen, vermittelt durch echte Wörter und Objekte, erleichtert die schnellere Zielerkennung und verbessert die Aufmerksamkeitsauffassung, selbst wenn die Primer keine räumlichen Informationen über die Ziele bereitstellen.

5. Eye Tracking für den Spracherwerb

Entwicklungspsychologen integrieren Eye Tracking-Methodologie in ihre Experimente, um Aspekte des Spracherwerbs, aber auch der Wahrnehmung zu studieren.

📌 Veröffentlichungshighlight: Wahrnehmung der audio-visuellen Synchronizität und Webcam Eye Tracking mit Säuglingen

Eine Studie von Bánki et al., (2022) vergleicht die Qualität des webcam-basierten Eye Tracking von Labvanced mit dem laborbasierten Eye Tracking zur Beurteilung der Wahrnehmung von audio-visueller Synchronizität bei Säuglingen. Da Sprache von Natur aus multimodal ist, ist die Wahrnehmung der audio-visuellen Synchronizität ein wichtiges und verwandtes Thema.

Die experimentelle Aufgabe umfasste zwei Bedingungen: einfach und komplex.

• In der einfachen Bedingung betrachteten Säuglinge zwei Videos eines Säuglings, der zu einem Kinderlied hüpfte.
• In der komplexen Bedingung sahen die Säuglinge zwei Videos einer Frau, die komplexe Choreografien zum selben Kinderlied aufführte.

Die gesammelten Daten umfassen Eye Tracking-Messungen (Blickdauern, Fixation und Blick-Synchronisation), videokodierte Betrachtungsverhalten, Geräte- und technische Metriken, Fragebogenantworten und Kalibrierungsgenauigkeit.

Die Ergebnisse zeigten, dass bei sorgfältiger Datenqualitätskontrolle online Eye Tracking ein vielversprechendes Werkzeug zur Durchführung von Studien zur bevorzugten Betrachtung mit Säuglingen online sein kann.

6. Bilinguale Studien und Fremdsprachenerwerb

Eye Tracking wird auch in Experimenten eingesetzt, die sich mit Bilingualismus oder dem Erlernen von Fremdsprachen befassen.

Eine bilinguale Studie aus dem Jahr 2019 verwendete Eye Tracking, um die Aufmerksamkeit bei Vorschulkindern im Alter von 4-5 Jahren zu quantifizieren, während sie Mandarin durch eBooks lernten. Die Ergebnisse zeigten, dass das Erlernen von Fremdsprachen in dieser Altersgruppe durch animierte eBooks, die sowohl Ton als auch Bewegung enthalten, verbessert wird, was sich in einer erhöhten Fixation auf das Buch und einer besseren Wortwiedererkennung im Vergleich zu statischen eBooks zeigt (Sun, Loh, & Roberts, 2019).

7. Sprachstörungen

Sprachstörungen können ebenfalls mithilfe von Eye Tracking-Technologie untersucht werden. Eine Studie von Fella & Papadopoulos hebt die Nützlichkeit der Integration von Eye Tracking in die Forschung zu Sprachstörungen hervor. In diesem Experiment wurden Augenbewegungen untersucht, insbesondere Sakkaden und Fixationen, während junge Schüler mit Lese-Störungen herausgefordert wurden, korrekt geschriebene Wörter von falsch geschriebenen Wörtern zu unterscheiden, die jedoch phonetisch korrekt in der griechischen Schrift dargestellt wurden.

Die Forscher fanden heraus, dass Kinder mit Leseproblemen mehr Sakkaden und längere Fixationen als normale Kontrollen hatten. Mit Eye Tracking konnten die Forscher mehr über die Mechanismen erfahren, die an den Rechtschreib- und Leseprozessen beteiligt sind, indem sie die Augenbewegungen der Teilnehmer während der Sprachaufgaben quantifizierten.

Fazit

Die Psycholinguistik ist ein schnell wachsendes Feld, da Forscher Wege finden, klassische Konzepte wie Sprachwahrnehmungen mithilfe von Werkzeugen wie Eye Tracking zu quantifizieren. Das Eye Tracking von Labvanced wurde bereits von vielen Forschern genutzt, die daran interessiert sind, angewandte linguistische Forschung zu betreiben, um Spracherwerb und viele andere Bereiche zu studieren. Zusammenfassend lässt sich sagen, dass es viele Anwendungen für Eye Tracking-Technologie in der Linguistik- und Sprachforschung gibt.

Referenzen

Bruner, J. S., & O'Dowd, D. (1958). Eine Notiz zur Informativität von Wortteilen. Sprache und Sprach, 1(2), 98-101.

Fella, Α., & Papadopoulos, Τ. K. (2018). Untersuchung der orthographischen Verarbeitung im Griechischen mit Hilfe der Eye Tracking-Technologie. Psychologie: die Zeitschrift der Hellenic Psychological Society, 23(2), 182-201.

Stites, M. C., Federmeier, K. D., & Christianson, K. (2016). Spielen Morpheme eine Rolle beim Lesen von zusammengesetzten Wörtern mit transponierten Buchstaben? Beweise aus Eye Tracking und ereignisbezogenen Potenzialen. Sprache, Kognition und Neurowissenschaft, 31(10), 1299-1319.

Sun, H., Loh, J., & Charles Roberts, A. (2019). Bewegung und Klang in animierten Geschichten für die visuelle Aufmerksamkeit von Vorschulkindern und den Mandarin-Spracherwerb: Eine Eye Tracking-Studie mit bilingualen Kindern. AERA Open, 5(2), 2332858419848431.

Tanenhaus, M. K. (2007). Augenbewegungen und Verarbeitung gesprochener Sprache. In Augenbewegungen (S. 443-II). Elsevier.