Method Article
نموذج العالم المرئي وترصد حركات العين المشاركين في مساحة عمل visual كما يتم الاستماع إلى أو يتحدث لغة منطوقه. يمكن استخدام هذا النموذج للتحقيق في معالجة طائفة واسعة من المسائل بسيتشولينجويستيك، بما في ذلك البيانات المعقدة لغوياً، مثل بيانات الفاصل على الإنترنت.
في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، المشاركين العين حركات للكائنات أو الصور في مساحة عمل visual تسجل عبر تعقب عين كما تنتج المشارك أو يفهم لغة منطوقه تصف البصرية المتزامنة العالم. هذا النموذج ببراعة عالية، كما أنها يمكن أن تستخدم في طائفة واسعة من السكان، بما في ذلك أولئك الذين لا يمكن قراءة و/أو الذين لا يمكن أن تعطي علنا ردودهم السلوكية، مثل الأطفال الشفهي، البالغين المسنين، والمرضى. الأهم من ذلك، النموذج حساسة للغاية للتلاعب غرامة الحبيبات إشارة الكلام، ويمكن استخدامه لدراسة معالجة معظم المواضيع في فهم اللغة على مستويات متعددة، مثل الصوتية غرامة الحبيبات الصوتية عبر الإنترنت ميزات وخصائص الكلمات والهياكل اللغوية. ويوضح البروتوكول الموضحة في هذه المقالة كيفية إجراء نموذجي عالم مرئي عين تتبع الدراسة، مع أمثلة تبين كيف يمكن استكشاف الإنترنت معالجة بعض البيانات المعقدة لغوياً مع نموذج العالم المرئي.
اللغة المنطوقة هو تدفق معلومات السريع والمتواصل، الذي يختفي الحق بعيداً. تحد تجريبيا دراسة هذا الزمان، وسرعة تغيير إشارة الكلام. يمكن استخدام حركات العين التي تسجل في نموذج العالم المرئي للتغلب على هذا التحدي. في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، تراقب حركات العين المشاركين للصور في عرض أو الكائنات الحقيقية في مساحة عمل visual كما أنهم الاستماع إلى، أو إنتاج، اللغة المنطوقة التي تصور محتويات العالم المرئي1 ،2،،من34. المنطق الأساسي، أو فرضية الربط، وراء هذا النموذج أن فهم أو التخطيط الكلام (علنا أو سراً) سيتحول المشاركين الانتباه البصري لكائن معين في العالم المرئي. وسيكون هذا التحول في الاهتمام وجود احتمال كبير لبدء حركة عين ساككاديك لإحضار منطقة حضر إلى رؤية نقري. مع هذا النموذج، يعتزم الباحثون لتحديد ما هي النقطة الزمنية، فيما يتعلق ببعض معلما الصوتية في إشارة الكلام، يحدث تحولاً في المشارك الانتباه البصري، مقيسة بحركة عين ساككاديك لكائن أو صورة في المرئي العالم. متى وأين بدأت حركات العين ساككاديك فيما يتعلق بإشارة الكلام ثم تستخدم للاستدلال على معالجة اللغة على الإنترنت. يمكن استخدام نموذج العالم المرئي لدراسة اللغة المنطوقة الفهم1،2 والإنتاج5،6على حد سواء. سوف تركز هذه المادة المنهجية على دراسات الفهم. وفي دراسة فهم باستخدام نموذج العالم المرئي، العين المشاركين وتراقب تحركات على العرض المرئي كما كانوا يستمعون إلى تصريحات المنطوقة تتحدث عن العرض المرئي.
وقد صممت نظم تتبع العين مختلفة في التاريخ. أبسط، هو النظام الأقل كلفة والأكثر المحمولة مجرد كاميرا الفيديو عادي، الذي يسجل صورة لعيون المشارك. ثم يتم ترميز حركات العين يدوياً من خلال دراسة الإطار حسب الإطار لتسجيل الفيديو. بيد أن معدل أخذ العينات من هذه تعقب العين منخفضة نسبيا، وإجراءات الترميز مضيعة للوقت. وهكذا، يستخدم عين تجارية معاصرة بنظام تتبع عادة أجهزة الاستشعار البصرية قياس اتجاه العين في المدار7،،من89. لفهم كيفية عمل نظام تتبع العين تجارية معاصرة، ينبغي النظر في النقاط التالية. أولاً، لقياس اتجاه رؤية نقري، إضاءة الأشعة تحت حمراء بشكل صحيح (عادة مع الطول الموجي حوالي 780 880 نانومتر) هو عادة المزروعة على طول أو إيقاف المحور البصري للكاميرا، مما يجعل صورة التلميذ distinguishably أكثر إشراقا أو أغمق من القزحية المحيطة بها. ثم يتم استخدام صورة للتلميذ و/أو انعكاس القرنية التلميذ (عادة الصورة بوركنجي الأولى) لحساب اتجاه العين في مدارها. ثانيا، الموقع الحملقة في العالم المرئي فعلا يتوقف ليس فقط على اتجاه العين فيما يتعلق بالرأس ولكن أيضا على التوجه الرئيسي فيما يتعلق بالعالم المرئي. لدقة الاستدلال أنظار الصدد من اتجاه العين، مصدر الضوء والكاميرا من العين-تتبع أما ثابتة فيما يتعلق برئيس المشاركين (محمولة على رأس العين-تتبع) أو ثابتة فيما يتعلق بالعالم المرئي (محمولة على الجدول أو العين بعيد-تتبع). ثالثا، التوجه المشتركين الرئيسي يجب أن تكون ثابتة أما فيما يتعلق بالعالم المرئي أو يمكن تعويضه حسابياً إذا رأس المشاركين حرية التحرك. عندما يتم استخدام عين-تعقب بعيد في وضع الرأس مجاناً للتحرك، يتم تسجيل موقف المشاركين رئيس عادة بوضع ملصق صغير على جبهته المشاركين. ثم يتم طرح اتجاه الرأس حسابياً من اتجاه العين لاسترداد موقع البصر في العالم المرئي. رابعا، مطلوبة ثم معايرة وعملية التحقق من صحة لتعيين اتجاه العين للبصر الشأن في العالم المرئي. في عملية المعايرة، ويتم تسجيل تثبيت العينات المشاركين من النقاط المستهدفة معروفة لتعيين البيانات الخام العين نظرات الموقف في العالم المرئي. في عملية التحقق من الصحة، يتم عرض المشاركون مع نفس النقاط المستهدفة كعملية المعايرة. ثم يتم استخدام الفرق القائم بين موقف التثبيت محسوب من نتائج المعايرة والوضع الفعلي لهذا الهدف تركز اهتمامها في العالم المرئي للحكم على دقة المعايرة. إلى مزيد تأكيد دقة عملية التعيين، عادة يتم تطبيق الاختيار انجراف في كل محاكمة، التي عرضت فيها هدفا يتمثل في تثبيت واحد للمشاركين لقياس الفرق بين موقف محسوب التثبيت والوضع الفعلي الهدف الحالي.
البيانات الأولية لدراسة العالم المرئي تيار مواقع نظرات في العالم المرئية المسجلة بمعدل أخذ العينات من العين-tracker، تمتد على مدى كلياً أو جزئيا لمدة المحاكمة. تعتمد على المتغير المستخدمة في دراسة عالم مرئي هو عادة نسبة العينات أن تثبيتات المشاركين تقع في منطقة معينة المكانية في العالم المرئي عبر إطار زمني معين. لتحليل البيانات، لديها إطار زمني أولاً يتم اختيارها، غالباً ما يشار إلى فترات من الفائدة. الإطار الزمني عادة الوقت مغلق لعرض بعض الأحداث اللغوية في المدخلات السمعية. وعلاوة على ذلك، يلزم العالم المرئي أيضا لتقسيم إلى عدة مناطق للفائدة (رويس)، ويرتبط كل منها بواحد أو أكثر من الكائنات. واحد هذه المنطقة تحتوي على الكائن المناظرة للفهم الصحيح للغة المنطوقة، وهكذا كثيرا ما يسمى المنطقة المستهدفة. طريقة نموذجية لتصور البيانات هي مؤامرة نسبة من التثبيت، حيث في كل بن في إطار زمني، متوسط نسبة العينات مع نظرة لكل منطقة لمصلحة جميع المشاركين والبنود.
باستخدام البيانات التي تم الحصول عليها من دراسة عالم مرئي، يمكن الإجابة الأسئلة البحثية المختلفة:) على مستوى الحبوب الخشنة، هي حركات العين المشتركين في العالم البصرية تأثرا بمختلف المدخلات اللغوية السمعية؟ ب) إذا لم يكن هناك تأثير، ما هو مسار للتأثير على مجرى المحاكمة؟ هل تأثير الخطية أو تأثير الترتيب العالي؟ وج) إذا كان هناك تأثير، ثم على مستوى غرامة من الحبوب، هو عند أقرب النقطة الزمنية التي تظهر فيها مثل هذا أثر، وكم أثر هذا الأخير؟
لتحليل النتائج إحصائيا، ينبغي النظر في النقاط التالية. أولاً، متغير الاستجابة، أينسب تثبيتات، سواء أدناه وأعلاه يحدها (بين 0 و 1)، التي سوف تتبع توزيع متعدد الحدود بدلاً من توزيع الطبيعي. من الآن فصاعدا، الأساليب الإحصائية التقليدية استناداً إلى التوزيع العادي مثل اختبار t، ANOVA والنماذج الخطية (تأثير مختلطة)10، لا يمكن مباشرة استعمالها حتى النسب قد تم تحويلها إلى متغيرات غير محدودة كما هو الحال مع الصيغة التجريبية اللوغاريتمية11 أو قد تم استبدال مع غير محدودة تعتمد على متغيرات مثل مسافة إقليدية12. يمكن أيضا استخدام الأساليب الإحصائية التي لا تتطلب افتراض التوزيع العادي مثل المعمم النماذج الخطية (تأثير مختلطة)13 . ثانيا، استكشاف مسار التأثير الملاحظ المتغيرة، قد متغير تدل السلسلة الزمنية المراد إضافتها إلى النموذج. هذا متغير السلسلة الزمنية هو أصلاً العين-tracker أخذ عينات من نقاط إعادة تنظيمها إلى ظهور لغة الإدخال. نظراً لتغير مسار عادة ليست خطية، تتم عادة إضافة دالة متعدد الحدود ذات الترتيب العالي من السلاسل الزمنية في (المعمم) (تأثير مختلطة) النموذج الخطي، أيالنمو منحنى تحليلات14. وعلاوة على ذلك، مواقف المشاركين العين في نقطة العينة الحالية يعتمد اعتماداً كبيرا على نقطة (نقاط) أخذ العينات السابقة، خاصة عند تكرار تسجيل مرتفع، أسفر عن مشكلة ترابط تلقائي. للحد ترابط تلقائي بين نقاط العينات المتجاورة، البيانات الأصلية غالباً ما تكون عينات من أسفل أو إهمال. وفي السنوات الأخيرة، استخدمت أيضا نماذج تأثير مختلطة المضافة المعمم (جام) لمعالجة الأخطاء أوتوكوريلاتيد12،،من1516. ويختلف عرض سلال بين دراسات مختلفة، تتراوح بين عدة مللي ثانية عدة مئات من المللي ثانية. بن أضيق يمكن اختيار دراسة مقيد بمعدل أخذ العينات من تعقب العين تستخدم في دراسة معينة. على سبيل المثال، إذا كان تعقب عين معدل أخذ عينات من 500 هرتز، ثم عرض الإطار الزمني لا تكون أصغر من 2 مللي ثانية = 1000/500. ثالثا، عندما يتم تطبيق تحليل الإحصائي مرارا وتكرارا على بن مرة كل فترة من فترات الفائدة، الناجمة عن الخطأ فاميليويسي من هذه المقارنات متعددة ينبغي معالجتها. كما وصفت لنا في وقت سابق، تحليل مسار يبلغ الباحث ما إذا كان تأثير على مستوى الحبوب الخشنة خطي فيما يتعلق بتغيير الوقت، ولكن لا تظهر عندما يبدأ التأثير الملاحظ في الظهور وكيف طويلة الملاحظة ويستمر تأثير. لتحديد موضع الزمنية عندما يبدأ الفارق الملاحظ تتباعد، ومعرفة مدة الفترة الزمنية التي يستمر التأثير الملاحظ، قد تحليل الإحصائي لتطبيقها مرارا وتكرارا على كل بن مرة. وسوف أعرض هذه مقارنات متعددة الخطأ فاميليويسي ما يسمى، بغض النظر عن يتم استخدام الأسلوب الإحصائي. يتم تصحيح الخطأ فاميليويسي تقليديا مع التكيف بونفيروني17. في الآونة الأخيرة، طبق أسلوب يسمى اختبار التباديل nonparametric المستخدمة أصلاً في نيورويماجينج قدم18 نموذج word البصرية19 لعنصر التحكم للخطأ فاميليويسي.
الباحثون باستخدام نموذج العالم المرئي تنوي الاستدلال الفهم لبعض اللغات المنطوقة من حركات العين المشتركين في العالم المرئي. للتأكد من صحة هذا الخصم، ينبغي أن تكون العوامل الأخرى التي ربما تؤثر حركات العين أما استبعد أو الخاضعة لسيطرة. اثنين من العوامل التالية من بين تلك المشتركة التي يتعين النظر فيها. العامل الأول ينطوي على بعض أنماط منتظمة في تثبيتات المشتركين تفسيرية مستقلة للغة الإدخال، مثل الميل إلى يحملق في أعلى يسار كوادرات العالم المرئي، وعيون تتحرك في اتجاه أفقي يجري أسهل في الاتجاه العمودي، إلخ12،20 للتأكد من أن أنماط التثبيت الملاحظة المرتبطة بالكائنات، ولا ينبغي أن تعوض مواقف المكانية لكائن إلى المواقع المكانية التي يقع فيها الكائنات، عبر محاكمات مختلفة أو عبر مختلف المشاركين. والعامل الثاني الذي قد يؤثر على حركات العين المشاركين هو ملامح الصورة الأساسية للكائنات في العالم المرئي، مثل اتجاه التباين واللون وحافة النصوع، بين أمور أخرى21. لتشخيص هذه الإمكانات التباس، عادة ما يقدم العرض المرئي قبل ظهور اللغة المنطوقة أو قبل ظهور العلامة الصوتية الحرجة من اللغة المنطوقة، للسيدة حوالي 1000 خلال الفترة الزمنية من البداية ولم يسمع بعد صورة الاختبار لبدء اختبار الصوت، ولغة الإدخال أو نقطة توضيح لغة الإدخال. ينبغي أن يستنتج أي فرق بين الأوضاع المختلفة للعوامل الأخرى المؤثرة الأخرى مثل العرض المرئي في حد ذاته، بدلاً من لغة الإدخال. من الآن فصاعدا، حركات العين التي لوحظت في هذه الفترة معاينة توفر أساس لتحديد تأثير المدخلات اللغوية. كما يسمح هذا الفترة معاينة المشاركين للحصول على إطلاع مع العرض المرئي، وتقليل التحيز المنهجي تثبيتات تفسيرية عندما يتم عرض اللغة المنطوقة.
لتوضيح كيف تجري عين نموذجية بتتبع دراسة باستخدام نموذج العالم المرئي، يصف البروتوكول التالي تجربة مقتبس من زان ل17 لاستكشاف الإنترنت تجهيز البيانات المعقدة لغوياً، أي بيانات الفاصل (S1 أو S2) والبيانات المترابط (S1 و S2)، و لكن--البيانات (S1 ولكن عدم-S2). في الحفظ العادية، المعلومات التي أعرب عنها بعض التصريحات أقوى فعلا من معناها الحرفي. الفاصل عبارات مثل شياو مينغ في المربع يحتوي على بقرة أو ديك بمثل هذه التصريحات. منطقياً، يصح البيان الفاصل الذي طالما ديسجونكتس اثنين شياو مينغ في المربع يحتوي على بقرة و شياو مينغ في المربع يحتوي على ديك ليست على حد سواء كاذبة. ولذلك يصح البيان الفاصل عندما ديسجونكتس اثنين كلاهما صحيح، حيث يصح أيضا بيان المترابط المقابلة شياو مينغ في المربع يحتوي على بقرة وديك . في العادية المحادثة، إلا أن الاستماع إلى البيان الفاصل الذي غالباً ما يوحي بأن البيان المترابط المقابلة كاذبة (implicature العددية)؛ ويشير إلى أن قيم الحقيقة ديسجونكتس اثنين غير معروف بالمتكلم (الاستدلال الجهل). تختلف حسابات في الأدب في ما إذا كانت هي استدلالات اثنين العمليات النحوية أو عملي22،23،24،،من2526. وتبين التجربة كيف يمكن استخدام نموذج العالم المرئي للفصل بين هذه الحسابات، باستكشاف الإنترنت تجهيز ثلاثة بيانات معقدة.
جميع المواضيع يجب أن تعطي موافقة خطية مستنيرة قبل إدارة البروتوكولات التجريبية. جميع الإجراءات ونماذج الموافقة على البروتوكول التجريبي بموافقة "لجنة أخلاقيات البحوث بكين اللغة" والثقافة الجامعة.
ملاحظة: دراسة فهم عادة باستخدام نموذج العالم المرئي يتكون من الخطوات التالية: يعرض المشاكل النظرية التي يمكن استكشافها؛ نموذج تصميم تجريبي؛ تحضير المحفزات البصرية والسمعية؛ إطار المشكلة النظرية فيما يتعلق بالتصميم التجريبي؛ حدد عين المقتفي لتتبع حركات العين المشاركين؛ قم بتحديد برامج وبناء نصي مع البرنامج لتقديم المحفزات؛ رمز وتحليل البيانات المسجلة من حركات العين. تجربة محددة يمكن أن تختلف عن بعضها البعض في أي من الخطوات الموصوفة. على سبيل مثال، هو عرض بروتوكول لإجراء التجربة ومناقشة بعض النقاط التي تحتاج إلى الباحثين أن نأخذ في الاعتبار عند بناء وإجراء التجربة الخاصة بهم باستخدام نموذج العالم المرئي.
1-إعداد اختبار المنشطات
2-الإطار "النظري التنبؤ" فيما يتعلق "التصميم التجريبي".
3-بناء البرنامج النصي تجريبي
4-تجنيد المشاركين
5-إجراء التجربة
ملاحظة: عند المشاركين الكبار المتقدمة النمو الطبيعي، المجرب واحد ما يكفي للقيام بإجراء التجربة. ولكن إذا كان المشاركون هم السكان خاصة، مثل الأطفال، المجربون اثنين أو أكثر مطلوبة.
6-بيانات الترميز والتحليلات
وترد ردود المشاركين السلوكية في الشكل 4. كما وصفت لنا في وقت سابق، هو الاستجابة الصحيحة لبيان المترابط (S1 و S2) المربع فتح كبيرة، مثل "مربع أ" في الشكل 1. الإجابة الصحيحة و لكن-بيان (S1 ولكن ليس S2) يتم فتح مربع صغير يحتوي على الحيوان المذكور أولاً، مثل "مربع د" في الشكل 1. المربع الذي يتم اختياره للبيان الفاصل (S1 أو S2) حاسمة، يتوقف على كيفية معالجة بيان الفاصل: مربع مغلقة صغيرة، مثل مربع ب في الشكل 1، يتم اختيارها فقط عندما implicature العددية واستدلالات الجهل تتصل بالبيان الفاصل على حد سواء وتحسب. ويبين الشكل 4 أن عند فهم بيان الفاصل (S1 أو S2)، حساب المشاركين كلا استدلالات اثنين.
وعلاوة على ذلك، تثبيتات العين المشاركين في مربع المغلقة الصغيرة، خاصة عندما يتم اتباع هذه التثبيتات بالاستجابات السلوكية في هذا المربع، تشير أيضا إلى أن implicature العددية واستدلالات الجهل وتحسب. استدلالات اثنين ينبغي جهزت لا يتجاوز أقرب النقطة الزمنية عند نقل المشاركين الانتباه البصري وتثبيتات في خانة مغلقة صغيرة. ويرد في الشكل 5حركات العين المشاركين. كما يمكن أن نرى في لوحة ب، لا زيادة العين-التثبيتات المشتركين في المربع إغلاق الصغيرة (مربع ب) ما لم يكن الضام سينتينتيال هو الفاصل الضام، أو. وعلاوة على ذلك، تبدأ هذه الزيادة لا يتجاوز إزاحة الضام الفاصل. وهذا يوحي بأن إيمبليكاتوري العددية واستدلالات الجهل يتم حسابها قبل إزاحة الضام سينتينتيال، أي فورا عند مواجهة الضام الفاصل.
الشكل 1 . مثال على الصور الاختبار المستخدمة في التجربة- المنطقة الرمادية هو صورة الاختبار فعلا المقدمة للمشاركين. مربعات بلوز والخطوط المنقطة بكسل تدل على عرض العناصر هي فقط لأغراض التوضيح وهي غير مرئية للمشاركين. (مقتبس من تجربة واحدة من زان ل 17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-
الشكل 2 . مثال لاختبار الجمل المستخدمة في التجربة (أعيد طبعها من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-
الشكل 3 . الهيكل الهرمي لتجربة العين تتبع نموذجية باستخدام نموذج العالم المرئي- الصوت هو موضح في الصورة هي ترجمة اللغة الإنجليزية "الصينية الفصحى" المستخدمة في التجربة. الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-
الشكل 4 . تسجيل الاستجابات السلوكية المشاركين في التجربة (مقتبس من تجربة واحدة من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-
الشكل 5 . العين المشاركين الحركات التي لوحظت في التجربة- هي تدل على بداية وإزاحة من كونيكتيفيس سينتينتيال بخطين عمودي متقطع. هو يعني فرقا كبيرا القائمة بين الفاصل والشرط الأساس في بعض نقطة أخذ العينات بالمنطقة الرمادية (ف <.05، بونفيروني المعدلة) (مقتبس من زان ل17 مع إذن). الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-
لإجراء دراسة عالم مرئي، وهناك العديد من الخطوات الهامة لمتابعة. أولاً، يعتزم الباحثون للاستدلال على تفسير اللغة أوديتوريلي المقدمة عن طريق حركات العين المشتركين في العالم المرئي. من الآن فصاعدا، في تصميم تخطيط المحفزات البصرية، ينبغي التحكم في خصائص حركات العين في مهمة طبيعية التي يحتمل أن تؤثر على حركات العين المشاركين. يمكن ثم التعرف على تأثير اللغة المنطوقة على حركات العين المشاركين. الإشارات الصوتية، والثاني في اللغة المنطوقة عابرة وهناك لا تواقيع الصوتية فقط المقابلة لفئة لغوية معينة. لقفل الوقت بشكل صحيح المشتركين حركات العين مع ظهور بعض علامات لغوية، ينبغي أن تجد الباحثين موضوعي وطريقة متسقة لتعريف حدود بعض البنية اللغوية. ثالثا، تعيين بشكل صحيح دوران العين المشاركين حول الرأس مع هذه النظرة من الشأن في العالم المرئي، يحتاج الباحثون القيام بتشغيل واحد أو عدة للمعايرة والتحقق منها، وعمليات تصحيح الانحراف. رابعا، البيانات التي تم الحصول عليها من دراسة عالم مرئي لها بعض الخصائص المميزة، مثل كونها السفلي والعلوي يحدها، ووجود أخطاء أوتوكوريلاتيد إلخ. ينبغي النظر في هذه الخصائص المميزة عند تحديد أسلوب لتحليل البيانات إحصائيا.
دراسة عالم مرئي يتكون من ثلاثة عناصر أساسية: العرض المرئي، اللغة المحكية، المهام التجريبية. يمكن إجراء التعديلات في أي مكون للوفاء بأغراض محددة الباحثين. أولاً، عرض مرئي عادة عرض فحص التي تصور مجموعة صور. ولكن يمكن أيضا عرض فحص التي تصور مجموعة من الكلمات المطبوعة32، من30،تخطيطي مشهد31، أو مشهد عالم حقيقي الذي يحتوي على كائنات حقيقية1،32. ثانيا، يمكن أن تكون التصريحات تحدث كلمة36، جملة بسيطة30،31،34،17،بيان معقدة لغوياً35، أو حوار39. ثالثا، فيما يتعلق بالمهمة التجريبية، أما ببساطة يجري يطلب إلى المشاركين ننظر إلى العالم المرئي واستمع بعناية إلى التصريحات سمعي30،31؛ أو مطلوبة لجعل بعض الاستجابات السلوكية، مثل النيابة بها الحركات الموصوفة ب الكلام سمعي1، وتحديد ما إذا كان أو لم يكن سمعي الكلام ينطبق على العرض المرئي38، أو اختيار الصحيح الصورة في العرض المرئي الكلام المنطوقة يتحدث عن17.
نموذج العالم المرئي، بالمقارنة مع غيرها من تقنيات psycholinguistic، له العديد من المزايا الفريدة. أولاً، يمكن استخدامها في نموذج العالم المرئي في مجموعة واسعة سكان، بما في ذلك أولئك الذين لا يمكن قراءة و/أو الذين لا يمكن أن تعطي علنا ردودهم السلوكية، مثل الأطفال الشفهي37،،من3839، 40 , 41 , 42و46من المسنين البالغين المرضى (على سبيل المثال-، أفاسيكس)47. هذا سبب تعرض المحفزات اللغة في السمع وليس في شكل نصوص مكتوبة؛ ويستدل من فهم اللغة من حركات العين التلقائي الضمني المشاركين بدلاً من ردودهم السلوكية العلنية. ثانيا، نموذج العالم المرئي حساسة للغاية للتلاعب غرامة الحبيبات إشارة الكلام. يمكن استخدام هذا النموذج لدراسة معالجة على الإنترنت لمعظم المواضيع في فهم اللغة على مستويات متعددة، مثل غرامة الحبيبات الميزات الصوتية الصوتية33،45،46، خصائص عبارة30،31،1،هياكل لغوية47، وهياكل البيانات المعقدة لغوياً مثل كونسيسيفيس37، بيكونديتيونالس37، منطقية الجمل الشرطية38، والفصل17.
نموذج العالم المرئي، بالمقارنة مع أسلوب بسيتشولينجويستيك الأخرى، كما أن لديها بعض القيود المحتملة. أولاً، هو استنتاج تفسير المشاركين اللغة المنطوقة من تحركاتهم العين في العالم المرئي، وليس من التفسير الفعلي للمحفزات اللغة الواحدة ذاتها. من الآن فصاعدا، خصائص اللغة التي يمكن دراستها مع العالم المرئي نموذج تقتصر على تلك التي يمكن تصور، أي.، ينبغي أن صلتها بطريقة ما إلى كيانات أو الأحداث التي وقعت في العالم المرئي. ثانيا، نموذج العالم المرئي المستخدمة عادة أكثر تقييداً من العالم المرئي الفعلية، مع مجموعة محدودة من مرجعيات المصورة ومجموعة محدودة من الإجراءات المحتملة. هذا ما يسمى بمشكلة إغلاق مجموعة48 قد خلق الاستراتيجيات الخاصة بمهمة معالجة اللغة الملحوظ لا التعميم خارج الحالات المحددة التي تم إنشاؤها ضمن التجربة. من الآن فصاعدا، قد لا يكون النموذج يراعي الخصائص المعرفة اللغوية والخبرة ملقاة خارج مجموعة المغلقة التي أنشئت في محاكمة معينة.
ويستكشف نموذج العالم المرئي أساسا تكامل المعلومات من المجال المرئي والمعلومات من المجال السمعي. من الناحية النظرية، أي المعلومات التي يمكن معالجتها بواسطة بين المجالات المثيرة يمكن يحتمل أن تكون دراستها باستخدام هذا النموذج. على سبيل المثال، يمكن أن يكون العالم المرئي الواقع الافتراضي أو أشرطة الفيديو الديناميكية. المدخلات السمعية ليست بالضرورة اللغة، ويمكن أن يكون أي صيغة أخرى، مثل الموسيقى والصوت من العالم الطبيعي، و ما إلى ذلك. وعلاوة على ذلك، يمكن توسيع هذا النموذج كذلك استكشاف تكامل المعلومات من المجالات الأخرى، بدلاً من المجال المرئي والمجال السمعي. على سبيل المثال، قد تستخدم الباحثين هذا الأسلوب لمعرفة كيف تتأثر تثبيتات المشتركين في العالم المرئي بروائح مختلفة ولمسات مختلفة، إلخ.
ويعلن المؤلف أنه ليس لديه أي تضارب المصالح المالية.
هذا البحث تدعمها مؤسسة العلوم للغة بكين وجامعة الثقافي تحت "الصناديق البحوث الأساسية" للجامعات المركزية (الموافقة على رقم 15YJ050003).
Name | Company | Catalog Number | Comments |
Pixelmator | Pixelmator Team | http://www.pixelmator.com/pro/ | image editing app |
Praat | Open Sourse | http://www.fon.hum.uva.nl/praat/ | Sound analyses and editting software |
Eyelink 1000plus | SR-Research, Inc | https://www.sr-research.com/products/eyelink-1000-plus/ | remote infrared eye tracker |
Experimental Builder | SR-Research, Inc | https://www.sr-research.com/experiment-builder/ | eye tracker software |
Data Viewer | SR-Research, Inc | https://www.sr-research.com/data-viewer/ | eye tracker software |
R | Open Sourse | https://www.r-project.org | free software environment for statistical computing and graphics |
Request permission to reuse the text or figures of this JoVE article
Request PermissionThis article has been published
Video Coming Soon
Copyright © 2025 MyJoVE Corporation. All rights reserved