Zuverlässigkeit von psychologischen Experimenten

Quelle: Laboratorien von Gary Lewandowski, Dave Strohmetz und Natalie Ciarocco — Monmouth Universität

Um etwas wissenschaftlich zu untersuchen, muss ein Forscher bestimmen, einen Weg, um es zu quantifizieren. Psychologische Konstrukte können jedoch schwierig sein, zu messen und zu quantifizieren. Dieses Video wird Zuverlässigkeit im Rahmen der Inhaltsanalyse untersucht.

Eine aktuelle Studie in der Fachzeitschrift Pediatrics berichtet, dass 4-jährigen, die eine rasante Karikatur beobachtet schlechteren Performance auf kognitive Aufgaben, z. B. folgende Regeln in einem Spiel hatte, in Richtung von einem Erwachsenen hören und verzögern Befriedigung, im Vergleich zu anderen Kindern, die einen langsamer schnelllebigen Cartoon beobachtet. ¹ neben das Tempo der Karikatur, kann der Inhalt der Karikatur auch nachteilige Auswirkungen auf seine jungen Zuschauer haben.

Dieses Video verwendet ein einfaches zwei-Gruppe-Design, um exemplarisch die Frage der Zuverlässigkeit bei der Prüfung der Frage, ob der Zeichentrickserie SpongeBob SquarePants unangebrachter Inhalte als die Karikatur Caillou tut.

1. definieren Sie Schlüsselvariablen.

1. Erstellen Sie eine operationale Definition (d.h., eine klare Beschreibung der genau was ein Forscher Mittel durch ein Konzept) von anstößigen Inhalten.
2. Finden Sie Definitionen von der Organisation TV Parental Guidelines erstellt und von der Federal Communications Commission genehmigt.
3. Unangemessene Inhalte ist jedes grob oder unhöflich Verhalten (z. B.Toilette Humor), Darstellungen von verbaler oder körperlicher Aggression (z.B., Namen zu nennen, schlagen usw.), vulgäre Sprache (z.B. Schimpfwörter) oder Hinweise auf Drogenkonsum, Gewalt oder Sex.

(2) Codierung Kategorien aus der Arbeitsdefinition von anstößigen Inhalten erstellen.

1. Design einen systematischen Prozess für die Studienteilnehmer (nachfolgend als die Rater) Instanzen gezielt, unangemessene Verhaltensweisen zu identifizieren (siehe Tabelle 1).

Tabelle 1. Beispiel für Rekord Instanzen der unangemessene Verhaltensweisen. Dieses Protokoll kann systematisch genutzt werden, über Rater.

3. weisen Sie Rater separat sehen die gleiche Folge von SpongeBob SquarePants und Codierung zählt.

4. weisen Sie Rater separat sehen die gleiche Folge von Caillou und Codierung zählt.

5. vergleichen Sie Bewertungen zu sehen, ob die Rater mit ähnlichen Bewertungen für jede Show kam.

1. Zuverlässigkeit ist die Fähigkeit, immer wieder die Variable messen – unangemessene Inhalte.
2. Inter-Rater-Zuverlässigkeit ist die Möglichkeit für mehr als eine Person, die Variablen zu messen und ihre Messungen im Einklang zu sein.

Die Ergebnisse zeigen, dass die Rater ein hohes Maß an Zustimmung oder Konsistenz in ihre Bewertungen innerhalb jeder Cartoon-Episode hatte die hochzuverlässigen Inter Rater (Abbildung 1) angibt. Es gibt auch Zuverlässigkeit oder Konsistenz in SpongeBob SquarePants Episoden mit unangebrachter Inhalte als Caillou. Die Ergebnisse zeigten auch individuelle Vorurteile unter Rater. Z. B. Rater 3 berichtet unangebrachter Inhalte in SpongeBob als die anderen 2 Rater und Rater 1 berichtet in Caillou weniger als andere Rater.

Abbildung 1. Instanzen von anstößigen Inhalten durch Rater und Cartoon für Episoden 1 (oben) und 2 (unten).

Forscher haben vermehrt ihre Aufmerksamkeit auf die Analyse von Fernsehinhalten, zumal es sich um Kinder handelt. Wie vor diesem aktuellen Experiment besprochen, eine aktuelle Studie in der Fachzeitschrift Pediatrics korreliert das schnelle Tempo der Zeichentrickserie SpongeBob SquarePants, relativ schlechten kognitiven Fähigkeiten bei Kindern, die es zu sehen.

Da die Ergebnisse unseres Experiments zuverlässig erscheinen, zukünftige Forschung könnte prüfen, ob die relative Menge von anstößigen Inhalten in SpongeBob auch (oder alternativ) ist verantwortlich für Kinder geringere kognitive Leistungsfähigkeit nach beobachten.

Eines der wichtigsten Anwendungen der Zuverlässigkeit ist bei der Verwendung von Erhebungsinstrumenten. Forscher müssen sicher sein, dass die Teilnehmer konsequent jedes der Elemente in einem bestimmten Maßstab beantworten. Das heißt, sollte in einem 5-Punkt-Maß der Zufriedenheit mit dem Leben, Teilnehmer beantworten Punkte 1 und 2 in etwas ähnlicher Weise, wie sie Fragen 3, 4 und 5 zu beantworten.  Forscher wollen darüber hinaus sicherzustellen, dass ihre Messungen in einem Experiment im Laufe der Zeit übereinstimmen. Also wenn ein Forscher Erweiterung der Pupille verwendet, um Interesse an einen Anreiz zu geben, muss die Forscher sicher sein, dass Erweiterung der Pupille eine konsistente Anzeige von Interesse ist.

1. Lillard, A. S., & Peterson, J. The Immediate Impact of Different Types of Television on Young Children's Executive Function. Pediatrics. 128(4):644-9. doi: 10.1542/peds.2010-1919 (2011).