Лекция 8. Угрозы психометрическому качеству теста

21
ЛЕКЦИЯ 8. УГРОЗЫ ПСИХОМЕТРИЧЕСКОМУ КАЧЕСТВУ ТЕСТА Лекции проф. А. А. Алексеева по психометрике Arthur Robert Jensen (August 24, 1923 – October 22, 2012)

Upload: deborah-velazquez

Post on 02-Jan-2016

94 views

Category:

Documents


3 download

DESCRIPTION

Лекция 8. Угрозы психометрическому качеству теста. Лекции проф. А. А. Алексеева по психометрике. Arthur Robert Jensen ( August 24, 1923 – October 22, 2012). Типы установок на ответ. Установка на согласие (установка на положительный или отрицательный ответ) - PowerPoint PPT Presentation

TRANSCRIPT

Page 1: Лекция 8. Угрозы психометрическому качеству теста

ЛЕКЦИЯ 8.УГРОЗЫ ПСИХОМЕТРИЧЕСКОМУ КАЧЕСТВУ ТЕСТА

Лекции проф. А. А. Алексеева

по психометрике

Arthur Robert Jensen

(August 24, 1923 – October 22, 2012)

Page 2: Лекция 8. Угрозы психометрическому качеству теста

ТИПЫ УСТАНОВОК НА ОТВЕТ

Установка на согласие (установка на положительный или отрицательный ответ)

Установка на крайние ответы и установка на промежуточные ответы

Установка на социальную желательность

Симуляция неблагополучия Бездумные или случайные ответы Угадывание

Page 3: Лекция 8. Угрозы психометрическому качеству теста

ОТВЕТЫ НА УТВЕРЖДЕНИЯ ИСХОДНЫХ ТЕСТОВ:1. Я ДЕЙСТВИТЕЛЬНО ДОВОЛЕН СВОЕЙ РАБОТОЙ2. РАБОТА ДАЕТ МНЕ ВОЗМОЖНОСТЬ САМОРЕАЛИЗАЦИИ3. В ЦЕЛОМ Я УДОВЛЕТВОРЕН ПОВСЕДНЕВНЫМ ХОДОМ СВОЕЙ РАБОТЫ4. Я БЫ ПОМЕНЯЛ ЛИШЬ НЕЗНАЧИТЕЛЬНЫЕ МОМЕНТЫ В МОЕЙ РАБОТЕ

Page 4: Лекция 8. Угрозы психометрическому качеству теста

УСТАНОВКА НА ВЫБОР КРАЙНИХ ОТВЕТОВ

Page 5: Лекция 8. Угрозы психометрическому качеству теста

ВОЗМОЖНЫЕ ПРИЧИНЫ УСТАНОВКИ НА СОЦИАЛЬНУЮ ЖЕЛАТЕЛЬНОСТЬ

1. Содержание теста

2.Ситуация тестирования

3. Личностные особенности

Page 6: Лекция 8. Угрозы психометрическому качеству теста

ПРИМЕР ЗАВИСИМОСТИ РЕЗУЛЬТАТОВ ИССЛЕДОВАНИЯ ОТ НАЛИЧИЯ УСТАНОВКИ НА

СОЦИАЛЬНО ЖЕЛАТЕЛЬНЫЕ ОТВЕТЫ

Page 7: Лекция 8. Угрозы психометрическому качеству теста

МЕТОДЫ БОРЬБЫ С УСТАНОВКАМИ НА ОТВЕТ

Page 8: Лекция 8. Угрозы психометрическому качеству теста

ОТВЕТЫ НА УТВЕРЖДЕНИЯ ИСХОДНЫХ ТЕСТОВ:1. Я ДЕЙСТВИТЕЛЬНО ДОВОЛЕН СВОЕЙ РАБОТОЙ2. МОЯ РАБОТА НЕ СООТВЕТСТВУЕТ МОИМ ИНТЕРЕСАМ И СКЛОННОСТЯМ3. В ЦЕЛОМ Я УДОВЛЕТВОРЕН ПОВСЕДНЕВНЫМ ХОДОМ СВОЕЙ РАБОТЫ4. Я БЫ МНОГОЕ ХОТЕЛ ПОМЕНЯТЬ В СВОЕЙ РАБОТЕ

Page 9: Лекция 8. Угрозы психометрическому качеству теста
Page 10: Лекция 8. Угрозы психометрическому качеству теста

ВИДЫ НЕОБЪЕКТИВНОСТИ ТЕСТА

Необъективность в значении теста (неадекватность конструкта)

Необъективность в использовании теста (прогностическая ошибка)

Page 11: Лекция 8. Угрозы психометрическому качеству теста

МЕТОДЫ ВЫЯВЛЕНИЯ НЕАДЕКВАТНОГО КОНСТРУКТА

Вычисление индексов дискриминативности пунктов теста

Факторный анализАнализ дифференциального

функционирования пунктов тестаРанжирование

Page 12: Лекция 8. Угрозы психометрическому качеству теста
Page 13: Лекция 8. Угрозы психометрическому качеству теста
Page 14: Лекция 8. Угрозы психометрическому качеству теста
Page 15: Лекция 8. Угрозы психометрическому качеству теста

ОПРЕДЕЛЕНИЕ ПРОГНОСТИЧЕСКОЙ ОШИБКИ: ПРИМЕР ИСПОЛЬЗОВАНИЯ ЛИНЕЙНОЙ РЕГРЕССИИ (1)

Уравнение линейной регрессии:

a = 56,03, b = 0,58, = 96,05 = 96,63

Page 16: Лекция 8. Угрозы психометрическому качеству теста

ОПРЕДЕЛЕНИЕ ПРОГНОСТИЧЕСКОЙ ОШИБКИ: ПРИМЕР ИСПОЛЬЗОВАНИЯ ЛИНЕЙНОЙ

РЕГРЕССИИ (2)

Page 17: Лекция 8. Угрозы психометрическому качеству теста

СИСТЕМАТИЧЕСКАЯ ОШИБКА СВОБОДНОГО ЧЛЕНА РЕГРЕССИИ

b = 0,58, Прогнозируемое значение критериальной

переменной для мужчин = 58,03 + 0,58(70), Прогнозируемое значение критериальной

переменной для мужчин = 98,63, Прогнозируемое значение критериальной

переменной для женщин = 54,03 + 0,58(70), Прогнозируемое значение критериальной

переменной для женщин = 94,63.

Page 18: Лекция 8. Угрозы психометрическому качеству теста

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО РЕГРЕССИОННОГО УРАВНЕНИЯ (ИЛЛЮСТРАЦИЯ

СИСТЕМАТИЧЕСКОЙ ОШИБКИ СВОБОДНОГО ЧЛЕНА РЕГРЕССИИ)

Page 19: Лекция 8. Угрозы психометрическому качеству теста

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО

РЕГРЕССИОННОГО УРАВНЕНИЯ

Page 20: Лекция 8. Угрозы психометрическому качеству теста

СИСТЕМАТИЧЕСКАЯ ОШИБКА УГЛОВОГО КОЭФФИЦИЕНТА РЕГРЕССИИ

a = 56,03, b = 0,58 ,

Прогнозируемое значение критериальной переменной для мужчин = 56,03 4 + 0,53(70).

Прогнозируемое значение критериальной переменной для мужчин = 93,13.

Прогнозируемое значение критериальной переменной дли женщин = 56,03 + 0,63(70).

Прогнозируемое значение критериальной переменной для женщин = 100,13.

Прогнозируемое значение критериальной переменной для мужчин = 56,03 + 0,53(60).

Прогнозируемое значение критериальной переменной для мужчин = 87,83.

Прогнозируемое значение критериальной переменной для женщин = 56,03 + 0,63(60).

Прогнозируемое значение критериальной переменной для женщин = 93,83.

Page 21: Лекция 8. Угрозы психометрическому качеству теста

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО РЕГРЕССИОННОГО УРАВНЕНИЯ (ИЛЛЮСТРАЦИЯ

СИСТЕМАТИЧЕСКОЙ ОШИБКИ НАКЛОНА ЛИНИИ РЕГРЕССИИ)