Презентация на тему: Эмпирическое исследование в педагогике: особенности количественных методов,

Реклама. Продолжение ниже
Эмпирическое исследование в педагогике: особенности количественных методов, уровни измерения или шкалы
Измерения в педагогике
Специфика количественных методов
Репрезентативность - генерализуемость
Об объеме выборок
Измерение
Шкалы (по возрастанию «силы»), соответствующие разным уровням измерения
Номинальное измерение (номинальная шкала )
Номинальная шкала
Номинальная шкала
Номинальная шкала
Номинальная шкала
Порядковая и р анговая шкала
Разновидности порядкового шкалирования
Ранжирование методом парных сравнений
Рейтинг Метод полярных профилей
Порядковая шкала
Интервальная шкала
Псевдометрические шкалы
Шкала пропорциональных оценок (идеальная метрическая)
Поиск эталона измерения или конструирование шкалы
Первая стадия — качественная классификация свойств объекта
Вторая стадия — поиск протяженности
Третья стадия — установление эмпирических индикаторов или внешних признаков тех свойств объекта, которые поддаются расположению в континуум
Построение индикатора путем ранжирования
Использование метода выбора в нескольких ситуациях
Сложное первичное измерение - индекс
Четвертая стадия — проверка шкалы на применимость ко всем единицам измеряемого объекта
Ошибки измерений
Валидность
Проверки измерений (показателей) на валидность
Способы повышения обоснованности (валидность ) измерения
Устойчивость
Точность и правильность
Точность и правильность
Измерительная процедура проверяется на надежность
О восприятии шкал
Предварительная работа при построении шкал
О векторных («комплексных») оценках
Шкалы и статистические критерии
Вопросы:
1/41
Средняя оценка: 4.7/5 (всего оценок: 83)
Код скопирован в буфер обмена
Скачать (533 Кб)
Реклама. Продолжение ниже
1

Первый слайд презентации: Эмпирическое исследование в педагогике: особенности количественных методов, уровни измерения или шкалы

Матюшкина М.Д., д.п.н., зав.кафедрой социально-педагогических измерений СПб АППО

Изображение слайда
1/1
2

Слайд 2: Измерения в педагогике

Измерение – процедура сравнения 2-х объектов, когда 1 выступает в роли эталона. Специфика педагогических измерений: дискуссионность самого понятия измерения – проблема эталона Количественные методы оперируют идеализированными объектами

Изображение слайда
1/1
3

Слайд 3: Специфика количественных методов

Необходимость репрезентатиной выборки Проблема объема выборки Ошибки выборки Возможность измерений разного уровня Проблема ошибок измерений Валидность измерений Надежность измерений

Изображение слайда
1/1
4

Слайд 4: Репрезентативность - генерализуемость

По способу формирования выборки делятся на: Случайные Экспертные Квотные На необходимый объем выборки влияют: Гомогенность «Размерность объекта исследования» Требуемая точность

Изображение слайда
1/1
5

Слайд 5: Об объеме выборок

Допустимый процент ошибки выборки: Степень уверенности: 95% 99% ± 1% 10 000 22 500 ± 2% 2 500 5 625 ± 3% 1 111 2 500 ± 4% 625 1 406 ± 5% 400 900 ± 10% 100 – Необходимые объемы выборок для различных допустимых процентов ошибки выборки

Изображение слайда
1/1
6

Слайд 6: Измерение

Измерение — это процедура, с помощью которой измеряемый объект сравнивается с некоторым эталоном и получает числовое выражение в определенном масштабе или шкале Процедуры измерения – средства категоризации и упорядочивания явлений. Одни дают выявить более тонкие и детальные различия, чем другие. Понятия уровня измерений и измерительной шкалы

Изображение слайда
1/1
7

Слайд 7: Шкалы (по возрастанию «силы»), соответствующие разным уровням измерения

Номинальная (шкала наименований) Порядковая (частный случай – ранговая) Интервальная (метрическая шкала равных интервалов) Пропорциональная ( шкала отношений, идеальная метрическая)

Изображение слайда
1/1
Реклама. Продолжение ниже
8

Слайд 8: Номинальное измерение (номинальная шкала )

Номинальная шкала устанавливает отношения равенства между явлениями, которые включены в один класс Пункты шкалы — эталоны качественной классификации свойств. Полезны, если они взаимоисключающие и исчерпывающие Примеры: ? Лед – вода – пар Пол / Гендер

Изображение слайда
1/1
9

Слайд 9: Номинальная шкала

Пример1. Группировка по перечню профессий Пример2. Группировка по мотивам увольнения с работы

Изображение слайда
Изображение для работы со слайдом
Изображение для работы со слайдом
1/3
10

Слайд 10: Номинальная шкала

Все элементы должны иметь единое основание для выделения Отношения равенства между явлениями, которые включены в один класс Операции с числами для номинальной шкалы : Нахождение частот распределения по пунктам шкалы с помощью процентирования Поиск средней тенденции по модальной частоте ( Mo)

Изображение слайда
Изображение для работы со слайдом
Изображение для работы со слайдом
1/3
11

Слайд 11: Номинальная шкала

Изображение слайда
Изображение для работы со слайдом
1/2
12

Слайд 12: Номинальная шкала

Установление взаимосвязи между рядами свойств, расположенных неупорядоченно, в данном случае является самым сильным способом количественного анализа. С этой целью составляют перекрестные таблицы. Критерий сопряженности признаков по Пирсону: хи-квадрат — простейший показатель обоснованности вывода о наличии или отсутствии связи между сопоставляемыми характеристиками, т. е. связанности качественных классификаций.

Изображение слайда
Изображение для работы со слайдом
1/2
13

Слайд 13: Порядковая и р анговая шкала

Порядковая (полностью упорядоченная) шкала наименований устанавливает отношения равенства между явлениями в каждом классе и отношения последовательности в понятиях ">" и "<" между всеми без исключения классами «вполне согласен», «пожалуй, согласен», «затрудняюсь ответить», «пожалуй, не согласен», «совершенно не согласен » Шкала Мооса, шкала Рихтера Ранговая шкала (разновидность порядковой) предполагает полное упорядочение каких-то объектов от наиболее к наименее важному, значимому, предпочитаемому

Изображение слайда
1/1
14

Слайд 14: Разновидности порядкового шкалирования

ранжирование (в ряд, может быть перевернут) группировка (ранжирование по группам ) парное сравнение метод рейтинга метод полярных профилей ( можно использовать при разных методах сбора информации – анкетировании, интервью, наблюдении и др.)

Изображение слайда
1/1
Реклама. Продолжение ниже
15

Слайд 15: Ранжирование методом парных сравнений

Иванов П етров Сидоров Об щ ий балл (ранг) Иванов - 1 1 2 Петров 1 - 2 3 Сидоров 1 0 - 1

Изображение слайда
1/1
16

Слайд 16: Рейтинг Метод полярных профилей

Рейтинг. В этом приеме оценка объекта производится путем усреднения оценочных суждений группы компетентных экспертов. Имея общие критерии оценки (в порядковой шкале, в баллах), эксперты независимо друг от друга (в устной или письменной форме) выносят свои суждения. Усредненный результат экспертной оценки является достаточно объективным и иногда называется рейтингом. Метод полярных профилей. Этот прием предполагает применение для оценки условной шкалы, крайними точными которой являются противоположные значения признака (например, добрый - злой, теплый - холодный и т. п.). Промежуток между полюсами делится на произвольное количество частей (баллов). Пример. Оценка различных качеств учителя учениками дается в полярной шкале: (Строгий) 10 - 9 - 8 - 7 - 6 - 5 - 4 - 3 - 2 - 1 (Совсем не строгий)

Изображение слайда
1/1
17

Слайд 17: Порядковая шкала

Операции с числами для порядковой шкалы следующие : Числа поддаются монотонным преобразованиям: их можно заменить другими с сохранением прежнего порядка Возможен поиск средней тенденции с помощью медианы ( Me ), которая делит ранжированный ряд пополам Наиболее сильный показатель для ранговых (порядковых) шкал — корреляция рангов (по Спирмену или по Кендаллу ).

Изображение слайда
Изображение для работы со слайдом
1/2
18

Слайд 18: Интервальная шкала

Это полностью упорядоченный ряд с одинаковыми интервалами между пунктами, причем отсчет начинается с произвольно избранной величины (нет «естественного нуля» на шкале ) Возраст, доход, … Операции с числами в интервальной метрической шкале допускают линейные преобразования: у= ах+b. Можно использовать коэффициент корреляции по Пирсону Псевдометрические шкалы: балльные оценки, «Термометр общественного мнения» и т.п.- это по сути ранговые шкалы. Интервалы между «2», «3», «4» - на самом деле не равны!!! До 20 лет 21-24 лет 25-30 лет 31-40 лет 41-50 лет 51-60 лет Свыше 60 лет 1 2 3 4 5 6 7

Изображение слайда
1/1
19

Слайд 19: Псевдометрические шкалы

Можно ли назвать корректным, например, утверждение о том, что знания учащихся в экспериментальных классах в среднем на 0,5 балла выше, чем в контрольных? Пример «странного» изменения результата: Баллы: 10 9 8 7 6 5 4 3 2 1 Среднее 1 группа 80 чел. 20 0 30 0 20 0 10 0 0 0 7,5 2 группа 80 чел. 0 30 0 30 0 2 0 0 0 0 0 7,25 5 4 3 2 1 Среднее 1 группа 20 30 20 10 0 3,75 2 группа 30 30 2 0 0 0 4,125

Изображение слайда
1/1
20

Слайд 20: Шкала пропорциональных оценок (идеальная метрическая)

Отсчет в этой шкале начинается не с произвольной точки, а с экспериментально установленного нулевого пункта Примеры: количество действий, ошибок, продуктов, протяженность во времени или пространстве и т.п. Возможны все операции с числами

Изображение слайда
1/1
21

Слайд 21: Поиск эталона измерения или конструирование шкалы

Нахождение эталона измерения осуществляется в четыре стадии: Качественная классификация свойств объекта Поиск протяженности выделенных в качественном анализе свойств Установление эмпирических индикаторов Проверка шкалы на применимость ко всем единицам измеряемого объекта 1 2 3 4 Поиск эталона измерения или конструирование шкалы

Изображение слайда
1/1
22

Слайд 22: Первая стадия — качественная классификация свойств объекта

Цель первой стадии: Классификация типов ориентаций личности Основа для классификации: Иерархия потребностей Цель первой стадии: Классификация типов ориентаций личности Основа для классификации: Сферы деятельности Цель первой стадии: Классификация типов ориентаций личности Основа для классификации: Социальные функции Пример: Измерить структуру ценностных ориентаций личности Собираясь измерить структуру ценностных ориентаций или социальных установок личности, мы прежде всего должны четко классифицировать типы ориентации, исходя из теоретической концепции и задач исследования Можно положить в основу классификации иерархию потребностей или интересов, сфер деятельности, социальные функции, социальные ситуации, которые бы различались по степени свободы выбора целей и средств деятельности и т. д. Теоретическаяконцепция Задачи исследования Первая стадия — качественная классификация свойств объекта

Изображение слайда
1/1
23

Слайд 23: Вторая стадия — поиск протяженности

Следует установить, обладают ли эти свойства прерывной или непрерывной протяженностью, можно ли их представить в виде различных последовательных состояний измеряемого качества. Рассмотрим с этой точки зрения какую-нибудь ценностную ориентацию (на материальный достаток, культурные ценности, творчество и др.). Ее можно "вытянуть" в несколько протяженностей — континуумов. сильная—средняя—слабая устойчивая—малоустойчивая— неустойчивая господствующая— рядоположенная —подавленная центральная или периферийная В зависимости от концепции исследования можно выделить и другие протяженности. Вторая стадия — поиск протяженности

Изображение слайда
1/1
24

Слайд 24: Третья стадия — установление эмпирических индикаторов или внешних признаков тех свойств объекта, которые поддаются расположению в континуум

Индикатор — внешне хорошо различимый показатель измеряемого признака. С его помощью устанавливается наличие или отсутствие признака, его состояние. Например, высота ртутного столбика термометра — индикатор температуры. Третья стадия — установление эмпирических индикаторов или внешних признаков тех свойств объекта, которые поддаются расположению в континуум

Изображение слайда
Изображение для работы со слайдом
1/2
25

Слайд 25: Построение индикатора путем ранжирования

Простейший индикатор расположения какого-то объекта среди других объектов ориентации — порядковое место, отмечаемое опрашиваемым в заданном списке. Например, из 18 объектов он помечает объект М порядковым номером 1. Этот номер — индикатор доминирования объекта М с точки зрения интересов субъекта ( господствующая ориентация ). Объект N, помеченный порядковым номером 18, будет располагаться в конце протяженности (" подавленная ориентация на N "). Индикатор - порядковое место A B C D E F G H I J K L M N O P Q R 5 13 9 6 16 2 10 8 4 17 12 14 1 18 7 16 11 3 Построение индикатора путем ранжирования

Изображение слайда
1/1
26

Слайд 26: Использование метода выбора в нескольких ситуациях

Сложнее найти индикатор для протяженности по критерию "сильные", "средние", "слабые" ориентации. Один из возможных вариантов таков. Испытуемым предлагают три ситуации, различающиеся по степени свободы выбора. В первой ситуации ( широкий диапазон выбора ) испытуемый выбирает без ограничения. Во второй ситуации ( средний диапазон выбора ) он оставляет в списке лишь шесть наиболее важных объектов, в третьем случае ( узкий диапазон ) — не более трех, для него особенно значимых. Объекты A B C D E F G H I J K L M N O P Q R Ситуация 1 V V V V V V V V Ситуация 2 V V V V V V Ситуация 3 V V V Сильные: C, F, M. Средние: G, I, R. Слабые: A, P. Использование метода выбора в нескольких ситуациях

Изображение слайда
1/1
27

Слайд 27: Сложное первичное измерение - индекс

Пример : шкала Лайкерта. Отношение к детям. 8-12 суждений Считается сумма баллов Суждение Согласен Трудно сказать Не согласен 1 Дети радуют родителей 3 2 1 2 Дети отнимают много времени 1 2 3 3 За ними приятно наблюдать 3 2 1 4 Они часто раздражают 1 2 3 5 Дети утешают в неприятностях 3 2 1 6 ...

Изображение слайда
1/1
28

Слайд 28: Четвертая стадия — проверка шкалы на применимость ко всем единицам измеряемого объекта

Пример. Для исследования отношения рабочих к труду был взят в качестве индикатора показатель нормы выработки (значительно перевыполняет норму — перевыполняет — выполняет — не выполняет норму). Вопрос: он применим ко всем рабочим? Труд некоторых рабочих оценивается по другим показателям: качеству работы прежде всего. Например, чем меньше времени тратит ремонтник на устранение текущих неполадок, тем выше качество профилактического ремонта. Четвертая стадия — проверка шкалы на применимость ко всем единицам измеряемого объекта

Изображение слайда
1/1
29

Слайд 29: Ошибки измерений

Ошибки – случайные и систематические Возможные причины ошибок (при опросе): Ответы зависят от интеллектуального уровня, от уровня знаний Ответы зависят от настроения Неоднозначность восприятия вопросов Различия в условиях проведения опроса Ошибки в инструкциях Ошибки при кодировке, при вводе в компьютер

Изображение слайда
1/1
30

Слайд 30: Валидность

Термин валидность используется для обозначения степени соответствия измерений понятиям, которые эти измерения должны отражать (действительно ли мы измеряем то, что предполагали измерять) Чтобы быть валидным, измерение должно быть исчерпывающим и полным

Изображение слайда
1/1
31

Слайд 31: Проверки измерений (показателей) на валидность

Необходим тщательный логический анализ альтернативных операционализаций понятий, анализ объекта исследования Проверить валидность наших измерений для определения того, хороши ли они, можно лишь после того, как собраны данные Сверить с результатами, полученными путем использования другого показателя, признанного в качестве валидного измерения соответствующего понятия Сверить прогнозируемые результаты с реально наступившими Убедить профессионалов, что это валидный показатель

Изображение слайда
1/1
32

Слайд 32: Способы повышения обоснованности (валидность ) измерения

Наиболее простой способ — логические рассуждения на основе опыта и здравого смысла. Тест по «эталонной группе » – более сильный прием проверки инструмента на обоснованность. Смысл проверки — в сопоставлении данных, полученных путем измерения по шкале, с достоверными сведениями об объекте измерения. Поиск независимого критерия как разновидность внешнего контроля надежности для измерения того же самого объекта или свойства. Использование метода судей для отбора пунктов шкалы. Построение индекса - с овмещение нескольких показателей для регистрации определенного одного свойства. Способы повышения обоснованности (валидность ) измерения

Изображение слайда
1/1
33

Слайд 33: Устойчивость

Устойчивость - воспроизводимость результатов при повторном наблюдении или на другой аналогичной выборке Проверка на устойчивость: Неоднократным тестированием инструмента на 1 группе Тестированием на разных группах Методом подвыборки

Изображение слайда
1/1
34

Слайд 34: Точность и правильность

измерения зависят от (а) степени устойчивости измеряемого объекта или свойства, (б) чувствительности эталона измерения ( дробности пунктов шкалы ), (в) отсутствия систематических ошибок измерения и (г) от устойчивости измерения. Дробность метрики — чувствительность шкалы — прямо связана с точностью измерения. Шкала в 10 делений измеряет точнее, чем в 5. Но дробность пунктов шкалы нельзя увеличивать беспредельно. Надо установить оптимум, удовлетворяющий двум требованиям: максимум градаций шкалы при условии высокой устойчивости результатов измерения. Точность и правильность

Изображение слайда
1/1
35

Слайд 35: Точность и правильность

Измерение может быть вполне точным и вместе с тем неправильным, постоянно воспроизводя какую-то систематическую ошибку. Типичная ситуация — какие-то пункты «не работают». Например, при опросе все ответы концентрируются в позитивном или только в негативном полюсе шкалы. Шкала неудачна, если содержит пункты, сформулированные с сильным нормативным давлением на опрашиваемых. Например, может «не работать» крайне отрицательный пункт шкалы: он отпугивает. Вследствие этого шкала неправильна. Другой причиной неправильности может быть плохая различительная способность соседних пунктов шкалы высокой дробности. «Срединная» часть такой шкалы будет крайне сомнительной, а вся шкала неточной и неправильной. Точность и правильность

Изображение слайда
1/1
36

Слайд 36: Измерительная процедура проверяется на надежность

Критерий надежности Существо данного критерия Способы проверки надежности шкалы по данному критерию Уверенность в том, что фиксируется запланированное свойство, а не какое-либо иное логические рассуждения, тест по эталонной группе, поиск независимого критерия, метод судей, построение индекса Однозначность, повторяемость результатов измерения с минимальной ошибкой повторное измерение, использование нескольких лиц для измерения данного свойства, «расщепление шкалы» Достаточная чувствительность шкалы как оптимальная дробность, дающая устойчивое измерение без систематических погрешностей устранение явных погрешностей, выявление работающей части шкалы, испытание нескольких шкал разной дробности. Обоснованность (валидность) Устойчивость Точность и правильность Измерительная процедура проверяется на надежность

Изображение слайда
1/1
37

Слайд 37: О восприятии шкал

Давать или не давать словесные наименования каждому элементу шкалы Выбор длины шкалы Насколько конкретный респондент способен воспринять шкалу – возможно, что он будет огрублять шкалу Лучше опираться на достоверные и менее детальные сведения, чем на детальные и малодостоверные

Изображение слайда
1/1
38

Слайд 38: Предварительная работа при построении шкал

Насколько тонко требуется оценить то или иное событие, отношение или процесс - возможно исследователю и не требуется слишком большая точность? Насколько содержательно данное явление, чтобы изучать его по дробной шкале. Насколько обоснованно сущностью изучаемого явления применение длинных шкал? Сможет ли респондент воспринять дробную шкалу ? Насколько он восприимчив к данному явлению, насколько информирован, представляет ли оно интерес для респондента, каков порог его чувствительности?

Изображение слайда
1/1
39

Слайд 39: О векторных («комплексных») оценках

Когда возможно оценивание по сумме очков, баллов? Практика оценки на педагогическую категорию, на конкурсах и т.д. Не наука!!! Допустимо - суммарные затраты времени на выполнение учащимися отдельных заданий, или суммарное количество ошибок, допущенных учащимися при выполнении отдельных, относительно однородных заданий Суммирование отметок – уже не строго Лучше не использовать суммы и другие формулы

Изображение слайда
1/1
40

Слайд 40: Шкалы и статистические критерии

Шкала Критерий Шкала отношений или интервалов распределение близко к нормальному (среднее = мода = медиана) t-критерий Стьюдента или F-критерий Фишера Не нормальное распределение Критерий хи-квадрат Интервальная шкала Коэф. парной корреляции Пирсона, Коэффициенты множественной корреляции Шкала порядка Непараметрические критерии: критерий знаков, критерий Уилкоксона — Мана — Унтни, Колмогорова—Смирнова и др. Коэф. ранговой корреляции Спирмена Шкалы и статистические критерии

Изображение слайда
1/1
41

Последний слайд презентации: Эмпирическое исследование в педагогике: особенности количественных методов,: Вопросы:

В какой шкале представлено каждое из приведенных ниже измерений : 1. Порядковый номер испытуемого в списке. 2. Количество вопросов в анкете как мера трудоемкости опроса. 3. Упорядочивание испытуемых по времени решения тестовой задачи. 4. Академический статус (ассистент, доцент, профессор) как указание на принадлежность к соответствующей категории. 5. Академический статус (ассистент, доцент, профессор) как мера продвижения по службе.

Изображение слайда
1/1
Реклама. Продолжение ниже