Тема 12 Психометрические и экспертные методы исследования

1. Понятие об экспертных и психометрических методах исследования.

2. Качественные диагностические методы.

3. Шкалирование как метод количественного оценивания качеств личности.

4. Измерения при изучении социальных отношений. Социометрия и рефрентометрия.

Основные понятия: шкалирование, ранжирование, рейтинг, метод независимых судей, метод обобщения независимых характеристик, социометрия, референтометрия, тест социометрического выбора, социоматрица, социограмма.

 

Это более трудоемкие методы по сравнению с количественными. Но с их помощью удается получить более развернутую и обоснованную характеристику человека.

Примером здесь могут служить получившие распространение в школьной практике педагогические консилиумы (Ю.К. Бабанский).

Консилиум.

Метод, направленный на то, чтобы:

а) помочь специалистам с разных сторон подойти к оценке интеллектуального развития клиента, основных качеств его личности;

б) показать сложность и неоднозначность проявлений его поведения, отношений;

в) вскрыть проблемы с/оценки, мотивации, особенностей познавательных и иных интересов, эмоционального настроя;

г) обеспечить подход к клиенту с оптимистической гипотезой относительно перспектив его дальнейшего развития;

д) наметить реальную программу работы с ним.

Консилиум помогает избежать субъективизма в оценке возможностей человека, позволяет объективно его понять и построить совместную программу действий, направленную на развитие определенных качеств или на устранение выявленных проблем и недостатков.

При применении данного метода эксперты копируют форму исследования проблемы у врачей (обследование пациента, формулировка симптоматики и т.д. по плану). Здесь также идет первичное рассмотрение проблемы, классифицируются признаки (симптомы), выявляются причины, приведшие к данной проблеме, проводится анализ, постановка окончательного диагноза и формулируются прогнозы развития проблемы.

Проведение консилиума, результаты которого были бы действительно полезны, требует тщательной подготовки, в ходе которой планируется решение нескольких задач:

1. Показать клиента с разных сторон, обязательно подчеркнуть его положительные, сильные стороны. Представить доказательные гипотезы, основанные на данных диагностики, наблюдений, бесед, игр, причин происхождения и существования личностных проблем.

2. Добиться понимания каждым экспертом того, что́ другой говорит о клиенте, т.е. пробиться сквозь стену негативной установки по отношению к данному клиенту. Это очень трудная задача и решать ее нужно осторожно, постепенно, еще задолго до проведения консилиума.

3. Выработать коллективное понимание всеми сути личностной проблемы клиента. Только в этом случае можно рассчитывать на их взаимодействие в его интересах.

Надо добавить, что в процессе коллективного обсуждения, решения проблемы основной акцент делается не на оценке уровня развития некоторого качества клиента, а на коллективном обмене мнениями о средствах и путях взаимодействия с ним, путях снятия психологического барьера между ним и его социальным окружением.

Обобщение независимых характеристик. Также вариант экспертного оценивания.

Суть: по заранее заданной форме берутся письменные отзывы (характеристики) исследуемого объекта (ребенка, семьи, группы, класса и т.д.). Затем сопоставляются полученные оценки, прогнозы, рекомендации. Совпадения оценок и рекомендаций дает основание полагать, что они близки к истинным.

Несовпадающие или дополняющие друг друга оценки и рекомендации дают повод к выявлению качеств объекта, быть может, скрытых и проявляющихся только в определенных условиях, видах деятельности, отношениях. Именно такие подходы позволяют обнаружить скрытые резервы развивающейся личности, подобрать ключи к непростым ситуациям

Этот метод предполагает использование не только беседы, но и анализ документов, анкетные методики.

Известно, что мнение о конкретном человеке у окружающих различно. Но практики показывает, что чем больше экспертов оценивают, тем более верным является общий результат оценки, тем точнее диагностируется уровень развития личности как специалиста, группы сотрудников.

Учесть мнения всех экспертов по всем оцениваемым параметрам – задача трудная. С целью оптимизации обобщения мнений экспертов обычно применяются количественные оценки.

Экспертам предлагается выразить свое мнение в баллах (по 5-ти иногда – 3-х или 4-х – балльной дискретной шкале). Применительно к оценке качества личности обычно используют следующую шкалу:

Балл	Показатели
	очень высокий уровень развития данного качества личности, оно стало чертой характера, проявляется в различных видах деятельности;
	высокий уровень развития данного качества, но проявляется оно еще не во всех видах деятельности;
	оцениваемое и противоположное качество личности выражены не рельефно и в целом уравновешивают друг друга;
	заметно более выражено и чаще проявляется качество личности, противоположное оцениваемому;
	противоположное оцениваемому качество четко выражено и проявляется в различных видах деятельности, является чертой характера личности.

Это самые общие критерии для формализации мнений экспертов. В каждом конкретном случае при оценке тех или иных параметров определяются более конкретные и содержательные критерии.

Диагностическая ситуация – сочетание имитации реальных ситуаций жизни или профессиональной деятельности с методом оценивания.

Метод связан с использованием специально подобранных заданий-ситуаций, требующих для своего решения (необходимого преобразования) владения определенными знаниями и практическими умениями.

Такие ситуации помогают диагностировать не только знания и умения, но и жизненные установки, направленность, ценностные ориентации, предпочтения, умение сделать правильный выбор, дать оценку.

Различают разные ситуации:

– требующие только анализа и оценки и

– требующие принятия решения и его обоснования.

Используются ситуации стандартные и нестандартные (творческие).

Ситуации могут быть

– имитирующими,

– моделирующими,

– воссоздающими реальность,

– реальными (сложившимися естественно или специально организованными).

Оценивание– метод компетентных судей, рейтинг (англ. rating – оценка, порядок, классификация).

Исследовательский метод, связанный с привлечением к оценке изучаемых явлений наиболее компетентных людей, мнения которых, дополняющие и перепроверяющие друг друга, позволяют объективно охарактеризовать изучаемое.

При экспертном оценивании (метод экспертных оценок) прежде всего следует тщательно подобрать экспертов – людей, знающих исследуемую область и способных к объективной и непредвзятой оценке действий и результатов в этой области. Желателен подбор независимых экспертов.

Оценки могут быть как качественные (характеристики, рекомендации), так и количественные (в баллах).

Важен выбор достаточно точной и удобной системы оценок и соответствующих шкал, снабженных пояснениями о том, за что выставляется тот или иной балл.

Если действующие независимо друг от друга эксперты стабильно дают совпадающие или близкие оценки или высказываются совпадающие в основном мнения, есть основания полагать, что эти оценки и мнения близки к объективным.

Но следует иметь в виду, что окончательное обобщение всех имеющихся оценок является делом исследователя.

Оценивание может быть направлено для выяснения социального заказа школе (социального учреждения), выявления педагогического потенциала среды, перспективности тех или иных организационных форм и методов социального посредничества и партнерства, полезности диагностических средств и во многих других случаях.

Смешанные диагностические методы. Представляют собой объединение количественных и качественных диагностических методов.

Другими словами, в этом случае одни проявления оцениваются количественно, другие, не поддающиеся количественной оценке, – качественно.

Хотя диагностические методы довольно точно и портативно оценивают и измеряют различные явления, они не могут их объяснить, выяснить причину происшедших изменений. Эту задачу решают экспериментальные методы.

Шкалирование – (англ. scaling – определение масштаба, единицы измерения.) – представляет собой диагностический метод измерения, с помощью которого реальные качественные психические явления получают свое числовое выражение в форме количественных оценок.

Этот метод может быть широко использован для оценки качеств личности при составлении ее характеристик, выявлении ее отношения к различным видам деятельности.

Шкалирование – алгоритм, согласно которому каждый эмпирический объект в процессе построения шкалы обозначается соответствующим числом (или совокупностью чисел).

Рейтинг (англ. rating – оценка) – один из видов оценочного шкалирования. Получил широкое распространение.Это диагностический метод измерения путем сбора суждений и разносторонних оценок компетентными судьями, экспертами качеств какого-либо человека.

Метод полярных профилей (метод полярных баллов) – разновидность рейтинга. Суть – осуществляется количественная оценка по определенной шкале проявлений психических явлений. Причем, оценивается не само психическое явление (например, то или иное качество личности), а то, насколько ярко оно выражено, как часто проявляется и т.п.

Виды шкал:

1. Оценочные шкалы. Они относительно просты в применении. Здесь возможны математические методы обработки и анализа результатов исследования.

Суть: какие-либо реальные психические явления (качества) моделируют (отображают) с помощью числовых систем по заранее обусловленным оценкам (баллам).

Например, для оценки характера взаимоотношений педагога с воспитанниками можно применить такую шкалу оценок:

1. Резко отрицательный, враждебный (–2).

2. Слабо отрицательный (–1).

3. Безразличный (0).

4. Слабо положительный (+1).

5. Ярко положительный (+2).

Конечно, при этом необходима подробная расшифровка каждого из пунктов этой шкалы.

2. Шкалы ранжирования. (Rang – нем., франц. – ряд). Образуются путем сравнения отдельных показателей друг с другом. Так, членов группы располагают в ряд по степени их активности, успеваемости и т.д. на этом основании каждый член группы получает определенный ранг, а члены группы ранжируются по оцениваемому показателю.

На основании ранжирования членов группы по каким-либо качествам, признакам может быть произведена корреляция.

Разновидностью шкал ранжирования является парное сравнение. Подкупает и сравнительная простота метода, экономия времени при сборе материала, несложная математическая обработка результатов и широкая сфера приложения. Кроме того, метод парного сравнения обладает и всеми преимуществами рейтинга, которые уже указывались.

3. Социометрические шкалы. Этот вид шкал используется для изучения межличностных отношений в группах и коллективах: сплоченности группы, степени эмоционального единства в классе/группе, структуры межличностных отношений, положения человека в системе межличностных отношений.

Типы шкал.

Номинальная шкала.Служит предпосылкой всех шкальных процедур. При ее помощи измеряются преимущественно объективные признаки респондента (пол, возраст, социальное положение, семейное положение, образование, род занятий и др.). Вычисляются лишь простейшие показатели. (Напр., образование: неполное среднее, среднее общее, среднее специальное, высшее).

Ранговая (порядковая) шкала. С ее помощью измеримо большинство свойств и признаков социальных явлений. Ответы располагаются в порядке убывания или увеличения интенсивности исследуемого признака:

– максимально положительный ответ

– положительный ответ

– нейтральный ответ

– отрицательный ответ

– максимально отрицательный ответ.

С ее помощью измеряют интенсивность оценок каких-то свойств, суждений, событий, степени согласия или несогласия с предложенными утверждениями.

Вот обычные наименования пунктов таких шкал:

Схематичное изображение	Интенсивность оценки свойств, суждений, событий. Степень согласия (несогласия)
++	- вполне согласен	- уверен, что так	- целиком одобряю
+	- пожалуй, согласен	- думаю, что так	- одобряю в основном
±	- насколько согласен, настолько не согласен	- затрудняюсь сказать	- насколько одобряю, настолько не одобряю
–	- пожалуй, не согласен	- думаю, что не так	- в основном не одобряю
=	- уверен, что не так	- совершенно не согласен	- совершенно не одобряю

Интервальная шкала. С ее помощью измеряются свойства и признаки, значение которых можно выразить числом (возраст, стаж работы, учебы и др.). Начало отсчета устанавливается произвольно.

Шкала отношений. Отличается от интервальной тем, что имеет нулевую точку отсчета, которая указывает на полное отсутствие измеряемого свойства.

Социометрическая методика – прием стандартизированных испытаний для измерения межличностных отношений в малых группах. Осуществляется путем постановки косвенных вопросов, отвечая на которые испытуемый производит последовательный выбор членов группы, предпочитаемых другим в некоторой ситуации.

Этот прием используется при изучении динамики внутренних отношений в разных возрастных группах (в дошкольных, школьных классах, студенческих группах и др.) для установления позиции индивидов, наличии замкнутых группировок, положительных, конфликтных или напряженных участков, степени групповой сплоченности, мотивационной структуры отношений. При этом учитывается не только количественная, но и качественная сторона выраженных в тексте предпочтений.

В зависимости от возрастного состава группы и специфики исследовательских задач применяются индивидуальные и групповые формы эксперимента, а также разнообразные варианты самих процедур исследования в виде экспериментальной игры, вербального, письменного, изобразительного теста, с использованием элементов проективной техники (выбор в действии, выбор товарища по парте, экспериментальная игра «секрет», экспериментальное сочинение пр.).

Методика позволяет определить положение испытуемого в системе межличностных отношений той группы, к которой он принадлежит. Исследование группы при помощи данной методики обычно проводится тогда, когда группа включает в себя не менее 10 человек и существует не менее одного года.

Перед началом исследования члены группы, собравшиеся вместе, получают инструкцию:

«Ваша группа (класс) существует уже давно. За это время вы, наверное, смогли неплохо узнать друг друга, и между вами сложились определенные личные и деловые отношения, симпатии и антипатии, уважение и неуважении друг к другу и т.п. не все, очевидно, складывалось гладко и образовавшиеся между вами отношения далеки, по-видимому, от идеала. С кем-то вам хорошо находиться в одной группе (классе), кто-то вас не очень устраивает и с ним вы хотели бы расстаться. Теперь представьте, что ваша группа начинает складываться сначала и каждому из вас предоставляется возможность вновь по своему желанию определить состав группы (класса). Ответьте в этой связи на следующие вопросы, записав свои ответы на отдельном листе бумаги. Его предварительно необходимо подписать, чтобы мы могли судить о том, кто и кого выбирает или отвергает.

1. Кого из членов вашей группы (класса) вы по своему желанию включили бы в состав новой группы (класса)? Запишите этих людей на листе бумаги под номером 1 в порядке предпочтения.

2. Кого из членов вашей вы, напротив, не хотели бы видеть в составе новой группы (класса)? Запишите их под номером 2 в порядке отклонения».

Социометрическая матрица

 

 

№ п/п	Фамилия выбираемого члена группы Фамилия выбирающего члена группы
	Иванов	+
	Петров		+
	Сидоров			+
	Егоров				+
	Свиридов					+
	Степанов						+
	Павлова							+
	Котова								+
	Вирко									+
	Количество полученных выборов (∑)
	Количество полученных отклонений (∑)

Рефрентометрия – методика, позволяющая выяснить степень значимости каждого члена группы для его товарищей по сообществу, выявить, с одной стороны тех, на чье мнение в данной общности ориентировано большинство ее членов, а с другой – тех, чья позиция по тому или иному вопросу практически всем безразлична.

Таким образом, рефрентометрическая методика так же, как и социометрия, направлена на анализ специфических межличностных предпочтений. В то же время слой межличностных отношений, характер которых выявляется с помощью рефрентометрической процедуры, качественно отличается от того, который является предметом анализа социометрической методики. Так, если, используя последнюю, мы обращаемся к системе отношений типа «симпатия – антипатия», то совокупность рефрентометрических выборов по группе позволяет нам анализировать значительно более глубинный слой межличностных отношений, опосредованных целями, задачами и содержанием групповой деятельности межиндивидуального общения, т.е. явно ценностными факторами.

Рефрентометрический метод включает две процедуры.

На предварительной (вспомогательной) с помощью опросного листа выявляются позиции (мнения, оценки, отношение) каждого члена группы по поводу значимого объекта, события или человека.

Вторая процедура выявляет лиц, позиция которых, отраженная в опросном листе, представляет наибольший интерес для других испытуемых. Все это вынуждает испытуемого проявлять высокую избирательность в отношении тех лиц в группе, чья позиция для него в данный момент наиболее актуальна.

Важной стороной рефренометрического метода является глубокая мотивированность поведения испытуемого, поглощенного возможностью ознакомиться с позицией, высказанной референтным для него лицом по поводу значимого объекта. Поэтому данный метод позволяет выявить мотивы межличностных выборов, предпочтений в группе.

Вместе с тем мера референтности (предпочтительности) субъекта определяется здесь косвенно, через проявление испытуемым интереса к позиции этого субъекта по поводу значимого объекта.

Данные, полученные с помощью референтного метода, обрабатываются математически и могут быть выражены графически.

Вопросы для самоконтроля:

1. Как вы понимаете термин «качественные» методы исследования? В чем их наиболее важные отличия от количественных?

2. В чем заключается сущность педагогического консилиума?

3. Какова методика использования метода обобщения независимых характеристик?

4. Что представляет собой диагностическая ситуация?

5. Какую информацию может получить исследователь, используя метод шкалирования?

6. Какие виды и типы шкал используются в исследованиях в социальной работе?

7. Каковы критерии надежности шкал и способы их проверки?

8. Какова сущность социометрического метода?

9. Какова методика использования социометрии?

10. В чем заключаются особенности использования рефрентометрии?