|
№ п/п | т | п | Всего | |||||||
— | ||||||||||
— | ||||||||||
— | ||||||||||
х. | ||||||||||
X,- X | -2 | — | ||||||||
(Ъ-хУ | ||||||||||
№ п/п | /я | п | Всего | |||||||
— | ||||||||||
— | ||||||||||
— | ||||||||||
Л | ||||||||||
У> -У | -2 | — | ||||||||
(У, -У)2 | ||||||||||
_ 69
12-8
= 0,44;
12-8
32(33-3)
= 0,44.
Статистический вывод. В обоих случаях коэффициенты конкордации равны, так как эксперты высказали одинаковое мнение.
Педагогический вывод. Эксперты выразили единое мнение по исследуемому вопросу.
Коэффициент конкордации резко меняет свое значение при увеличении числа экспертов и числа объектов исследования, т. е. коэффициент конкордации очень чувствителен к характеру экспертизы.
Приведем пример, используя исходные данные примера 3.13. Число экспертов увеличим до пяти, а число спортсменов — до четырех. В этом случае одинаковых экспертных оценок практи-
б Иачинская
161 чески не бывает. Используя данные, приведенные в табл. 3.19 и 3.20, составим табл. 3.21 и 3.22. На базе исходных данных рассчитаем новые коэффициенты конкордации.
Таблица 3.21
Мнения пяти экспертов о психической напряженности четырех фехтовальщиков на соревнованиях
№ п/п | т | п | Всего | |||
— | ||||||
— | ||||||
— | ||||||
— | ||||||
— | ||||||
Xl | ||||||
Xj-X | -2 | -2 | — | |||
(х,-х)2 |
Зс =
= 39, 2 = 39,0;
12-21 52(43-4)
= 0,168 = 0,17.
Таблица 3.22
Мнения пяти экспертов о психической напряженности четырех фехтовальщиков на тренировках
№ п/п | т | п | Всего | |||
— | ||||||
— | ||||||
— | ||||||
— | ||||||
— | ||||||
У; | ||||||
У/ -У | -1 | -3 | — | |||
(У, -У)2 |
_ 149 -- 0- 77 п. >>= — = 37,25 = 37,0,
12-35
_ п '
Статистический вывод. Коэффициент конкордации, оценивающий результат тренировок, более точен (W2 = 0,28), чем коэффициент конкордации, отражающий соревнования (W^ = 0,17). Оба коэффициента невысокие.
Педагогический вывод. Хотя коэффициенты конкордации указывают на то, что мнения экспертов более согласованны на тренировках, чем на соревнованиях, эффект от данной экспертизы очень низок, так как оба коэффициента конкордации близки к нулю.
Ранговое построение — это вид экспертизы, когда объекты исследования располагаются в порядке предпочтения. Для того чтобы выявить искомое предпочтение, необходимо каждому эксперту назначить каждому объекту такое количество условных единиц, которые заслуживает данный объект. Затем все единицы суммируются по объектам, а найденные суммы позволяют установить ранговое, т.е. порядковое, построение.
Пример 3.14. Четыре эксперта (т = 4) оценивают композиции семи пар фигуристов (п = 7). Осуществите ранговое построение фигуристов.
Исходные данные по назначенным баллам в соответствии с пятибалльной системой представлены в табл. 3.23.
Статистический вывод. Ранговое построение представлено в последней строке табл. 3.23.
Педагогический вывод. Семь пар фигуристов располагаются по предпочтению в следующем порядке: пятая пара — I место; третья и четвертая пары делят между собой II и III места; затем следует седьмая пара — IV место; первая пара — V место, шестая пара — VI место и вторая пара — VII место.
Метод «мозговой атаки» (brainstorming) применяют для генерации новых идей. Новые идеи нужны не только тогда, когда наука накопила перспективные наблюдения и появилась возможность открытия новых направлений, способов мышления, решения сложных проблем и т.д., но и тогда, когда устаревшую мето-
Таблица 3.23 Мнения экспертов о композициях семи пар фигуристов
№ | m | |||||||
п/п | ||||||||
-. з | ||||||||
Всего | ||||||||
Ранговое построение | 2,5 | 2,5 |
163 дику следует усовершенствовать, укомплектовать команду перспективных спортсменов, отобрать комплект тестов для оценки физического состояния детей разного возраста, решить вопрос об открытии спортивного клуба и т.д. В этих случаях необходимо изучать методики и принимать нестандартное решение.
Идея метода «мозговой атаки» заключается в проведении групповой экспертизы по конкретной проблеме. Эксперты (оптимальное число 4...8 человек) должны быть профессионалами высшей категории, которые способны обсуждать нестандартные идеи других специалистов.
Рассмотрим процесс работы данного метода:
- группа экспертов работает совместно (в установленный день и час, в одном помещении);
- работой руководит координатор — специалист по работе с кадрами, который приглашает экспертов, объясняет им задачу экспертизы, собирает их мнения, ведет протокол заседания экспертов, оформляет полученную информацию, добивается окончательного решения экспертизы;
- эксперты по очереди высказывают свои мнения относительно поставленной задачи в течение строго отведенного времени;
- эксперт вправе повторить чужое мнение, если оно совпадает с его собственным, высказывать прямо противоположное мнение, пропустить ответ и т.п.;
- все высказанные суждения экспертов отражаются в протоколе в порядке их оглашения;
- при необходимости разрешено назначать дополнительное время или по согласованию со всеми экспертами изменять первоначально установленное время ответов;
- проводится общее обсуждение полученных сведений, где предпринимается попытка сформулировать общее мнение экспертизы: если эта попытка удачная, то полученное общее мнение является результатом работы экспертов методом «мозговой атаки» и отражается в протоколе; если такая попытка неудачная, то результат экспертизы также заносится в протокол совещания экспертов.
Метод «мозговой атаки» связан с определенными трудностями: надо найти квалифицированного координатора, экспертов, определить процедуру их совместной работы, лимит времени и т.д. Ограничение во времени при ответе имеет строгую и целенаправленную функцию в экспертизе: эксперту не разрешается анализировать и обсуждать возникшие проблемы, он вынужден высказывать интуитивное решение, т. е. новое мнение. В этом и состоит метод «мозговой атаки».
Таким образом, чем меньше времени отводится на ответ, тем больше шансов получить мнение эксперта, основанное на его интуиции.
Приведенная выше модель «мозговой атаки», или brainstorming, основная, но далеко не единственная. Существуют десятки вариантов проведения такого метода, предусматривающие:
- не одного, а двух координаторов, которые ведут между собой диспут и имеет противоположные точки зрения на исследуемую проблему. Эксперты вступают в диалог, принимая любую сторону, или высказывая вообще иную точку зрения (время высказываний не ограничено);
- заочное высказывание экспертов с подробным разъяснением оснований для их выводов;
- организацию диспута среди экспертов, мнения которых фиксируются в протоколах, и т.д.
В любом случае результатом работы методом «мозговой атаки» является протокол совещания экспертов.
Пример 3.15. Обсуждается проблема создания спортивной программы для внеклассной работы с учениками частной школы. Приглашены пять экспертов — специалисты по организации внеклассной спортивной работы государственных общеобразовательных школ.
Проблема и способ обсуждения приведены во вступительной части протокола. Мнения экспертов отражены в протоколе, а общий вывод — в заключительной части протокола.
ПРОТОКОЛ
заседания экспертов по созданию спортивной программы для школьников средних классов во внеклассное время
Представители:
Координатор совещания А — учитель физического воспитания школы.
1-й эксперт В — учитель физического воспитания средней школы № 1.
2-й эксперт С — учитель физического воспитания средней школы № 2.
3-й эксперт D — руководитель Центра по спортивному тестированию детей.
4-й эксперт Е — преподаватель педагогического вуза факультета ФКС.
5-й эксперт F — руководитель спортивного кружка при Доме творчества детей.
Проблема обсуждения', определение общих положений по созданию спортивной программы для занятий во внеклассное время со школьниками средних классов, в частности организация секций и кружков в школе, которые были бы интересны многим ученикам.
Число секций — не более трех. Общее количество учеников — до 100 человек. В распоряжении школы имеются следующие спортив-
165 ные помещения и сооружения: спортзал, гимнастический зал, зал тренажеров, летний стадион.
Процедура brainstorming: пять экспертов высказывают свои предложения в такой последовательности: В, С, D, E, F. На каждый ответ отводится 0,5 мин. Было получено по пять ответов от каждого эк-
Таблица 3.24
Дата добавления: 2015-10-21; просмотров: 60 | Нарушение авторских прав
<== предыдущая страница | | | следующая страница ==> |
Обработка мнений экспертов | | | Работа экспертов |