1. Уважаемые посетители форума ЭСПП!

    Для просмотра сообщений достаточно прокрутить данное сообщение, а для просмотра списка разделов - вызвать "Каталог".

    Для комментариев необходимо предварительно ознакомиться c Правилами Форума и пройти регистрацию!

    Если Вы зарегистрированы в ВКонтакте, воспользуйтесь функцией "Войти через ВКонтакте" (см. Инструкция по регистрации через ВКонтакте).
    Регистрация или вход на Форум через Фейсбук проходит через режим премодерации (одобрения Вашей учетной записи администраторами форума). 

    Если при входе на форум появляется сообщение об ошибке, попробуйте восстановить или сменить пароль, нажав здесь.

Экспертное шкалирование оценочных терминов

Тема в разделе 'Шмелев А.Г.', создана пользователем Шмелев А.Г., 7 янв 2018.

  1. Шмелев А.Г.

    Шмелев А.Г. Организатор Команда форума

    Коллеги, здравствуйте.

    Многим преподавателям, наверное, будет интересно познакомиться с результатами
    Экспертного опроса (n=57)


    image.jpg

    Опрос проведен в эти новогодние праздники в клубе КИТТ.
    Его цель - снабдить тренинг-проект PODNIMIS наиболее
    Точной шкалой оценочных терминов. Об этом проекте
    См сайт-этикетку клуба

    Www.testbytest.ru
  2. Магазанник В.Д.

    Магазанник В.Д. Активист

    Александр Георгиевич, здравствуйте! С Рождеством Вас!
    По поводу этого опроса. Помнится мне, в 70-е годы было несколько работ по сравнению субъективных оценок вероятности с объективными значениями. То есть испытуемым показывали некую частоту (скажем, 88 из 100), а они должны были оценить это одним из 5-6 (точно не помню) словесных определений: очень вероятно, весьма вероятно, вероятно, маловероятно, очень маловероятно. Результаты показали, что общая тенденция была к снижению высоких значений и к повышению низких. То есть если разделить весь диапазон на число предлагаемых оценок, то зависимость нелинейная, а S-образная.
  3. Хохлов Н.А.

    Хохлов Н.А. Администратор Команда форума

    Мне не совсем понятно, что означают эти баллы. Какая инструкция давалась экспертам?
  4. Шмелев А.Г.

    Шмелев А.Г. Организатор Команда форума

    Никита, здравствуйте.

    Инструкция такая: установите соотвествие между данным оценочным термином и баллом на 10-балльной шкале. Кстати любой участник КИТТ еще может выполнить эту 1-минутную процедуру. А вы лично с правами админа - тем более ;)


  5. Шмелев А.Г.

    Шмелев А.Г. Организатор Команда форума

    Валерий Дмитриевич, здравствуйте.

    Вы правы в том, что в общем виде эта ситуация принадлежит
    К классу проблем соответствия между качественными вербальными
    Категориями и субъективными представлениями о количественных
    шкалах.



  6. Тукачев Ю.А.

    Тукачев Ю.А. Модератор

  7. Шмелев А.Г.

    Шмелев А.Г. Организатор Команда форума

    Коллеги!

    Из 68 удалены 8 протоколов, по которым обнаружена низкая согласованность
    с оценками большинства (ниже 0,3). Вот как выглядит теперь рейтинг оценочных
    терминов:


    Шкала оценочных терминов.png


    По крайней мере теперь термин "слабо" поднялся по шкале немножко выше
    по сравнению с термином "плохо".


    Интересно, что среди 8 исключенных экспертов были двое, которые просто... перепутали полюса шкалы от 1 до 10. То есть их оценки были согласованными, но... со знаком минус.
    Впрочем, это почти постоянно происходит, по моим наблюдениям. Причины таковы:



    1) Люди НЕ читают инструкцию,
    2) Люди думают, что балл 1 - это самый высокий балл (ранг).


    Ваш АШ
    Последнее редактирование: 15 янв 2018 в 09:29