сделать домашней  добавить в избранное  карта сайта RSS
Имя 
Пароль  забыли?
Присоединяйтесь!

Новые материалы

   Названы самые высокооплачиваемые вакансии в Башкирии
   Не все профессии равны. Вчерашние школьники идут в телевизионщики и PR
   Новочебоксарские безработные граждане обучаются востребованным профессиям
   Где в Уфе заработать 100 тысяч рублей в месяц
   Сколько в среднем получают владимирские врачи?



Форумы на нашем сайте

Форумы Оценка персонала Тесты, методики, ключи… и ошибки в них

Опции:
Ответить Открытие новой темы
Типатов Николай
Тесты, методики, ключи… и ошибки в них
об ошибках в ключах к тестам - обмен опытом
Перейти в начало страницы Перейти в конец страницы
+ Ответить
Типатов Николай
Re: (1) Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Типатов Николай от 03.02.2010 17:02:
об ошибках в ключах к тестам - обмен опытом
Коллеги, добрый день.

Тесты, которым мы доверяем…
А ведь иногда со мной переставали общаться, когда я говорил о том, что в методиках допущены ошибки. Еще бы, коллега несколько лет применял методику и даже не мог себе позволить усомнится в «священной корове»…
Почему многие наши коллеги берут тестовые методики на веру?
· не могут даже позволить себе сомнения (по аналогии как в советские времена большинство людей свято верили тому, что написано в газетах);
· не умеют перепроверять ключи в методиках (так как это больше под силу технарям, математикам… а не гуманитариям);
· «а вот нечего использовать общедоступные методики и ключи – нужно ПОКУПАТЬ тесты и тогда будет все в порядке»…

---------------------------

Так уж я устроен. Я делюсь.
Очередная статья, которую я пишу -
· о конкретных ошибках в конкретных популярных тестовых методиках,
· об алгоритме, как самому распознавать эти ошибки, перепроверяя ключи к методикам

Приведу только один пример об ошибках в ключах к методике. О других ошибках подробнее будет в статье. В то же время, Вы, HR-коллеги, наверняка тоже встречались с такими ошибками. Имеет смысл поделиться опытом и рассказать о них в «общую копилку HR».

1. Итак, одна из последних методик, которую я запускал в режиме онлайн - методика диагностики уровня эмоционального выгорания В. В. Бойко.
По ключам: показатель выраженности каждого симптома колеблется в пределах от 0 до 30 баллов, но в одной из шкал находим сразу 2 ошибки:
· ответ на 72 вопрос повторяется дважды (а этого не может быть, каждый ответ принадлежит к конкретной шкале)
· максимальная сумма баллов в одной из шкал равна 33 (а не 30, как заявлено в условиях)




2. Выявляем, что ответ на 71 вопрос нигде не учтен, вместо него как раз дважды упоминается ответ на 72-й вопрос.
3. Вес одного из вопросов указан неправильно. Каждый вариант ответа предварительно оценен компетентными судьями тем или иным числом баллов - указывается в "ключе" рядом с номером суждения в скобках. Это сделано потому, что признаки, включенные в симптом, имеют разное значение в определении его тяжести. Максимальную оценку - 10 баллов получил от судей признак, наиболее показательный для симптома.

Судя по предыдущим шкалам чаще всего веса ответов распределяются как:
· 1 ответ в 10 баллов
· 2 ответа в 5 баллов
· 2 ответа в 3 балла
· 2 ответа в 2 балла
делаем вывод - в нашей найденной ошибке неправильно указан вес одного из ответов в 5 баллов. Это один из вопросов под номером: 11, 47 или 59.

Смотрим саму шкалу и ключи. Очевидно, что вопрос под номером 11 должен быть с весом 2, а не 5. Вопросы № 47 и 59 более показательны для этой шкалы.

Личностная отстраненность (деперсонализация):
+ 11 (2),+ 23 (3).+ 35 (3),+ 47 (5),+ 59 (5),+ 71 (2),+ 83 (10)
11. Я откровенно устал от человеческих проблем, с которыми приходится иметь дело на работе.
23. Общение с партнерами побудило меня сторониться людей.
35. Партнерам по работе отдаешь внимания и заботы больше, чем получаешь от них признательности.
47. По работе встречаются настолько неприятные люди, что невольно желаешь им чего-нибудь плохого.
59. Иногда иду на работу с тяжелым чувством: как все надоело, никого бы не видеть и не слышать.
71. Работа с людьми (партнерами) очень разочаровала меня.
83. Работа с людьми плохо повлияла на меня как профессионала - обозлила, сделала нервным, притупила эмоции.

---------------------------
Итак, если вы используете данный тест – внесите поправки в ключи.

Почему появляются такие ошибки? Как их можно выявить?
Высказать свое мнение об ошибках в тестах или привести свой пример вы можете здесь
Перейти в начало страницы Перейти в конец страницы
+ Ответить
Валерий Окулич-Казарин
Re: Re: (1) Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Типатов Николай от 04.02.2010 08:36:
Коллеги, добрый день.

Тесты, которым мы доверяем…
А ведь иногда со мной переставали общаться, когда я говорил о том, что в методиках допущены ошибки. Еще бы, коллега несколько лет применял методику и даже не мог себе позволить усомнится в «священной корове»…
Почему многие наши коллеги берут тестовые методики на веру?
· не могут даже позволить себе сомнения (по аналогии как в советские времена большинство людей свято верили тому, что написано в газетах);
· не умеют перепроверять ключи в методиках (так как это больше под силу технарям, математикам… а не гуманитариям);
· «а вот нечего использовать общедоступные методики и ключи – нужно ПОКУПАТЬ тесты и тогда будет все в порядке»…

---------------------------

Так уж я устроен. Я делюсь.
Очередная статья, которую я пишу -
· о конкретных ошибках в конкретных популярных тестовых методиках,
· об алгоритме, как самому распознавать эти ошибки, перепроверяя ключи к методикам

Приведу только один пример об ошибках в ключах к методике. О других ошибках подробнее будет в статье. В то же время, Вы, HR-коллеги, наверняка тоже встречались с такими ошибками. Имеет смысл поделиться опытом и рассказать о них в «общую копилку HR».

1. Итак, одна из последних методик, которую я запускал в режиме онлайн - методика диагностики уровня эмоционального выгорания В. В. Бойко.
По ключам: показатель выраженности каждого симптома колеблется в пределах от 0 до 30 баллов, но в одной из шкал находим сразу 2 ошибки:
· ответ на 72 вопрос повторяется дважды (а этого не может быть, каждый ответ принадлежит к конкретной шкале)
· максимальная сумма баллов в одной из шкал равна 33 (а не 30, как заявлено в условиях)




2. Выявляем, что ответ на 71 вопрос нигде не учтен, вместо него как раз дважды упоминается ответ на 72-й вопрос.
3. Вес одного из вопросов указан неправильно. Каждый вариант ответа предварительно оценен компетентными судьями тем или иным числом баллов - указывается в "ключе" рядом с номером суждения в скобках. Это сделано потому, что признаки, включенные в симптом, имеют разное значение в определении его тяжести. Максимальную оценку - 10 баллов получил от судей признак, наиболее показательный для симптома.

Судя по предыдущим шкалам чаще всего веса ответов распределяются как:
· 1 ответ в 10 баллов
· 2 ответа в 5 баллов
· 2 ответа в 3 балла
· 2 ответа в 2 балла
делаем вывод - в нашей найденной ошибке неправильно указан вес одного из ответов в 5 баллов. Это один из вопросов под номером: 11, 47 или 59.

Смотрим саму шкалу и ключи. Очевидно, что вопрос под номером 11 должен быть с весом 2, а не 5. Вопросы № 47 и 59 более показательны для этой шкалы.

Личностная отстраненность (деперсонализация):
+ 11 (2),+ 23 (3).+ 35 (3),+ 47 (5),+ 59 (5),+ 71 (2),+ 83 (10)
11. Я откровенно устал от человеческих проблем, с которыми приходится иметь дело на работе.
23. Общение с партнерами побудило меня сторониться людей.
35. Партнерам по работе отдаешь внимания и заботы больше, чем получаешь от них признательности.
47. По работе встречаются настолько неприятные люди, что невольно желаешь им чего-нибудь плохого.
59. Иногда иду на работу с тяжелым чувством: как все надоело, никого бы не видеть и не слышать.
71. Работа с людьми (партнерами) очень разочаровала меня.
83. Работа с людьми плохо повлияла на меня как профессионала - обозлила, сделала нервным, притупила эмоции.

---------------------------
Итак, если вы используете данный тест – внесите поправки в ключи.

Почему появляются такие ошибки? Как их можно выявить?
Высказать свое мнение об ошибках в тестах или привести свой пример вы можете здесь

Николай, привет!

Нужна помощь, а именно: нужна "рубашка" для простого теста на 5-10 вопросов на каждый из которых приходится по 4-5 ответов. Ответам нужно присваивать различный вес. Тест по "Менеджменту" хочу составить сам и вывесить для бесплатного использования в Интернете.

Как я понял, Вы специалист в этих вопросах.

Заранее благодарю. Валерий, v-kazarin@mail.ru

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Валерий Окулич-Казарин от 27.10.2010 19:17:

Николай, привет!

Нужна помощь, а именно: нужна "рубашка" для простого теста на 5-10 вопросов на каждый из которых приходится по 4-5 ответов. Ответам нужно присваивать различный вес. Тест по "Менеджменту" хочу составить сам и вывесить для бесплатного использования в Интернете.

Как я понял, Вы специалист в этих вопросах.

Заранее благодарю. Валерий, v-kazarin@mail.ru

Я написал Николаю Типатову, он обещал ответить Вам в личку. Николай Типатов не появляется больше у нас на форуме, поскольку он не имеет возможности давать ссылки на свой сайт. И теперь при каждой возможности жалуется, что его обидели у нас на сайте)

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Типатов Николай
Re: Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Типатов Николай от 03.02.2010 17:02:
об ошибках в ключах к тестам - обмен опытом

>>жалуется, что его обидели у нас на сайте)

Обиделся?! Жалуюсь?

1. Эдуард, почитай кто такой обиженный

2. У тебя свои условия, у меня свои, они не совпали, я сделал свой выбор. Ты ведь согласен, что я свободный человек и имею свой выбор?

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 27.10.2010 19:42:

Я написал Николаю Типатову, он обещал ответить Вам в личку. Николай Типатов не появляется больше у нас на форуме, поскольку он не имеет возможности давать ссылки на свой сайт. И теперь при каждой возможности жалуется, что его обидели у нас на сайте)

Николай, вы мне в скайпе за 5 секунд успели все обиды высказать: про то, что у нас нельзя ссылки размещать. Вы наши последние разгноворы только с этого и начинали. И кто вы после этого? Обиженный.

Я совершенно искренее хотел вам помочь, скинул ссылку на обсуждение, вы же вместо простой благодарности вылили на меня свои претензии.

Сделали свой выбор - всего хорошего.

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 27.10.2010 19:58:

Николай, вы мне в скайпе за 5 секунд успели все обиды высказать: про то, что у нас нельзя ссылки размещать. Вы наши последние разгноворы только с этого и начинали. И кто вы после этого? Обиженный.

Я совершенно искренее хотел вам помочь, скинул ссылку на обсуждение, вы же вместо простой благодарности вылили на меня свои претензии.

Сделали свой выбор - всего хорошего.

кстати сказать, Николай. если бы вы имели чуть более терпения, то могли бы меня дослушать: у нас компании сейчас свободно размещают свою информацию: статьи, пресс-релизы, услуги. Со ссылками и абсолютно бесплатно

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Валерий Окулич-Казарин
Re: Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 27.10.2010 20:56:

кстати сказать, Николай. если бы вы имели чуть более терпения, то могли бы меня дослушать: у нас компании сейчас свободно размещают свою информацию: статьи, пресс-релизы, услуги. Со ссылками и абсолютно бесплатно

Доброе утро, Эдуард!

Зато терпения вылушать Вас о свободном размещении информации хватит у меня.

 

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Валерий Окулич-Казарин от 28.10.2010 08:53:

Доброе утро, Эдуард!

Зато терпения вылушать Вас о свободном размещении информации хватит у меня.

 

Валерий, вся необходимая информация в прилагаемом файле - если устраивает, скидывайте заявку


Прикрепленный файл: Условия размещения информации о компаниях.doc
Перейти в начало страницы Перейти в конец страницы
+ Ответить
Валерий Окулич-Казарин
Re: Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 28.10.2010 08:57:

Валерий, вся необходимая информация в прилагаемом файле - если устраивает, скидывайте заявку

Спасибо, Эдуард!!!

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Re: Re: Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Валерий Окулич-Казарин от 28.10.2010 09:03:

Спасибо, Эдуард!!!

Валерий, а бизнес-тренер - это у вас имя, отчество или фамилия?)

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Валерий Окулич-Казарин
Re: Re: Re: Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 28.10.2010 12:54:

Валерий, а бизнес-тренер - это у вас имя, отчество или фамилия?)

Добрый день, Эдуард!

Имя - Валерий, фамилия- Казарин.

Бизнес-тренер - это либо отчетсво, либо род занятий.

Если нельзя, то уберу. ОК?

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Бабушкин Эдуард
Тесты, методики, ключи… и ошибки в них
Ответ на сообщение Бабушкин Эдуард от 28.10.2010 12:54:

Валерий, а бизнес-тренер - это у вас имя, отчество или фамилия?)

ну вообщето поле ФИО профиля подразумевает наполнение его соответствующей информацией. Я не хочу вам запрещать размещение информации типа; д.п.н. и бизнес тренер, но рекомендую указать только то, что данное поле предполагает

Перейти в начало страницы Перейти в конец страницы
+ Ответить
Ответить Открытие новой темы

Тема закрыта для добавления сообщений!

Share |

 


Поиск в форумах
Примеры запросов: "уход за ребенком", "аттестация персонала", "ассессмент OR assessment"

О проекте      Реклама       Подписка       Контакты       Rambler's Top100 Яндекс цитирования ©2000-2011, HRM