Советы для учителей, тренеров и методистов, как составлять тесты, которые проверяют знания и работают на учебный результат.
Поделюсь самыми частыми ошибками, которые совершают методисты, составляя тесты. И расскажу, как их исправить.
Ошибка 1: Не знаем, что проверяем
Мы предлагаем учащимся решить тест, чтобы проверить, какую информацию из уроков они запомнили. Это значит, что каждый вопрос теста должен работать на учебные цели и проверять значимую информацию, а не быть вопросом ради вопроса.
Ошибка 2. Неоднозначный для понимания вопрос
Формулировка условия или вопроса должна звучать ясно и однозначно. Иначе мы не сможем проверить знания, а учащийся будет смущен или даже начнет сомневаться в компетентности эксперта.
Совет
В формулировках вопросов теста не используйте частицу НЕ. Часто ее не замечают, и учащийся выбирает неверный ответ.
Ошибка 3. Сложная формулировка вопроса
Иногда вопросы теста сформулированы так, что учащемуся приходится прочесть несколько раз, чтобы уловить суть. Такой тест неэффективен. Лучше упростить вопрос, оставив необходимый минимум научности. Особенно если речь идет об обучении новичков.
Ошибка 4. Правильный ответ зависит от субъективной оценки или мнения
Такие вопросы больше похожи на психологические опросники, где нет и не должно быть одного правильного ответа. Лучше разобраться, какие именно знания вы хотите проверить.
Ошибка 5. Верный вариант слишком очевидный
В этом случае дистракторы могут выглядеть неправдоподобно. Например, неправильные варианты могут быть намного короче, чем правильный вариант, звучать слишком просто, содержать ненастоящие слова или понятия.
Совет
Избегайте и другой крайности, когда варианты ответов составлены так, чтобы застать ученика врасплох. Помните, что в этом случае вы проверяете не знания, а смекалку, и это вряд ли ваша учебная задача.
Ошибка 6. Неверная форма слов
Формулируйте варианты ответа так, чтобы они были в единой грамматической форме и едином стиле. Важно, чтобы все варианты были одинаково привлекательны для того, кто не знает правильный ответ.
Ошибка 7. Правильный ответ можно угадать
Когда составляется серия последовательных вопросов по теме, есть риск, что правильные ответы можно будет вычислить из окружающих вопросов и ответов к ним.
Кроме того, существуют варианты ответов, которые взаимоисключают друг друга. В таком случае учащийся скорее не обратится к знаниям по предмету, а попробует угадать ответ.
Ошибка 8. Большинство правильных ответов находятся посередине
Когда мы пытаемся разместить правильный ответ среди дистракторов, есть соблазн поставить его посередине, чтобы он не был самым первым, но и не последним.
Выбирайте разное положение правильного ответа, чтобы проверить знания и помешать учащемуся угадывать ответ.
Ошибка 9. Несколько вариантов ответов являются частично или полностью правильными
В этом случае лучше предоставить множественный выбор, чтобы учащийся мог отметить несколько верных вариантов.
Ошибка 10. «Все перечисленное верно», «ни один из перечисленных ответов не верен»
Иногда педагоги и методисты прибегают к таким формулировкам дистракторов, как «все вышеперечисленное верно», «ни один из вышеперечисленных вариантов не верен» или «все верны, кроме…» и подобным им. Лучше избегать таких формулировок, потому что они вносят путаницу и не помогают проверить знания студента.
Советы для учителей, тренеров и методистов, как составлять тесты, которые проверяют знания и работают на учебный результат.
Поделюсь самыми частыми ошибками, которые совершают методисты, составляя тесты. И расскажу, как их исправить.
Ошибка 1: Не знаем, что проверяем
Мы предлагаем учащимся решить тест, чтобы проверить, какую информацию из уроков они запомнили. Это значит, что каждый вопрос теста должен работать на учебные цели и проверять значимую информацию, а не быть вопросом ради вопроса.
Ошибка 2. Неоднозначный для понимания вопрос
Формулировка условия или вопроса должна звучать ясно и однозначно. Иначе мы не сможем проверить знания, а учащийся будет смущен или даже начнет сомневаться в компетентности эксперта.
Совет
В формулировках вопросов теста не используйте частицу НЕ. Часто ее не замечают, и учащийся выбирает неверный ответ.
Ошибка 3. Сложная формулировка вопроса
Иногда вопросы теста сформулированы так, что учащемуся приходится прочесть несколько раз, чтобы уловить суть. Такой тест неэффективен. Лучше упростить вопрос, оставив необходимый минимум научности. Особенно если речь идет об обучении новичков.
Ошибка 4. Правильный ответ зависит от субъективной оценки или мнения
Такие вопросы больше похожи на психологические опросники, где нет и не должно быть одного правильного ответа. Лучше разобраться, какие именно знания вы хотите проверить.
Ошибка 5. Верный вариант слишком очевидный
В этом случае дистракторы могут выглядеть неправдоподобно. Например, неправильные варианты могут быть намного короче, чем правильный вариант, звучать слишком просто, содержать ненастоящие слова или понятия.
Совет
Избегайте и другой крайности, когда варианты ответов составлены так, чтобы застать ученика врасплох. Помните, что в этом случае вы проверяете не знания, а смекалку, и это вряд ли ваша учебная задача.
Ошибка 6. Неверная форма слов
Формулируйте варианты ответа так, чтобы они были в единой грамматической форме и едином стиле. Важно, чтобы все варианты были одинаково привлекательны для того, кто не знает правильный ответ.
Ошибка 7. Правильный ответ можно угадать
Когда составляется серия последовательных вопросов по теме, есть риск, что правильные ответы можно будет вычислить из окружающих вопросов и ответов к ним.
Кроме того, существуют варианты ответов, которые взаимоисключают друг друга. В таком случае учащийся скорее не обратится к знаниям по предмету, а попробует угадать ответ.
Ошибка 8. Большинство правильных ответов находятся посередине
Когда мы пытаемся разместить правильный ответ среди дистракторов, есть соблазн поставить его посередине, чтобы он не был самым первым, но и не последним.
Выбирайте разное положение правильного ответа, чтобы проверить знания и помешать учащемуся угадывать ответ.
Ошибка 9. Несколько вариантов ответов являются частично или полностью правильными
В этом случае лучше предоставить множественный выбор, чтобы учащийся мог отметить несколько верных вариантов.
Ошибка 10. «Все перечисленное верно», «ни один из перечисленных ответов не верен»
Иногда педагоги и методисты прибегают к таким формулировкам дистракторов, как «все вышеперечисленное верно», «ни один из вышеперечисленных вариантов не верен» или «все верны, кроме…» и подобным им. Лучше избегать таких формулировок, потому что они вносят путаницу и не помогают проверить знания студента.
Разработка тестов
по учебной дисциплине
Методические рекомендации
для преподавателей
Методические рекомендации содержат
основные требования к разработке тестов для проведения внутреннего аудита
качества профессиональной подготовки обучающихся, образцы тестовых заданий,
перечень типичных ошибок, допускаемых преподавателями при составлении тестов. Предназначены
для преподавателей – составителей тестов. Методические рекомендации могут быть
полезны при разработке тестов для обучающихся учреждений начального, среднего и
высшего профессионального образования.
СОДЕРЖАНИЕ
Введение
- Педагогический
тест как контрольно-измерительный материал - Этапы
и общие требования к разработке теста - Виды
тестовых заданий - Типичные
ошибки, допускаемые при составлении вопросов к тесту - Внутренняя
экспертиза теста - Оформление
тестового материала и подготовка его к компьютерному варианту тестирования
Словарь
терминов
Список
рекомендуемой литературы
ВВЕДЕНИЕ
В связи с
модернизацией современного высшего образования, с введением ФГОС третьего
поколения, возрастают требования к повышению качества педагогического контроля,
ведется поиск его лучших форм и методов, его экономичности, оптимизации. Оценка
качества образования также на сегодняшний день является наиболее приоритетной
проблемой в образовательной деятельности. Новый стандарт предполагает также
переход на рейтинговую систему контроля и оценки знаний слушателей, в связи с
этим большое значение приобретает измерение результатов усвоения программного
материала.
Мониторинг
качества образовательной системы предполагает, прежде всего, регулярный сбор и
обработку информации об уровне профессиональных знаний, умений студентов. Одним
из основных инструментов оценки качества уровня обученности студентов является
тестирование вообще и компьютерное тестирование в частности, позволяющие дать
достаточно объективную нормативно-ориентированную оценку учебных достижений
обучающихся.
Каким содержанием наполнено понятие
«педагогический тест»? Какие классификации педагогических тестов существуют, и
какие критерии применяются для оценки качества педагогических тестов? В чем
преимущество тестовых форм контроля в процессе обучения? Что понимается под
термином «тестовое задание», и какие правила необходимо соблюдать при
составлении тестовых заданий? Как составить тестирование обучающихся при
подготовке к внутреннему тестированию в рамках внутривузовской проверки
качества профессиональной подготовки? Ответы на эти вопросы, а также конкретные
образцы тестовых заданий разного вида представлены в данном учебно-методическом
издании.
Педагогический
тест как контрольно-измерительный материал
Педагогический тест
является наиболее распространенным контрольно-измерительным материалом в современном
образовательном процессу в вузе. Педагогический тест — это совокупность
заданий, отобранных на основе научных приемов для педагогического измерения в
тех или иных целях.
Педагогический тест рассматривается как система, как
упорядоченное множество тестовых заданий. Задания — это те элементы,
«кирпичики» из которых составляется педагогический тест.
Почему именно тестирование
становится все более массовым явлением в процессе педагогического оценивания?
Опыт
использования тестов в качестве инструмента для оценивания позволяет выделить
многие его преимущества, в частности, тест:
· это
более качественный и объективный способ оценивания, что достигается путем
стандартизации процедуры проведения (отсутствие субъективной оценки на всех
этапах тестирования) и стандартизации заданий;
· более
емкий инструмент – показатели тестов ориентированы на измерение степени,
определение уровня усвоения ключевых понятий, тем и разделов учебной
программы, умений, навыков, а не на констатацию наличия у обучающихся определенной
совокупности усвоенных знаний;
· позволяют
включить в экзаменационную работу гораздо большее количество заданий;
· это
более «мягкий» инструмент, они ставят всех испытуемых в равные условия,
используя единую процедуру и единые критерии оценки, что приводит к снижению
нервного напряжения;
· широкий
инструмент – и с точки зрения интервала оценивания;
· более
эффективен с экономической точки зрения, так как при тестировании основные
затраты приходятся на составление качественного инструментария.
Было бы конечно
большой ошибкой считать, что педагогическое тестирование свободно от
недостатков. Применение педагогических тестов – эта та область знаний и умений,
которая поддается формализации. Но далеко не все учебные дисциплины или их
разделы формализуемы.
К недостаткам тестов следует отнести то, что тестовый
контроль лишает возможности слушателей самостоятельно формулировать ответы,
отсутствует возможность проявить свою индивидуальность, творчество.
Но
самый большой недостаток – это сложность разработки хороших тестовых заданий,
хотя на первый взгляд кажется, что с этим никаких трудностей быть не должно,
ведь тестовые задания разрабатываются преподавателями, хорошо знающими свой
предмет. На самом деле разработка педагогических тестов требует высокой
педагогической квалификации, научной компетенции и большого методического опыта
составления тестов преподавателем. В этой связи необходимо самое пристальное
внимание уделять повышению качества тестовых заданий.
При проведении тестирования учитываются три
критерия качества теста: надежность, валидность и объективность.
Надежность теста – критерий отражающий точность диагностических
измерений, а также устойчивость результатов теста к действию посторонних
случайных факторов. Надежность педагогического теста позволяет при его
применении в разных группах обучающихся с близким уровнем подготовки получать
примерно одинаковые результаты. Результат педагогического тестирования обычно
подвержен влиянию большого количества неучитываемых факторов (например,
эмоционального состояния и утомления, уровня мотивированности тестируемых и
др.). Любое изменение ситуации тестирования усиливает влияние одних и ослабляет
воздействие других факторов на результат теста.
В самом широком смысле надежность педагогического
теста – это характеристика того, в какой степени выявленные у слушателей
различия в уровне знаний по тестовым результатам являются отражением
действительных различий в измеряемых свойствах и в какой мере они могут быть
приписаны случайным ошибкам.
В более узком смысле, связанном с непосредственными
методами определения характеристик надежности, под этой группой показателей
понимают степень согласованности результатов теста, получаемых при первичном и
повторном его применении, по отношению к тем же тестируемым в различные моменты
времени, с использованием разных (но сопоставимых по характеру) наборов
тестовых заданий или при других измененных условиях тестирования.
Важнейшим средством повышения надежности
педагогических тестов является стандартизация процедуры тестирования.
При строгой регламентации процедуры тестирования (обстановка и условия работы
слушателей, характер инструкции, временные ограничения, способы и особенности
контакта со слушателями, порядок предъявления тестовых задач и т.д.)
существенно уменьшается дисперсия ошибки и повышается надежность теста. При
прочих равных условиях надежность теста зависит от числа заданий (длины теста)
– чем длиннее тест, тем он надежнее.
Валидность теста – это критерий, который определяет, что тест
измеряет и насколько хорошо он это делает. В понятии валидности отражается идея
соответствия педагогического тестирования его цели. Интуитивно все понимают,
что одно и то же можно проверять по разному. Отсюда возникает вопрос поиска
наиболее подходящего (валидного) средства, полнее, чем другие, удовлетворяющего
требованиям качества проверки.
В педагогических тестах наиболее важным типом
валидности является валидность по содержанию. При проверке
содержательной валидности речь идет об определении степени соответствия
содержания тестовых заданий содержанию учебного предмета, успешность усвоения
которого тестируется, то есть решается вопрос о том, в какой степени задачи
данного диагностического контроля успеваемости репрезентативны для содержания
учебной программы.
Для обеспечения валидности педагогического теста
требу-ется систематическая проверка того, насколько задания теста охватывают
все главные аспекты учебной программы и в правильной пропорции. Тест легко
перенасытить теми аспектами учебной программы, по которым легче составить
объективные задания. Поэтому рассматриваемое содержание следует фиксировать
заранее, а не после того как тест уже составлен. Правильно построенные
педагогические тесты должны соответствовать не только предмету обучения, но и
его задачам. Содержание, следовательно, необходимо определять достаточно
широко, включая в него помимо знания фактического материала такие важнейшие
цели обучения, как применение изученных принципов и интерпретацию данных.
Валидность также обеспечивается распределением тестовых заданий различной трудности
пропорционально уровню трудности учебного материала.
Валидность по содержанию закладывается в тест уже при
отборе соответствующих заданий. Для педагогических тестов подготовке их заданий предшествует
полная систематизированная проверка соответствующих учебников и учебных
программ, а также консультации со специалистами по данному предмету. На основе собранной таким путем информации
составляется спецификация теста для тех, кто будет составлять задания. В
спецификации указываются тестируемые области содержания (темы), задачи
(процессы) обучения, а также относительное значение каждой темы и процесса. На
этой основе по каждой теме устанавливается число заданий различных типов.
(Более подробно вопрос составления спецификации будет рассмотрен ниже).
Надежным средством обеспечения валидности теста
является экспертная оценка тестовых материалов, которая проводится экспертами
из числа наиболее квалифицированных специалистов-предметников и специалистов в
области тестирования. Конкретные задания оцениваются экспертами по принципу их
близости к реальным требованиям. Эксперты выносят суждение о том, охватывает ли
тест репрезентативную выборку конкретных навыков и знаний исследуемой области
обучения.
Валидность по содержанию является адекватным средством
оценки педагогических тестов. Она позволяет установить, охватывает ли тест
репрезентативную выборку конкретных навыков и знаний и свободно ли выполнение
теста от влияния посторонних факторов.
Следующий важный критерий качества педагогического
тестирования — объективность, то есть независимость получения и
интерпретации диагностических данных от преподавателя. Объективность
педагогического тестирования является важным синтезирующим критерием,
включающим в себя идеи надежности, валидности, кроме того, ряд аспектов педагогического
и этического характера.
Педагогический аспект повышения объективности
педагогического тестирования проявляется в использовании стандартных тестовых
программ, технических средств контроля, в первую очередь использование
компьютерных технологий в организации проведения педагогического тестирования.
Этический аспект объективности охватывает широкую
область морального регулирования. Результаты педагогического теста могут
оказаться полностью или частично неадекватными поставленной цели, если допускается
списывание, подсказки со стороны слушателей, репетиторство (но не всякое, а
«натаскивание»), снисходительность или, наоборот, чрезмерная требовательность
преподавателей.
Таким образом, результаты педагогического теста
зависят от соблюдения всех вышеназванных требований, которые обеспечивают
получение адекватных и достоверных оценок знаний слушателей.
2.
Этапы составления и общие требования к разработке теста
В данном разделе представлены
основные этапы составления теста.
В разработке педагогических тестов можно выделить три
этапа: планирование, написание заданий и анализ заданий (см. Рис.1).
Перед разработкой теста необходимо четко иметь
представление о требованиях к знаниями, навыкам и умениям обучающихся по данной
учебной дисциплине. Эти требования определены в соответствующих Государственных
образовательных стандартах, предметных квалификационных характеристиках и
типовых учебных программах. Первый шаг в планировании теста – это анализ данных
документов. Задания теста должны в полной мере выявить степень овладения
требуемыми знаниями, навыками и умениями.
Составитель теста, начинающий с написания задания,
скорее всего, создаст узконаправленный тест. Без предварительного плана
некоторые темы изучаемого предмета могут занять слишком много места, в то время
как другие останутся незатронутыми.
Рисунок 1 . Этапы разработки теста
Во избежание несбалансированности и диспропорции
охватываемых тестом тем составлению заданий должна предшествовать разработка
его спецификации.
Спецификация теста является обязательной операцией
эмпирического анализа теста и необходимым условием создания нового теста.
Спецификация заключается в том, что строится таблица, в которой указываются:
·
номера заданий и их
принадлежность к субтестам;
·
направленность заданий;
·
сложность, трудоемкость,
вес заданий;
·
какую из характеристик
каждое из заданий конкретно диагностирует.
При подготовке тестов подобную спецификацию следует
начать с описания целей изучения данного предмета, а также охватываемого этим
предметом содержания. Перечисляя цели, создатель теста должен спросить себя, к
каким изменениям в поведении ведет освоение изучаемого предмета: скажется ли
оно на привычных способах работы, на способе решения задач, на способностях,
интересах и других характеристиках, а также на приобретении и развитии
интеллектуальных навыков.
В табл.1 приведена спецификация теста по дисциплине «Зоогигиена
с основами проектирования животноводческих объектов», состоящего из 116 заданий.
В левой колонке перечислены 11 тем, или содержательных категорий, которые
должны быть охвачены тестом. В верхней части таблицы приведены также 4
тестируемые учебные цели или типа обучения. Вся таблица дает предоставление о
желательном числе заданий относительно содержания и целей обучения. Число
заданий соответствует важности и широте каждой темы и целям ее изучения. Если
конкретная цель или тип обучения данной темой не затрагиваются, то задание в
соответствующей клетке таблицы отсутствует. В вертикальных и горизонтальных
рядах таблицы представлены относительный вес каждой темы и цели обучения во
всем тесте. Часто эти веса устанавливаются заранее, что позволяет
проконтролировать охват заданием тем и целей обучения, не устанавливая сквозную
классификацию индивидуальных заданий.
Таблица 1
Пример спецификации теста по дисциплине
«Зоогигиена с основами проектирования
животноводческих объектов»
|
Изучаемое содержание |
Учебные цели |
Всего |
|||
|
Знание основных терминов |
Понимание целей и принципов |
Навыки по мониторингу и оценке |
Расчет и управление параметрами |
||
|
1.Предмет и задачи гигиены и зоогигиены, как раздела медицины и |
3 |
2 |
— |
— |
5 |
|
2.Факторы природно- территориального комплекса и их влияние на |
5 |
4 |
3 |
— |
12 |
|
3.Зоогигиенические требования к почве и санитарная охрана её от |
4 |
4 |
4 |
— |
12 |
|
4.Зоогигиеническое значение воды. Гигиена водоснабжения и поения |
3 |
3 |
3 |
3 |
12 |
|
5.Гигиенические требования к кормам и кормлению с. х. животных |
4 |
2 |
2 |
2 |
10 |
|
6.Требования к санитарно- техническому оборудованию животноводческих |
4 |
2 |
2 |
2 |
10 |
|
7.Гигиена содержания крупного рогатого скота |
5 |
5 |
3 |
2 |
15 |
|
8.Гигиена содержания свиней и птицы |
3 |
3 |
2 |
2 |
10 |
|
9.Гигиена содержания овец |
3 |
3 |
2 |
2 |
10 |
|
10.Гигиена содержания лошадей |
3 |
3 |
2 |
2 |
10 |
|
11.Гигиена содержания кроликов и пушных зверей |
3 |
3 |
2 |
2 |
10 |
|
ИТОГО |
40 |
34 |
25 |
17 |
116 |
Исходным моментом составления
тестовых заданий является выделение общей цели, преследуемой тестовым заданием.
Такие цели должны предусматривать требование от обучаемого:
а) простого воспроизведения знаний, анализа и
сравнения данных. Постановка таких вопросов в заданиях позволяет проверить
усвоение слушателями материала на уровне запоминания, тренирует память;
б) анализа признаков понятия. При этом выявляется
умение обучаемых находить общее и специфическое в изучаемом материале, отделять
существенные признаки от несущественных, родовые от видовых, способствует
развитию аналитического мышления;
в) умения распознавать схемы, рисунки;
г) понимания функций, выполняемых различными органами
(звеньями, приборами, устройствами и т.п.), и процессов взаимодействия между
этими органами. Вопросы такого типа позволяют проверить умение слушателя
вскрывать определенные причинно-следственные связи и отношения, оценивать роль
и значение данного органа для процессов, происходящих во всей системе;
д) приведения в логическую последовательность
элементов множества, расположенных в беспорядке, т.е. умения решать
определенного класса задачи, требующие обнаружить последовательность
расположения элементов в информационном ряде объектов, тактических приемов,
например, в следственном действии либо оперативно-розыскном мероприятии;
е) творческого подхода к рассматриваемым проблемам и
вопросам, умения применять полученные знания в условиях той или иной ситуации.
При создании
тестов для проверки остаточных знаний на основании ФГОС ВПО по соответствующей
дисциплине или для проверки итоговых знаний студента на основании программы
дисциплины прежде всего определяется область содержания теста и цели
тестирования. План теста для промежуточного контроля знаний должен охватывать
знания, умения и навыки по одной или нескольким дидактическим единицам, для
итоговой аттестации – по всем дидактическим единицам дисциплины в соответствии
с программой дисциплины, для проверки остаточных знаний по всем дидактическим
единицам дисциплины в соответствии с ФГОСом по специальности.
Преподавателю следует ориентироваться на следующие
принципы отбора содержания тестовых заданий для тестов:
1. Содержание теста должно
соответствовать содержанию учебной дисциплины. Задания теста должны в
правильной пропорции охватывать все важные аспекты области содержания.
2. Необходимо включение в
тесты только наиболее важных, базовых знаний, выражающих сущность, содержание,
законы и закономерности рассматриваемых явлений. Все спорные точки зрения,
допустимые в научном споре, следует исключить из тестовых заданий.
3. Каждый учебный элемент
должен иметь некоторую усредненную меру трудности, которую необходимо учитывать
в процессе контроля знаний.
Эксперты,
определенные на кафедре, оценивают соответствие заданий области содержания и
целям тестирования. Проводится внутреннее пробное тестирование преподавателями
кафедры. Осуществляется предварительная корректировка теста. Определяется время
тестирования студентов. Рекомендуемая продолжительность ответа на тестовое
задание составляет 1,5 минуты.
На основании анализа
статистических параметров по каждому заданию и тесту в целом производится
повторная корректировка теста – удаляются неудачные задания, если необходимо —
составляются новые.
Производится выбор
стандартов оценивания экспертными и эмпирическими методами. Выполняется оценка
надежности теста и содержательной валидности (соответствия заданий содержанию
дидактических единиц). Составляется окончательный вариант теста и его
параллельных форм. Тиражируется сам тест и связанный с ним материал (если
используется бумажный вариант тестирования). При подготовке теста к
компьютерному тестированию готовится бумажный и электронный вариант теста и
заносится в тестовую оболочку программистом компьютерного класса.
Виды
тестовых заданий
Существует ряд требований к тесту организационного
характера:
- тестирование осуществляется главным образом через
программированный контроль, никому не дается преимуществ, все отвечают на
одни и те же вопросы в одних и тех же условиях; - оценка результатов производится по ранее
разработанной шкале;
·
применяются необходимые меры, предотвращающие искажение результатов
(списывание, подсказку и утечку информации о содержании тестов)
При разработке теста целесообразно
использовать различные виды тестовых заданий. В частности:
·
Задания с выбором одного правильного ответа (ВО)
·
Задания с выбором нескольких правильных ответов (МВ)
·
Задания на установление правильной последовательности (УП)
·
Задания на установление соответствия (УС)
·
Задания с кратким ответом (КО)
Общие требования к
тестовым заданиям разного типа
·
Текст задания должен исключать всякую двусмысленность и неясность
формулировок.
·
Текст задания формулируется предельно кратко, т.е.
освобождается от всякого постороннего для данной
проблемы материала. Текст задания должен иметь предельно простую синтаксическую
конструкцию.
·
В задании не используются слова, вызывающие различное
понимание у испытуемых, а также слова, являющиеся
подсказкой, например, «иногда», «часто», «всегда», «все», «никогда».
·
В заданиях, носящих составной характер, необходимо обеспечить
такую последовательность, чтобы правильность выполнения одного
задания не зависела от правильности выполнения другого задания данной группы.
·
В тексте задания исключается двойное отрицание.
·
Задания должны быть направлены на проверку значимых элементов
содержания, а не тех, которые проще формулируются или просты в обработке.
·
Используемая в заданиях терминология не должна выходить за
рамки учебной литературы, используемой в вузе
Требования
к дистракторам :
·
По возможности, не следует делать ответы длинными;
·
Одно и то же слово (или словосочетание, или однокоренное
слово) не должно находиться в тексте задания и правильном ответе;
·
Все ответы должны быть подобными (аналогичными, похожими),
это касается и их внешнего вида, и грамматической структуры.
·
В вариантах ответа на задания желательна краткость;
·
Ответы на основу задания должны быть сформулированы
достаточно просто, чтобы были понятны существенные различия между ними;
·
Каждый дистрактор должен быть правдоподобным, внушающим
доверие, вполне убедительным и привлекательным для экзаменующихся;
·
Правильный ответ должен быть ясен, краток, правилен и
свободен от подсказок (как внутри текста задания, так и вне его);
·
Ответы должны быть одинаковы по длине (хотя бы
приблизительно), не следует формулировать правильный ответ заметно длиннее или
короче, чем дистракторы;
·
В дистракторах не следует использовать слова или технические
термины, которые экзаменующийся не может или не должен знать;
·
При формулировке дистракторов не следует использовать
выражения: «ни один из перечисленных», «все перечисленные» и т.д., так как они
способствуют угадыванию правильного ответа;
·
Из дистракторов, как правило, исключаются все повторяющиеся
слова путем ввода их в основной текст задания;
·
Все ответы должны быть грамматически согласованными с
основной частью задания;
·
Если ответ выражен в виде числа, то, как правило, эти числа
располагаются от меньшего к большему или наоборот.
Далее представлены требования к содержанию тестовых заданий
разного типа.
Задания
с выбором одного верного ответа (ВО)
Общие
требования
— Формулировка основной части задания, должна быть
законченной
— В заданиях базового уровня в ответы целесообразно включать
не более двух-трех важных, ключевых слов, при этом правильный ответ не должен
отличатся какими-либо формальными признаками от неправильных ответов
(дистракторов).
— В заданиях базового уровня не должно требоваться выбрать
один НЕПРАВИЛЬНЫЙ ответ при наличии нескольких правильных.
— Из текста задания исключаются все словесные ассоциации,
способствующие выбору правильного ответа с помощью догадки.
— Если имеется задание с отрицаниями, то частицу НЕ или
слово, выражающее отрицание, необходимо выделить в тексте (жирным текстом с
подчеркиванием).
— Задания должны иметь одинаково правдоподобные дистракторы
(ответы), одинаково привлекательные для выбора.
— Исключаются ответы, вытекающие один из другого или
дополняющие друг друга.
Задания с выбором одного
верного ответа (ВО)
Примеры заданий:
Функция живого вещества, связанная с преобразованием
физико-химических параметров среды, называется …
A.
средообразующей
B.
транспортной
C.
деструктивной
D.
концентрационной
Различные типы заданий с
выбором ответа
Примеры заданий ВО
в повествовательной форме ( в виде суждений)
Аппаратом
сухой, инерционной очистки газов от пыли является…
1)
циклон
2)
скруббер
3)
волокнистый фильтр
4)
электрофильтр
Регулярное
наблюдение и контроль за состоянием окружающей среды;
определение
изменений, вызванных антропогенным воздействием,
называется
экологическим …
1)
мониторингом
2)
аудитом
3)
страхованием
4)
нормированием
Задания на отрицание
В архейскую эру НЕ существовало…
A. беспозвоночных
животных
B. цианей
C. анаэробных
бактерий
D. одноклеточных
водорослей
Примеры заданий с
рисунком
Об экологической чистоте
товара и о безопасности его для человека и окружающей среды указывает знак
экологический маркировки…
 |
 |
||||||
 |
|||||||
 |
|||||||
На представленном рисунке
показана схема…
 |
1)оборотного
водоснабжения ГЭС
2) очистки газовых выбросов ТЭС
3) работы АЭС
4) очистных
сооружений ЦБК
Примеры заданий
формы множественный выбор «два из пяти»
(МВ):
К цветковым растениям относятся…
A. одуванчик
лекарственный
B. рябина
обыкновенная
C. ель
европейская
D. сосна
обыкновенная
E. плаун
булавовидный
Примеры
заданий формы множественный выбор «три
из шести»(МВ):
В.И.
Вернадский выделял такие виды веществ в биосфере, как…
1)
живое
2)
косное
3)
биоксное
4)
твердое
5)
мертвое
6)
автотрофное
Пример задания
формы установление последовательности (УП):
Расположите биоценозы в
той последовательности, в которой они сменяют друг друга в процессе сукцессии…
1)
пожарище
2)
кустарник
3)
смешанный лес
4)
ельник
Установите правильный порядок действий при выделении
хлоропластов методом центрифугирования…
1)
поставить центрифужные пробирки в центрифугу
2)
измельчить лист растения ножницами
3)
растереть растительную навеску в ступке при помощи пестика
4)
уравновесить центрифужные пробирки
5)
включить центрифугу на определенное время и определенное количество оборотов
Задания
на установление соответствия (УС)
Общие
требования
Задания
контролируют умение установить соответствие между объектами или процессами
и описанием их свойств и признаков. Задания на установление
однозначного или множественного соответствия начинаются
со слов: «Установите соответствие…».
Задание
формулируется так, чтобы содержание можно было выразить в виде двух
множеств с соответствующими названиями. Элементы первого
столбца обозначаются цифрами и располагаются слева, а элементы
второго обозначаются буквами русского алфавита и располагаются справа. Для
каждого столбца вводится определенное название, обобщающее все элементы
столбца. Название столбца записывается заглавными буквами. Элементы
столбцов должны быть выбраны по одному основанию.Для заданий на однозначное
соответствие необходимо, чтобы второй столбец содержал
не менее одного дистрактора.
Для
всех учебных предметов используется одинаковый формат ответов, представленный
ниже.
Пример задания
формы УС:
Установите соответствие
между группами растений по отношению к свету и признаками растений:
|
ПРИЗНАКИ |
ЭКОЛОГИЧЕСКИЕ ГРУППЫ РАСТЕНИЙ |
|
1) |
А) |
|
2) |
Б) |
|
3) |
|
|
4)Не |
|
|
5) |
|
|
6) |
Задания
открытой формы
Общие
требования
В заданиях открытой формы
не используются готовые варианты ответов. В них испытуемому нужно дополнить
недостающее слово (группу слов, формулу, число, знак и др.), которое
свидетельствует о его знании.
Существует большое
разнообразие типов заданий в открытой форме.
Задания открытой формы подразделяются на задания с
коротким ответом и задания с развернутым ответом или эссе.
В практике массового педагогического тестирования в
основном применяются следующие модификации заданий открытой формы:
· задания
с коротким ответом (КО);
· задания
на завершение утверждения (ЗУ);
· задания
на заполнение пробела (ЗП);
· задания
на завершение (или на конструирование) графического объекта (диаграммы,
графика, схемы).
Примеры
заданий формы КО:
1). Если ПДК нитратов для
человека составляет 3,05 мг/кг в сутки, то для человека массой 68 кг допустимо
поступление в организм этих веществ до ___ мг.
Ответ: 207
2). Если норматив платы
за выброс 1 тонны фенола в атмосферу в пределах установленных лимитов
составляет 3,415 тыс. руб., то при выбросе предприятием 22 тонн данного
загрязняющего вещества, выплаты составят ______ тыс. рублей.
Ответ: 75
Задания на завершение утверждения
Представленный ниже график иллюстрирует
закон _________________.
 |
|||
 |
|||
Изображенная на рисунке модель
иллюстрирует закон _______.
Типичные
ошибки, допускаемые при
составлении
вопросов к тесту
При составлении тестовых
заданий разработчикам следует не только придерживаться определенных правил к
формулировке заданий, правильных ответов и дистракторов, но и избегать
основных, наиболее типичных неточностей и ошибок при их написании. Наиболее
часто встречаются следующие нарушения требований и определенных критериев при
написании тестовых заданий.
Следует избегать составлять
задания, которые проверяют
больше чем одну идею, проблему, концепцию. При этом в правильном ответе и
дистракторах не должно содержаться разное количество элементов ответа:
Важнейшими экологическими
последствиями глобального загрязнения атмосферы являются …
1) кислотные
осадки и парниковый эффект
2)
демографические параметры
3)
извержения вулканов
4)
естественные сукцессии
В
правильном ответе и дистракторах содержится разное количество элементов
ответа:
В ходе световой фазы фотосинтеза
происходит…
1) фотолиз воды и выделение свободного кислорода
2)
фиксация углекислого газа
3)
использование энергии АТФ
4)
синтез глюкозы
К
липидам относятся…
1) стероиды, терпены, воска и фосфолипиды
2)
только стероиды
3)
только терпены
4)
только фосфолипиды
Из
дистракторов, как правило, исключаются все повторяющиеся
слова путем ввода их в основной текст задания, например:
|
Неправильно |
Правильно |
|
Области 1) 2) 3) 4) |
Области концентрации живого вещества на 1) 2) 3) 4) |
Часть
ответа лучше вынести в вопрос, например:
|
Неправильно |
Правильно |
|
Для изучения тонкой структуры клеточных 1) 2) 3) 4) |
Для изучения тонкой структуры клеточных наиболее 1) 2) 3) 4) |
Все
ответы должны быть грамматически согласованными
с основной частью задания. Например, наблюдается несоответствие родов или
падежей:
Круговорот веществ, движущей силой
которого является деятельность живых организмов, называется …
1) биологическим
2) большой
3) геологический
4) антропогенным
Не
все иностранные фамилии можно склонять по падежам.
|
Неправильно |
Правильно |
|
Роль 1) 2) 3) 4) |
Роль микроорганизмов в питании растений 1) 2) 3) 4) |
Все
ответы должны быть грамматически согласованными
с основной частью задания. Например, может наблюдаться несоответствие чисел
(единственное и множественное):
|
Неправильно |
Правильно |
|
Пространство, на 1) ареалом 2) площадью 3) зонами 4) территориями |
Пространство, на 1) ареалом 2) площадью 3) зонами 4) территориями |
Не
допускается использование словосочетаний: ни один из перечисленных выше; все
перечисленные; все, кроме…
Основные способы приспособления организмов
к условиям
окружающей
среды –это …
1)
активный путь, пассивный путь, избегание неблагоприятных воздействий
2) все перечисленные, кроме активного пути
3) только активный путь
4) ни один из перечисленных вариантов ответа не верен
Ответы
должны быть одинаковы по длине (хотя бы приблизительно),
не следует формулировать правильный ответ заметно длиннее или короче, чем
дистракторы. Следовательно, правильный ответ не должен отличаться внешне по
длине от дистракторов:
Для защиты атмосферы от загрязнения
проводят …
1) очистку выбросов предприятий от вредных примесей с помощью
газоулавливающих средств
2)
интродукцию растений
3)
рекультивацию земель
4)
мелиоративные мероприятия
Не
следует в качестве дистракторов приводить понятия, явно
не имеющие отношения к предмету тестирования:
Для физико-химической очистки сточных вод
используют …
1)
адсорбер
2) автобус
3) автомат
4) аттестацию
Не
следует разрабатывать тестовые задания на несоответствие
современным научным достижениям или использовать устаревшую информацию:
В
настоящее время количество населения на планете составляет ________ человек.
1)
5 млрд.
2) 3 млрд.
3) 500 млн.
4)100 млн.
Не следует формулировать
задание в виде вопроса:
|
Неправильно |
Правильно |
|
Что содержится в файле с расширением obj?
|
Файл с расширением obj
|
Внутренняя
экспертиза теста
Каждому эксперту выдаются следующие материалы:
- Спецификация и план теста
- Инструкция по экспертизе
- Формы для заключения об экспертизе и записи
решений
В процессе экспертизы проводится следующая работа:
- Выполняется каждое задание теста (указывается
правильный ответ, приводится решение задания, где необходимо) - Анализируются формулировки задания (проверяется
предметная корректность формулировок) - Анализируется содержание заданий на их
тематическую принадлежность и уровень сложности (базовый, повышенный или
высокий) - Формулируются замечания каждому из заданий, в
конструктивной форме с предложениями, что и как необходимо изменить. - Формулируется заключение о пригодности теста для
использования
Спецификация теста включает:
- Цель создания теста, обоснование выбора подхода к
его созданию, описание возможных сфер его применения. - Перечень нормативных документов (базисных
программ, требований к уровню подготовки выпускников и др.), используемых
при планировании содержания теста. - Количество заданий различной формы с указанием
числа ответов к закрытым заданиям, общее число заданий в тесте. - Вес каждого задания, рекомендуемый автором теста.
- Рекомендуемое время выполнения теста, среднее
время выполнения одного задания с учетом специфики формы. - Охват требований государственных образовательных
стандартов по дисциплине.
Требования к экспертной комиссии и
процедуре экспертизы качества теста
- Оценка качества содержания теста проводится
независимыми экспертами, не участвовавшими в разработке теста. Число
экспертов составляет не менее 3-х человек — наиболее опытные
преподаватели, с большим стажем работы. - В комплект материалов для экспертизы должен
входить перечень требований к уровню подготовки испытуемых. - Эксперту при работе потребуются часы для фиксации
времени работы над каждым заданием и бланк для экспертного заключения. - Если задание теста проверяет степень достижения
требований на минимальном уровне — это базовое задание, на уровне
«хорошей» оценки – задание повышенного уровня, «отличной» оценки – сложное
задание. - Эксперт должен оценить значимость содержания
теста по следующей шкале – 0 – неоправданное включение задания в тест, 1 –
незначимое задание, 2 – значимое, 3 – наиболее важный опорный элемент.
Оформление
тестового материала и подготовка его
к
компьютерному варианту тестирования
План теста
При разработке плана тестовых
заданий по дисциплине делается примерная раскладка процентного содержания
разделов и определяется необходимое число заданий (но не менее 3-х) по каждому
разделу дисциплины (по каждой дидактической единице) исходя из его важности и
числа часов, отведенных на его изучение в программе.
Требования к оформлению
тестовых материалов
|
N |
Наименование |
N |
Тема |
|
1 |
Общая теория права и государства |
1 |
Понятие и признаки права. Система |
|
2 |
Источники и формы права. Норма |
||
|
3 |
Правоотношения. Правонарушение и |
||
|
4 |
Российское право и основные |
||
|
2 |
Основы конституционного права |
5 |
Конституция Российской Федерации |
|
6 |
Основы конституционного строя |
||
|
7 |
Правовой статус личности в |
||
|
8 |
Органы государственной власти в |
||
|
3 |
Основы гражданского права |
9 |
Граждане и юридические лица как |
|
10 |
Право собственности |
||
|
11 |
Обязательства и договоры |
||
|
12 |
Наследственное право Российской |
||
|
4 |
Основы трудового права Российской |
13 |
Основания возникновения трудовых |
|
14 |
Рабочее время и время отдыха |
||
|
15 |
Дисциплина труда |
||
|
16 |
Защита трудовых прав граждан |
||
|
5 |
Административное правонарушение и |
17 |
Административное правонарушение и |
|
18 |
Преступление. Уголовный закон и |
||
|
19 |
Категории и виды преступлений. |
||
|
20 |
Система наказаний по уголовному |
Бумажная копия теста должна
быть обязательно подписана автором (авторами) тестового материала с указанием
даты составления и передачи, листы скреплены и пронумерованы.
Особенностью
современного образовательного процесса в вузе является его компьютеризация,
что позволяет организовывать тестирование обучающихся на компьютерной основе.
«Компьютерные»
педагогические тесты имеют свои особенности, которые необходимо учитывать при
их разработке. Анализ информации на экране монитора компьютера часто бывает
затруднен из-за неправильной подачи материала. Хотя именно компьютеризованное
тестирование имеет свои преимущества и перспективы применения в образовании.
Особенная роль здесь принадлежит компьютерно-индивидуальному тестированию,
когда каждому испытуемому предъявляется уникальный набор заданий.
Возможности компьютерных
средств позволяют сочетать звуковые и зрительные формы предъявления тестовых
заданий. Компьютерные тесты должны быть адаптированы к реальному учебному
процессу. Одно из главных требований к компьютерным тестам — многовариантность.
Многовариантность должна быть двух типов: во-первых, по данным заданий,
во-вторых, по порядку их предъявления. Реализация этого требования снимает
сразу две организационные проблемы: списывание и запоминание ответов.
Достоинства компьютерного
тестирования:
— объективность тестирования
– персональный компьютер «беспристрастен» при предъявлении тестовых заданий и
подсчете результатов их выполнения.
— удобство фиксации,
хранения и представления результатов тестирования, а также возможность их
автоматизированной обработки, включая ведение баз данных и статистический
анализ.
— удобство реализации
процедур индивидуально-ориентированного тестирования.
— возможность создания
таких тестовых заданий, которые не могут быть представлены без компьютера. При
этом могут быть использованы графические, динамические, интерактивные и другие
специфические возможности представления тестовых заданий на компьютере.
Недостаток компьютерного
тестирования:
— необходимость минимальных
навыков работы на компьютере тестируемого.
В вузах существуют тестовые
оболочки, куда заносятся вопросы и варианты ответов тестовых заданий (например «iTest», «Му test» и др.). При подготовке компьютерного
тестирования следует учитывать следующую (рекомендуемую) схему взаимодействия
подразделений вуза (см. рис. 2).
Рисунок 2. Схема взаимодействия подразделений
в разработке и реализации
компьютерного теста
Сектор качества
образования УМЦ обеспечивает централизованное и конфиденциальное хранение
тестовых заданий по учебным дисциплинам.
При оценке выполнения
теста следует исходить из следующих рекомендаций:
- Оценка «удовлетворительно»
ставится, если студент ответил на от 55 до 70% вопросов. - Оценка «хорошо» ставится, если
студент получил от 71 до 85%. - Оценка «отлично» ставится,
если студент получил 86% и более правильных ответов.
Список рекомендуемой литературы
1. Аванесов, В.С.
Композиция тестовых заданий/ В.С. Аванесов. – М.: АДЕПТ, 1998. – 216 с.
2. Воскресенская,
О.Л.
Оценка
качества подготовки студентов по дисциплине «Физиология растений» на основе
результатов Интернет-экзамена/ О.Л. Воскресенская, Г.П. Тикина /Материалы
Всероссийской конференции «Преподавание современной физиологии растений в
университетах и вузах страны: проблемы и решения». – М., 2008.
3. Геворкян,
Е.Н., Комплексная
оценка высших учебных заведений/ Е.Н. Геворкян, В.Г. Наводнов, Г.Н.Мотова,
М.В.Петропавловский. — М.: Центр государственной аккредитации, 2003. — 176 с.
4. Ефремова, Н.Ф.
Современные тестовые технологии в образовании/ Н.Ф. Ефремова. – Ростов-на-Дону:
Издательский центр ДГТУ, 2001. – 187 c.
5. Киселева,
В.П. Методика
определения уровня подготовки студентов по результатам аттестационных
педагогических измерений/ В.П. Киселева, А.С. Масленников, В.Г. Наводнов. – Йошкар-Ола:
Центр государственной аккредитации, 2004. — 44 с.
6. Клайн, П.
Справочное руководство по конструированию тестов/ П. Клайн. – Киев, 1994. – 238
с.
7. Майоров,
А.Н.
Теория и практика создания тестов для системы образования. / А.Н.Майоров. – М:
Народное образование, 2000. – 351 с.
8. Масленников,
А.С. Оценка
уровня обученности студентов в целях аттестации образовательного учреждения
профессионального образования: Учебное пособие/А.С. Масленников, Б.А. Савельев. – М.:
Логос, 2003. – 136 с.
9. Мельников, Ю.В.
Технология использования и разработки тестов и обучающих программ: Методическое
пособие / Ю.В.Мельников. – Домодедово: ВИПК МВД России, 1999. – 21 с.
10. Михайлычев, Е.А.
Дидактическая тестология / Е.А. Михайлычев. – М.: Народное образование, 2001. –
432 с.
11. Морев, И. А.
Образовательные информационные технологии. Часть 2. Педагогические измерения:
Учебное пособие/ И.А. Морев. – Владивосток: Изд-во Дальневост. ун-та, 2004. –
174 с.
12. Переверзев, В.Ю.
Критериально-ориентированное педагогическое тестирование: Учеб. Пособие/ В.Ю.
Переверзев. – М.: Логос, 2003. –120 с.
13. Родионов, Б.У. Стандарты
и тесты в образовании / Б.У. Родионов, А.О.Татур. – М.: Б.и., 1995. – 48 с.
14. Челышкова, М.Б. Теория и
практика конструирования педагогических тестов: Учебное пособие/ М.Б.
Челышкова. – М.: Исследовательский центр проблем качества подготовки специалистов,
2001. – 410 с.
Приложение 1
Классификация тестов
1.
По процедуре создания:
· стандартизованные (в образовании, для целей итоговой аттестации);
· не стандартизованные.
2. По средствам предъявления:
· бланковые;
· предметные (манипулируем материальными объектами);
· аппаратурные (используются устройства для изучения особенностей внимания,
восприятия, памяти, мышления);
· практические (лабораторные работы, снабженные соответствующими инструкциями и
имеющие тестовое оснащение);
· компьютерные.
В
рамках компьютерного тестирования В.С. Аванесов предлагает адаптивные тесты —
задания, в которых предъявляются по одному, в зависимости от ответа испытуемого
на предыдущий вопрос.
3.
По направленности:
· тесты интеллекта;
· личностные тесты;
· тесты достижений.
4. По характеру действий:
· вербальные (с использованием умственных действий);
· невербальные (связанные с практическим манипулированием предметов).
5. По ведущей ориентации:
· тесты скорости (содержат простые задачи; время решения ограничено);
· тесты мощности или результативности (содержат трудные задачи, время решения
не ограничено, или мягко лимитировано);
· смешанные тесты (задачи различного уровня сложности, от самых простых до
самых сложных, время испытания ограничено, но достаточно для решения
большинства задач).
Эти тесты наиболее часто применяются на практике, к ним относятся большинство
тестов учебных достижений.
6. По степени однородности задач:
· гомогенные (задачи, сходные по характеру, но различающиеся конкретным
содержанием);
· гетерогенные (задания отличаются и по характеру, и по содержанию).
7. По объективности оценивания:
· объективные (в процессе обработки результатов тестирования не
предусматривается использование субъективных толкований тестирующим);
· проективные тесты (допускается чрезвычайно большое разнообразие ответов и
проявление определенной субъективности при их толковании тестирующим.
8. По специализации:
· широкоориентированные (для тестов в системе образовании), позволяющие оценить
эффективность процесса обучения, степень освоения учащимися системы знаний,
умений и навыков в ходе учебного процесса;
· узкоориентированные, направленные на выявление достижений учащихся в процессе
освоения отдельных предметов, отдельных тем и т.д.
9. По целям использования (только для тестов в системе образования):
· предварительный определяющий тест (определяет знания в начале обучения,
затрагивает минимум знаний по теме обучения);
· тест прогресса, достигнутого в процессе обучения, формирующий тест
(затрагивает ограниченный сегмент обучения, раздел или главу, состоит из серии
отдельных тестовых вопросов, всесторонне охватывающих ограниченную область
обучения). Пример, обучающие тесты. Ученику даются конкретные инструкции для
исправления обнаруженных ошибок;
· диагностический тест (содержит большое число вопросов, имеющих отношение к
конкретной тестируемой области). Цель теста — определение трудностей обучения.
· суммирующий тест (используется для оценки широкого диапазона результатов
обучения, ожидаемого в конце учебного процесса, содержит вопросы,
представляющие более высокий уровень сложности, чем другие виды тестов).
10. По широте использования (только для тестов в системе образования):
· для использования преподавателем;
· для использования группой преподавателей или администрацией образовательного
учреждения;
· для целей отбора и формирования групп;
· для аттестации обучающихся.
11. По форме:
· тесты закрытого типа (задания с выбором верного ответа (или нескольких
верных) из набора предлагаемых;
· тесты открытого типа (ввод предполагаемого ответа на задание самим
тестируемым).
Приложение 2
Образец оформления титульного
листа теста по дисциплине
|
МИНИСТЕРСТВО ФГОУ ВЕТЕРИНАРНОЙ ТЕСТОВЫЕ ЗАДАНИЯ Для ________________________________________ По дисциплине Для Составлены______________________________________ ФИО,ученая Троицк |
Образец оформления первого листа
тестовых заданий
Утверждено
на заседании кафедры
Согласовано:
______________________(протокол
№___) Декан
____________________________
Зав.
кафедрой________________ подпись
ФИО подпись
ФИО «_____»________________________20___г.
«_____»______________________20___г.
ОБЩИЕ СВЕДЕНИЯ О ТЕСТОВЫХ ЗАДАНИЯХ
1 Направление (я), специальность(и), курс(ы)
_______________________________________
2 Название цикла дисциплин учебного плана
______________________________________
3
Дисциплина (или дисциплины комплексного задания)
_____________________________
4 Цель
контроля ______________________________________________________________
5 Общее
количество тестовых заданий ____________________________________________
6 Рекомендуемое
количество заданий в тесте ______________________________________
7 Форма (ы)
заданий
—
открытая____________________________________________________________________
— закрытая
( с выбором одного или нескольких заключений)__________________________
— на
установление правильной последовательности__________________________________
— на
установление соответствия___________________________________________________
— на
конструирование и др.______________________________________________________
8 Время, на
которое рассчитан тест_______________________________________________
9 Уровень
сложности:
—
легкие______________________________________________________________________
— средней
трудности____________________________________________________________
—
трудные_____________________________________________________________________
10 Критерии
оценки:
оценка
3 (удовлетворительно) 25-49 баллов ______% правильных ответов
оценка
4 (хорошо) 50-74 баллов ______% правильных ответов
оценка
5 (отлично) 75-100 баллов ______% правильных ответов
11
Кафедра(ы)- разработчик (и) контролирующих материалов ________________________
Тестовые задания и ключи к ним прилагаются
Разработка
педагогических тестов является очень
непростой задачей, на пути решения
которой можно допустить немало ошибок.
Предлагаем читателю перед конструированием
тестов ознакомиться с теми затруднениями,
которые могут возникнуть у него в
процессе работы. Полагаем, что их анализ
позволит предотвратить возникновение
большей части ошибок, характерных для
процесса разработки педагогического
теста.
Для
организационного этапа характерны
затруднения при формулировании цели
тестирования. Постановка цели определяет
направление приложения сил специалистом.
Ошибки при определении цели тестирования
чреваты тем, что, во-первых, специалист
может неверно избрать подход, в рамках
которого ему предстоит разрабатывать
тест, в то время как нормативно-ориентированный
и критериально-ориентированный подходы
определяют существенные различия на
большинстве этапов разработки теста.
Во-вторых, от целей тестирования зависит
определение источников валидности
будущего теста. Валидность теста является
одним из основных показателей качества
теста. Она должна устанавливаться в
отношении той конкретной области
применения, для которой разрабатывался
тест. Таким образом, если неверно
определена эта область, неверно поставлена
цель, то разрабатываемый инструмент
нельзя считать качественным. Например,
если целью тестирования является оценка
уровня знаний у специалистов, а основным
источником валидности избирается
соотнесение результатов теста с
показателями его будущей деятельности,
а не соответствие содержания теста с
содержанием курса, то нельзя утверждать,
что этот тест разработан для проверки
уровня знаний.
На
содержательном этапе вероятно
возникновение такой ошибки, как
недостаточно полный охват технологической
матрицей содержания учебного материала.
Технологическая матрица является тем
документом, на основании которого
разрабатываются в дальнейшем тестовые
задания. Поэтому содержание учебного
материала, оценка которого предполагается
в ходе тестирования, должно полностью
покрываться технологической матрицей.
Промахи в определении содержания
будущего теста отрицательно сказываются
на его валидности.
На
подготовительном этапе можно столкнуться
с ошибками, во-первых, при составлении
тестовых заданий, в том числе инструкций
к ним. Подобные ошибки подробно рассмотрены
в предыдущей главе.
Во-вторых,
упущением является недостаточно
серьезное отношение к необходимости
проведения содержательной и тестологической
экспертизы тестовых заданий. Проведение
содержательной и тестологической
экспертизы позволяет выявить некачественные
тестовые задания с тем, чтобы исключить
их из теста или, если это возможно,
переформулировать.
В-третьих,
существует вероятность возникновения
ошибок при построении выборки для
апробации тестовых заданий, теста в
целом. Выборка, на которой планируется
проведение исследования, должна иметь
достаточный объем и быть репрезентативной
по отношению к генеральной совокупности,
на которую планируется распространение
результатов исследования. Чтобы выборка
была репрезентативной генеральной
совокупности, необходимо учитывать те
факторы, которые могут влиять на
изменчивость изучаемого признака.
Такими факторами могут быть возраст,
пол, стаж работы, уровень образования
и т.д. Качество построения выборки
оказывает значительное влияние на
корректность расчетов трудности и
дискриминативности заданий, надежности
и валидности.
В-четвертых,
специалист, занимающийся конструированием
тестов, может допустить ошибки при
компоновке заданий для апробации,
например, это может касаться количества
тестовых заданий в бланке, пространственного
и шрифтового оформления тестовых
заданий, наличия инструкции и корректности
её формулировки.
Что
касается исследовательского этапа, то,
наверное, самой глобальной ошибкой,
которую можно допустить на этом этапе,
является в принципе его отсутствие.
Можно встретить тесты, которые состоят
из набора тестовых заданий, разработанных,
вероятно, с учетом определенной цели и
на основе определенных учебных программ,
однако авторы этих тестов не посчитали
нужным проверить качественные
характеристики разработанного ими
инструмента, такие как трудность заданий,
их дискриминативность, надежность теста
в целом и его валидность. Абсолютно
точно, что инструмент, не имеющий подобных
характеристик, нельзя называть тестом,
призванным объективно измерить уровень
знаний у обучающихся.
К
более частным ошибкам, которые могут
возникнуть на этом этапе, можно отнести
неточности в расчетах показателей
качества тестовых заданий и надежности
теста. Подобные ошибки, чаще всего,
обусловлены непрочными знаниями в
области статистики и могут быть устранены
путем увеличения своей компетентности
в этой области знаний.
Для
стандартизационного этапа характерны
ошибки при планировании процедуры
проведения тестирования и, как следствие,
при описании этой процедуры в руководстве
к педагогическому тесту. Например,
специалист может не придать должного
значения тем условиям, которые влияют
на обучающихся во время прохождения
тестирования. Однако даже незначительные
аспекты тестовой ситуации могут
существенным образом сказаться на
результатах тестирования. Точные
указания относительно используемого
тестового материала, временных
ограничений, инструкций тестируемым и
любых других тонкостей проведения
теста, в частности, обеспечения рабочих
мест, освещения, вентиляции, шумоизоляции
и т.д., позволят создать одинаковые
условиях тестирования для всех
обучающихся, сделать процедуру
тестирования единообразной.
На
интерпретационном этапе вероятны
недочеты при написании инструкции по
проверке тестов. Случается, что написанная
инструкция является неполной, недостаточно
ясно описывает алгоритм действий
специалистов, в чьи задачи входит
проверка тестов. Это может привести к
неясностям и ошибкам при оценивании
результатов тестирования и к нарушению
единообразия процедуры обработки
тестовых результатов.
Перечисленные
ошибки следует учитывать в своей работе
по конструированию педагогического
теста и, по возможности, избегать.
Выводы
по разделу 2
Из
раздела, посвященного рассмотрению
процедуры разработки педагогического
теста, следует, что наиболее емким и в
то же время лаконичным, нам представляется
алгоритм разработки теста, состоящий
из шести этапов: организационного,
содержательного, подготовительного,
исследовательского, стандартизационного
и интерпретационного. На каждом из этих
этапов решаются определенные задачи,
вытекающие одна из другой. Успех в
решении задач предыдущего этапа есть
залог, основа успешной работы на
последующих этапах, и наоборот. Таким
образом, разработка теста — это сложный
взаимосвязанный, взаимозависимый
процесс. Если какой-то этап пропущен,
или соответствующие ему задачи решены
не в полной мере, то это снижает
эффективность действий на последующих
этапах и, в конечном итоге, влияет на
качество инструмента в целом. Поэтому
при конструировании педагогического
теста важно придерживаться предлагаемого
алгоритма, что позволит в конечном итоге
разработать качественный, стандартизированный
инструмент, позволяющий объективно
измерить уровень знаний обучающихся.
На
первом, организационном, этапе разработки
педагогического теста необходимо
определить цели тестирования. Постановка
цели обусловливает выбор того или иного
подхода к разработке теста
(нормативно-ориентированного или
критериально-ориентированного). Кроме
определения цели, в начале организационного
этапа задаются и другие предварительные
характеристики теста: область его
применения, контингент тестируемых.
Также необходимо определить наиболее
адекватные и информативные источники
валидности для конкретного теста.
Определение источников валидности
напрямую зависит от целей разрабатываемого
теста. Последнее, что нужно сделать на
организационном этапе – это определить
ресурсные возможности разработчиков,
распределить круг задач и установить
временные рамки разработки теста.
На
втором, содержательном, этапе проводится
серьёзная теоретическая работа по
определению содержания будущего теста,
и закладываются
основы валидности будущего теста. Так,
задачами,
которые должны решаться на этом этапе
являются: отбор
содержания учебного материала,
конструирование технологической матрицы
и составление спецификации теста. Именно
содержательный этап является связующим
звеном между теорией и практикой, где
простраивается соответствие содержательных
особенностей изучаемого материала с
формальными характеристиками будущего
теста такими, как вид теста, виды тестовых
заданий.
Работа
по определению содержания будущего
теста должна вестись серьезнейшим
образом, так как она является основой
валидности будущего теста. Если содержание
плохо определено или недостаточно
тщательно описано, то никакие последующие
действия не компенсируют этого упущения.
Содержание
теста, которое будет отобрано для
проверки, и важность того или иного
элемента содержания задает технологическая
матрица. При этом необходимо, чтобы
содержание предмета полностью покрывалось
матрицей. В технологической матрице
должны в обязательном порядке быть
зафиксированы все разделы предмета,
темы их составляющие, а также количество
учебных часов, отводимых на рассмотрение
той или иной темы и соотношение заданий
в тесте.
После
того, как составлена технологическая
матрица, следует написать спецификацию
теста, в которой должны быть прописаны
все формальные характеристики теста:
цель создания теста; область применения;
перечень исходных документов, используемых
при разработке теста; вид теста; виды
тестовых заданий; содержание теста
(технологическая матрица) и т.д. К
спецификации следует постоянно обращаться
в процессе дальнейшей работы для того,
чтобы сохранить соответствие количества
заданий значениям, прописанным в
технологической матрице, так как по
результатам проверки и отбора заданий
некоторые из них могут быть удалены. А
в спецификации соответственно закрепляется
состав и пропорции содержательных
элементов теста.
На
третьем, подготовительном, этапе
осуществляется непосредственная
подготовка всего материала, из которого
будет состоять тест. На этом этапе
решаются такие задачи, как: составление
тестовых заданий, в том числе инструкций
к ним, экспертиза тестовых заданий,
построение выборки для апробации заданий
и теста и компоновка заданий для
апробации.
Составление
тестовых заданий осуществляется с
учетом тех требований, которые изложены
в предыдущей главе. После того, как
тестовые задания подготовлены, следует
их проверить на предмет соответствия
требованиям, предъявляемым к формулировке
тестовых заданий. Для этого необходимо
провести содержательную экспертизу
тестовых заданий. Кроме содержательной
экспертизы тестовых заданий, необходима
и тестологическая экспертиза, в которой
должны проверяться соответствие
содержания задания выбранному типу и
виду тестового задания, правильность
пространственного и логического
расположения элементов заданий и другие
элементы задания, которые не относятся
к содержанию предмета. В качестве
экспертов для проведения содержательной
и тестологической экспертизы педагогических
тестов, разрабатываемых в системе
психологической подготовки МЧС России,
могут выступать только психологи НИО
ПП и ПК ФКУ ЦЭПП МЧС России.
Следующей
задачей, которая решается на подготовительном
этапе, является построение выборки для
апробации заданий и тестов. Эта проблема
является чрезвычайно важной. От того,
насколько качественно построена выборка,
зависит корректность расчетов трудности
и дискриминативности заданий, надежности
и валидности. Выборка должна точно
отражать категорию лиц, для которых
предназначен тест, то есть быть
репрезентативной генеральной совокупности.
Последней
задачей, решаемой в рамках подготовительного
этапа разработки педагогического теста,
является компоновка, упорядочивание
заданий для апробации.
Центральное
место в процессе разработки теста
занимает четвертый, исследовательский,
этап. Он достаточно объемен по содержанию
и, как правило, занимает немало времени.
На исследовательском этапе решаются
такие задачи, как: апробация тестовых
заданий, определение и расчет показателей
качества тестовых заданий, отбраковка
заданий и составление теста, апробация
теста, определение и расчет показателей
качества теста и составление окончательного
варианта теста.
Апробация
тестовых заданий проводится для того,
чтобы определить трудность заданий с
целью оценки их пригодности для
тестируемых; определить те задания, в
которых есть существенные недостатки;
выявить случайные ошибки (опечатки,
недостатки орфографии, пунктуации и
т.д.); определить время, необходимое для
решения задания или всего теста целиком;
выявить недостатки в инструкциях;
проанализировать ответы на задания
открытого типа, в том случае, если они
используются, с целью возможного
уточнения формулировки правильных
ответов или оценочной схемы.
После
проведения апробации тестовых заданий
определяются показатели качества
тестовых заданий, а именно трудность и
дискриминативность. Трудность задания
– это количество обучающихся, справившихся
с заданием. Дискриминативностью
называется возможность заданий разделять
обучающихся, имеющих высокий индивидуальный
балл по тесту, от обучающихся, имеющих
низкий индивидуальный балл, или
респондентов с высокой продуктивностью
учебной деятельности от респондентов
с низкой продуктивностью. В связи с тем,
что основной целью нормативно-ориентированных
педагогических тестов является разделение
обучающихся по уровню знаний, то
дискриминативность каждого из заданий
является важной характеристикой качества
теста. В том случае, если тестовое задание
характеризуется неудовлетворительными
значениями трудности и дискриминативности,
то их следует исключить из теста.
После
предварительной апробации и первичной
отбраковки заданий, из оставшихся
заданий составляется тест, соответствующий
заданной ранее технологической матрице.
Составленный тест вновь подвергается
процедуре апробации. После всех
проведённых проверок утверждается
рабочая версия теста, в состав которой
входят: подробно описанная процедура,
зафиксированная инструкция, тестовый
материал, формы для регистрации данных
и алгоритмы обработки. После этого тест
готов к дальнейшим испытаниям.
Одним
из последних испытаний и «кульминацией»
всего процесса разработки теста является
определение и расчет показателей
качества теста. Это проверка успешности
всех действий, предпринятых ранее для
обеспечения эффективности теста.
Показателями качества теста являются
надежность и валидность.
Под
надежностью понимается устойчивость,
или согласованность результатов теста,
получаемых при повторном их применении
к тем же респондентам в различные моменты
времени, при использовании разных
наборов эквивалентных заданий или же
при изменении других условий обследования.
Иными словами, надежность характеризует
точность теста как измерительного
инструмента, устойчивость его к действию
помех (состояние респондентов, их
отношение к процедуре тестирования,
случайные ошибки и т.п.).
Валидность
— это понятие, характеризующее что именно
измеряет тест и насколько хорошо он это
делает. Валидность теста говорит о том,
какие выводы можно сделать из полученных
по нему показателей. Выделяют валидность
содержательную, критериальную и
конструктную. Поскольку мы говорим о
разработке педагогического теста, а
выполнение таких тестов интерпретируется
с точки зрения содержания предметной
области, на основе которой они
разрабатываются, то важнейшим условием
их эффективного использования, является
содержательная валидность.
Содержательная
валидность устанавливается через
описание содержания теста. Описание
содержания заключается в систематической
проверке содержания теста на соответствие
репрезентативной выборке измеряемой
области знаний. Содержательная валидность
теста обеспечивается с самого начала
конструирования теста. Для этого
специалисту, разрабатывающему тест,
необходимо перед составлением тестовых
заданий проанализировать соответствующие
учебные программы, методические пособия
и пр.; в соответствии с поставленными
целями и учебной программой разработать
технологическую матрицу; провести ее
тщательную экспертизу; в соответствии
с технологической матрицей составить
тестовые задания; предоставить
разработанные тестовые задания на
проверку экспертам; получить экспертные
заключения о соответствии тестовых
заданий технологической матрице;
изложить результаты проделанной работы
в спецификации теста.
Завершающим
шагом исследовательского этапа, после
определения статистических характеристик
тестовых заданий и качества теста в
целом, является составление окончательного
варианта теста.
На
пятом, стандартизационном, этапе важно
решить такие задачи, как стандартизация
теста и его нормирование. Стандартизация
подразумевает единообразие процедуры
проведения и оценки выполнения теста.
Для
того, чтобы показатели, полученные
разными людьми, были сравнимы, условия
тестирования должны быть одинаковыми
для всех.
Второй
важной задачей этого этапа является
установление норм. Нормирование теста
— это процесс получения количественных
или качественных характеристик
инструментария, на основе сравнения с
которыми можно дать оценочное суждение
о результатах, показанных респондентами.
Психологические тесты не имеют заранее
определённых стандартов их успешного
или неуспешного выполнения. Критерии
выполнения каждого теста устанавливаются
опытным путём. Нормы теста определяется
в результате усреднения оценок, полученных
представителями репрезентативной
выборки, с их последующим разделением
по возрасту, полу и ряду других показателей.
На
последнем, интерпретационном, этапе
важно решить такую задачу, как разработка
схем интерпретации результатов
тестирования. Схемой интерпретации в
данном случае является инструкция по
проверке тестовых работ, в которой
должны быть ясно, доступно, непротиворечиво
прописаны алгоритм действий проверяющих,
особенности оценивания разных видов
заданий, способы перепроверки, а также
действия проверяющих в «нештатных»
ситуациях.
Таким
образом, если перед специалистом
психологической службы МЧС России
встала задача разработки педагогического
теста, то при её решении ему следует
руководствоваться приведенным алгоритмом.
Вместе с тем следует учитывать ошибки,
характерные для процесса разработки
педагогического теста и избегать их.
Как не стоит тестировать кандидатов:
10 главных ошибок рекрутера и 2 простых инструмента для проверки теста
Тесты упрощают наём — они объективны, позволяют провести первичную оценку и экономят время на отсев неподходящих кандидатов. Но, как и любой инструмент, в неумелых руках тесты могут превратиться в оружие массового поражения.
CEO платформы для оценки и развития сотрудников StartExam Сергей Макаров поделился, как тестировать разработчиков, проверять качество заданий, следить за актуальностью тестов, а также разобрал 12 главных ошибок в тестировании кандидатов.
- 5 распространённых ошибок при составлении тестов
- 3 частые ошибки в составлении вопросов
- 2 ошибки при тестировании узких специалистов
- 2 простых способа, как проверить качество теста
Летом 2022 года наша команда StartExam провела исследование рынка оценки сотрудников в России. Мы изучили 94 компании из сферы IT, e-commerce, ритейла, фармацевтики, HoReCa и промышленности. Результат — все компании проводят оценку сотрудников, при этом 50% опрошенных упомянули, что используют тестирование для отбора кандидатов.
5 распространённых ошибок при составлении тестов
Ошибка №1: Доверять составление теста HR, а не узкопрофильным специалистам
В идеальном мире тесты должны составляться узконаправленными профессионалами, а не HR-специалистами. Ни в коем случае не хотим обидеть HR — наоборот, такой подход поможет облегчить вашу работу при найме. Если вы хотите сделать качественный тест и оставить в воронке самых подходящих кандидатов, не стесняйтесь попросить коллег, которые разбираются в вопросе, о помощи.
В зависимости от прописанных в профиле кандидата компетенций, составить вопросы могут и специалисты смежных областей. Например, для отбора руководителя отдела продаж поговорите с коммерческим директором или CMO.
Ошибка №2: Использовать вопросы на общую эрудицию в тесте
Каждый из нас хоть раз натыкался на необычные вопросы с собеседований Google, Microsoft и других технологических гигантов. Если ввести в поисковике ставший мемом брейнтизер: «Почему люк круглый?» — вы получите больше миллиона результатов.
В действительности от этой практики отказывается всё больше корпораций. В 2013 году вице-президент Google Ласло Бок заявил, что компания будет бороться с подобной инициативой — единственной причиной, почему этого не произошло раньше, по его мнению, было приятное чувство превосходства, которое испытывали проверяющие.
В компании пошли дальше и исследовали, как высокие результаты в тестах на эрудицию влияют на дальнейшую работу. Спойлер: совершенно никак.
Тесты на эрудицию в современных реалиях никак не помогут вам найти качественных кандидатов. Лучше проведите отсеивающие тесты по компетенциям, а запал успешных соискателей сэкономьте на хорошее поведенческое интервью.
Ошибка №3: Излишне полагаться на личностные тесты
Как и в случае с тестами на эрудицию, личностные опросники — крайне неточный инструмент. При этом данный инструмент пользуется большой популярностью — их используют до 75% компаний Fortune 500.
В 2013 году психолог из Университета Айовы Фрэнк Шмидт изучал, насколько точны различные способы оценки кандидатов. Для этого он сравнил их с показателями качества работы нанятых специалистов. В результате личностные тесты заняли предпоследнее место, ниже оказался только опыт работы.
Для того, чтобы правильно составить профиль личности и сопоставить его с будущими результатами, в команде должен быть профессиональный психо-диагност с отработанной и проверенной временем методологией.
Не стоит излишне полагаться на личностные опросники в процессе отбора. Тем более, что человек склонен меняться. Даже в MBTI можно спустя 3-4 года получить совершенно другой профиль.
Используйте личностные тесты, чтобы провести качественный онбординг и лучше адаптировать сотрудника в коллективе.
Ошибка №4: Настраивать выдачу заданий из банка заданий
Важный факт — то, что отлично работает при тестировании сотрудников, не всегда подходит под тестирование кандидатов. Банк заданий, благодаря которому системы тестирования в случайном порядке «вытаскивают» вопросы, а каждый участник, по сути, решает свой уникальный тест, — не лучшая опция для найма.
Чтобы обеспечить участникам равные условия и минимизировать случайности, задания в каждом отдельном профиле должны быть одинаковыми.
Ошибка №5: Не уважать время кандидата
Вспомните, когда в последний раз вы проходили психологический тест. Зачастую, они содержат 40+ вопросов, а на выполнение приходится затратить до 1 часа свободного времени. Такое число вопросов можно оправдать, если в результаты «зашиты» десятки типов личности. Тем более, что респондент сразу получает на руки плоды своей работы.
Но, если мы говорим об отсеивающих тестах для при найме, всегда нужно помнить, что по ту сторону экрана сидят точно такие же люди, как и вы. Если вам нужно сразу же определить шорт-лист из претендентов — используйте тестовое задание. Хотите сузить воронку найма и отсечь откровенно неподходящих кандидатов? Закладывайте на тест максимум 15-20 минут и не более 30 вопросов.
Чтобы сэкономить время на составление отчётности по результатам тестирования, используйте сервис FriendWork. Вы сможете быстро вносить нужные данные о соискателях в карточки, проводить анализ и отправлять автоматические письма с ответами по списку.
3 частые ошибки в составлении вопросов
Ошибка №1: Неочевидные правильные ответы или их отсутствие
Нет ничего хуже для тестируемого, чем тест, в котором есть 1 правильный ответ, но варианты ответов практически не отличаются друг от друга по смыслу. Помните, что тест не должен превращаться в гадание на кофейной гуще — варианты ответов должны быть разными и понятными.
-
Пример плохих вариантов ответа:
Вопрос: «Что является объектом изучения маркетолога в первую очередь?Варианты ответа:
х Потребности потребителя
o Каналы сбыта
o Потребительские свойства товаров и услуг
o Нужды клиента
o Потенциал коммерческой организации и рынка»Если хитрый автор вопроса имел в виду, что потребности — это более специфический запрос и поэтому здесь только один правильный ответ, то он рискует разгневать богов тестов. А заодно сотни соискателей, которые завалят запросами поддержку и своего рекрутера.
Ещё одна важная рекомендация — не используйте ответ: «Ничего из перечисленного». Как правило, он не несёт в себе пользы для проверки знаний. Его проще всего выбрать случайным образом, если кандидат на самом деле не знает правильный ответ.
Ошибка №2: Плохо написанные дистракторы
Дистракторы — это неправильные ответы, которые призваны запутать тестируемого. Написать хорошие дистракторы — самая сложная задача при составлении теста. Они должны быть похожи на правильный ответ, поэтому в качестве дистракторов часто используют самые распространенные ошибки отвечающих.
Не стоит в ответах использовать юмор. Во-первых, в глазах кандидатов мгновенно обрушится значимость теста. Во-вторых, упадёт качество всей процедуры тестирования. Кроме того, не используйте слишком очевидные ответы.
Признак хорошего теста — ясное понимание, почему человек выбрал именно такой неправильный вариант.
Ошибка №3: Непонятная инструкция
Уделите внимание составлению понятной инструкции к тесту. Чётко сформулируйте, что именно нужно сделать кандидату — выбрать единственный ответ, отметить несколько правильных вариантов, уложиться в определённое количество символов в открытых заданиях.
То, что кажется очевидным вам, не всегда верно воспринимается соискателями.
2 ошибки при тестировании узких специалистов
Ошибка №1: Не использовать прокторинг
Любой тест, при очень большом желании кандидата, можно списать — даже если у вас уникальные вопросы, никто не мешает участникам найти подсказки в интернете. Конечно, шансы на успех в таком случае снижаются таймером, антиплагиатом на открытых вопросах, классными ответами-дистракторами.
Если вы возлагаете на тестирование большие надежды и хотите не просто отсеять откровенно неподходящих соискателей, а сразу отобрать золото, — используйте прокторинг.
Прокторинг — это процедура контроля за ходом тестирования.
Помимо записи экрана, в современных системах тестирования, в том числе в StartExam, AI автоматически определяет, когда:
- кандидат отводит взгляд;
- в кадре появляются посторонние предметы;
- на фоне слышны посторонние звуки.
По итогам тестирования в отчётах указывается, с какой вероятностью человек списывал во время процедуры отбора. Рекрутер или HR могут посмотреть запись, чтобы исключить человеческий фактор.
Ошибка №2: Не тестировать опытных разработчиков, если тестируете джунов/миддлов
Это одна из самых распространенных ошибок рекрутеров и нанимающих менеджеров. Часто она продиктована желанием избежать разногласий — опытные разработчики не любят, когда их просят подтвердить навыки.
Не переживайте и обязательно тестируйте и «сеньоров», и тимлидов. Здесь, как и на кухне, где у каждого шефа свой подход даже к самому простому блюду — все технические специалисты очень разные. Например, человек может не подходить под корпоративную культуру или не подстроиться под стек.
Поэтому тестирование будет направлено скорее не на хард-скиллы, а на culture fit, даже если в задании нужно будет написать код или решить задачу.
Мы собрали для вас самые интересные мероприятия в мире HR. Оставьте свои контакты и мы оповестим вас о ближайшем мероприятии.
Уже записались на мероприятия
для HR и HRD?
2 простых способа, как проверить качество теста
Ошибка №1: Не проводить проверочный тест
Прежде, чем выпускать тест «в бой», проверьте его на небольшой выборке — коллегах и методологах, которые составляли задания. Так вы получите обратную связь по логике теста и по отдельным найденным ошибкам.
Проверка теста сэкономит время рекрутеров и техподдержки, в адрес которых не будут прилетать жалобы и скриншоты неудачных вопросов.
Ошибка №2: Не улучшать тесты
Как понять, что ваши тесты эффективны, а задания, на самом деле, проходятся не наобум? Проводите периодические опросы кандидатов. В идеале — и тех, кто продвинулся по воронке, и отсеянных. Узнайте, с какими трудностями они столкнулись, какие вопросы показались непонятными, заданий на какие темы им не хватило.
Такой опрос можно запустить сразу после прохождения теста, пока впечатления ещё свежие — поверьте, вы узнаете много нового.
Второй инструмент — это проверка качества заданий. Проведите пробный тест на коллегах, а система тестирования укажет на:
- слишком очевидные правильные ответы;
- задания, на которые неправильно отвечают даже самые успешные тестируемые;
- задания, в которых практически никто не ошибается.
Составить тест легко. Составить хороший — валидный, справедливый, актуальный тест — это уже следующий уровень мастерства.
Помните, что тестируемые — это люди, которые хотят видеть понятную инструкцию, интересные вопросы и логику в них. Если вы будете пользоваться этим правилом и проверять тесты по нашему чек-листу, то ваши задания станут по-настоящему интересными, помогут отсеивать неподходящих кандидатов и сэкономят время рекрутеров.
Попробуйте автоматизировать рекрутинг бесплатно
Вы ускорите закрытие вакансий в 2 раза
Подписывайтесь на наши соцсети, чтобы быть в курсе HR-новостей
Подпишитесь на рассылку FriendWork
Два раза в месяц отправляем дайджест с полезными материалами,
афишей и нестандартными решениями HR-задач
Типичные ошибки в тестовых заданиях стажёров-исследователей
Привет, меня зовут Ксения, я исследователь в UXlab Авито. Некоторое время назад мы запустили стажёрскую программу сразу в несколько направлений: искали продуктовых дизайнеров и дизайнеров коммуникаций, редакторов и исследователей.
Проверив 58 тестовых заданий на исследовательский трек, я заметила ряд ошибок, которые встречались у многих ребят. В этой статье разберу основные, чтобы стажёрам было проще пройти отбор в следующий раз.
Кого мы искали
UX-лаборатория Авито помогает продуктовым командам проверять гипотезы, используя качественные методы исследований. В основном это интервью и юзабилити-тесты. Чтобы помочь бизнесу хорошими качественными данными, важно разбираться в людях и понимать, как проводятся исследования.
Нужно знать, как подобрать метод под задачу, сформулировать гипотезы и сформировать выборку. Понимать, как задавать вопросы, чтобы не получить искажённые данные и, конечно же, как в результате сделать корректные прикладные выводы.
Будущего стажёра мы планировали прикрепить к опытному наставнику, который поможет ему погрузиться в нюансы профессии и будет постепенно передавать всё более сложные проекты.
Чтобы это случилось быстрее, мы искали в команду человека, в котором сошлись бы три основных фактора:
- Есть база: психологическое или социологическое образование либо релевантный опыт работы.
- Есть мотивация, которая понятна по тестовому заданию и опыту. Мы предполагали, что если человек действительно увлечён профессией, то он уже пробовал применить свои навыки.
- Есть навыки проведения исследований.
На собеседование мы пригласили шестерых ребят, чьи резюме, тестовые задания и совокупный опыт подошли нам больше всех. Давайте посмотрим, какие недочёты в выполнении заданий помешали остальным пройти первичный отбор.
Тестовое задание
В нашем тестовом было два задания для проверки навыков. В первом требовалось подготовить и провести юзабилити-тестирование новой функции по оценке стоимости авто с пробегом. Второе задание было сложнее: в нём нужно было не только узнать, как сделать сториз на Авито лучше, но и самостоятельно выбрать метод исследования.
Наше тестовое задание
Задание 1.
Мы запустили новую функцию — оценку стоимости авто с пробегом. Благодаря оценкам покупатели могут быстрее заметить выгодные предложения.
Алгоритмы анализируют тысячи похожих автомобилей с такими же параметрами и показывают отклонение от средней цены. Если цена соответствует рыночной, покупатели видят в объявлениях отметку «Хорошая цена», а если стоимость ниже рынка, то видят «Отличную цену».
После запуска мы хотим провести тестирование, которое ответит на вопросы:
- Замечают ли покупатели оценки?
- Помогают ли они выбрать автомобиль, упрощают ли процесс поиска?
- Как покупатели понимают, что это за отметка, что непонятно в новой функции, какой информации не хватает?
Проведите юзабилити-тест функции:
- Подготовьте дизайн исследования: опишите цели, задачи и аудиторию, сформулируйте гипотезы, составьте сценарий тестирования.
- Проведите исследование с участием хотя бы двух респондентов.
- Сформулируйте выводы, попробуйте ответить на вопросы исследования.
Задание 2.
В приложениях продолжается бум историй. Они появились в Snapchat, а теперь захватили приложения банков и маркетплейсов. Кажется, что причины популярности этого формата вполне очевидны: красочный и разнообразный контент, визуальная подача на весь экран — истории просто и интересно просматривать.
Мы добавили истории на Авито. Чтобы сделать их максимально полезными, нужно исследование, которое ответит на вопросы:
- Какие задачи пользователи решают, просматривая истории в других приложениях?
- Как люди используют истории вне социальных приложений?
- На чём стоит сфокусироваться при создании историй в Авито?
- Что важно учесть при создании этого продукта?
Вам нужно:
- Подготовить дизайн исследования, которое поможет ответить на вопросы выше: описать цели, задачи и аудиторию, сформулировать гипотезы, составить сценарий.
- Провести исследование, сформулировать выводы и ответы на вопросы.
Основные ошибки в решении обоих заданий у потенциальных стажёров были связаны с неверным выбором метода, некорректными гипотезами, формированием выборки и сценарием исследования.
Неверный выбор метода исследования
Отвечая на первое задание, некоторые ребята вместо юзабилити-теста провели опрос, не пояснив при этом свой выбор. Нам же было важно понять, как кандидаты ориентируются в методах, понимают ли их ограничения и будут ли гуглить метод, если не знают, как его использовать. По массовости выбора опроса вместо юзабилити-тестирования показалось, что многие просто не знали, что это такое, либо невнимательно читали задание.
Для решения второго задания со сториз кандидаты выбирали:
- Опрос, что слишком рано для нового продукта и не подходит под вопросы к исследованию.
- Фокус-группу, но не описывали разные сегменты пользователей, которых следовало на неё позвать.
- Интервью без юзабилити-теста.
Но поскольку в задаче речь идёт о недавно запущенном продукте и нужно ответить на вопросы о задачах и опыте пользователей в других приложениях, то для начала важно изучить пользовательский контекст. Стоит проанализировать паттерны просмотра людьми сториз в других приложениях и узнать их мнения относительно сториз. Хорошим вариантом проверки может быть комбинация интервью и юзабилити-теста. Уместны также фокус-группы с разными сегментами пользователей — это особенно хорошо для того, чтобы относительно быстро погрузиться в проблематику продукта. Также можно использовать метод дневников, если мы понимаем, что хотим поймать рефлексию человека по просмотру сториз в моменте.
Отсутствие гипотез или неверные формулировки гипотез
С гипотезами был целый набор проблем.
Нет гипотез. На юзабилити-тесте они обязательно должны быть, иначе есть риск не проверить важные моменты и после проведения исследования обнаружить, что нужны дополнительные итерации. К тому же, гипотезы здесь нужны для того, чтобы правильно выбрать и сформулировать задания на тест. Например, понять, уместны ли будут закрытые задания или же задания с опорой на опыт респондента.
Недостаточное количество гипотез. Когда мы планируем юзабилити-тест, важно продумать все гипотезы, которые нужно проверить в интерфейсе и которые помогут ответить на вопросы исследования. В задании с оценкой стоимости авто точно нужны были гипотезы о заметности оценок, их понимании, нехватке или достаточности информации. Часто ребята опускали один или два пункта.
Слишком общие формулировки гипотез. Если гипотезы сформулированы недостаточно конкретно, становится сложнее проверить их в исследовании.
Примеры таких гипотез: «пользователь проявит больший интерес к сервису, если будет просматривать истории» или «истории — наиболее эффективный способ подачи материала, позволяющий расширить охват и повысить активность аудитории».
На любую или почти любую гипотезу в качественном исследовании мы можем ответить «да» или «нет», а в количественном — чётко понимаем, как это измерить. С формулировками выше нельзя сделать ни то, ни другое, так как не понятно, что значит «проявит интерес» и что значит «больший». Больший, чем что?
Вторая гипотеза в примере грешит ещё и тем, что сформулирована нечётко. Из неё непонятно, о подаче какого материала речь.
Несколько гипотез в одной. Важно, чтобы гипотеза была сформулирована в виде одной законченной мысли. Тогда будет легко однозначно ответить, верна она или нет. Кроме того, в составе сложной гипотезы могут оказаться предположения, которые нужно проверять разными методами.
Пример такой гипотезы: «пользователь доверяет оценке сервиса по цене автомобиля, и это приведёт к целевому действию». Кстати, здесь тоже не хватает конкретики — лучше уточнить, что мы считаем целевым действием в данном случае.
Гипотезу нельзя проверить качественными методами. В предыдущем примере с оценкой есть ещё один недочёт — на юзабилити-тесте мы никак не узнаем, приведёт наша фича к целевому действию или нет. Тут стоит быть внимательнее и не выносить на качественное исследование предположения, которые нужно проверять на данных или же в количественном опросе.
Ещё пример гипотезы с подобной проблемой: «есть положительная зависимость между уровнем знания (восприятия) функции и решением о покупке автомобиля».
Такое предположение можно проверить только с помощью опроса или эксперимента, да и то скорее не связь между знанием о функции и покупкой авто, а связь между наличием метки на объявлении и количеством просмотров/контактов по нему. Проверить эту гипотезу юзабилити-тестом, как просит первое задание в тестовом, не получится. Кроме того стоит помнить, что в лаборатории мы не узнаем о фактическом решении пользователя купить машину.
Гипотезы, которые не нужно проверять, или самоочевидные. Встречались в ответах кандидатов формулировки гипотез, которые не нуждаются в проверке, потому что это факты из разряда, что если нагреть воду, то она будет горячей.
Например, «пользователь будет просматривать истории, если они будут содержать релевантный интересам пользователя контент». Конечно, люди будут смотреть развлекательный контент, который им интересен, это понятно и без исследования. Но даже если бы мы вынесли такую гипотезу на интервью или тест, то что потом с этой информацией делать? Здесь были бы уместны гипотезы о том, что именно может быть интересно конкретному сегменту аудитории.
Другой пример такой гипотезы — «аудитория не обращает внимания на отметки и будет выбирать автомобиль по другим показателям». Понятно, что на выбор машины влияет множество факторов. Наша же задача в исследовании более конкретна — понять, добавляет ли новая функция ценность для пользователя в его задаче поиска авто.
Утверждения о работе продукта вместо гипотез. Некоторые ребята выносили на исследование утверждения, которые нельзя назвать гипотезами, потому что они описывают работу фичи или сервиса. В этом они похожи на гипотезы из предыдущего пункта, но всё же хочется привести отдельные примеры и здесь.
Например, такая: «истории заменяют новостной формат, рассказывая о новостях приложения, функциях, актуальных товарах». Нам надо это знать, и это может не быть очевидным до исследования, но подобные утверждения — не предмет разговора с пользователями. Задача исследователя — до старта проекта разобраться в работе продукта, а на тест вынести предположения о взаимодействии клиентов с сервисом.
Бесполезные гипотезы. В заданиях встречались гипотезы, оторванные от реалий и задач бизнеса. Такие предположения нет смысла проверять, потому что они не помогут развитию продукта. Можно легко придумать много таких гипотез, не зная внутреннюю кухню компании. Но, если взять например, такую гипотезу: «сториз в Авито теряются на фоне сториз в других сервисах», то становится понятно, что:
- она сформулирована так, что не очевидно, как её проверить;
- поскольку Авито — не социальная сеть, то вряд ли у бизнеса будет задача сделать «лучшие в мире сториз».
Некорректное формирование выборки
По формированию выборки для первого задания с юзабилити-тестированием оценки стоимости авто ключевая проблема — описание её социально-демографическими критериями, таким как пол или возраст. Часть ребят понимали, что нужны характеристики, связанные с автомобилями, но и тут могли промахнуться. Многие выбирали респондентов, у которых есть права или авто, или опыт покупки автомобиля в прошлом.
В этих критериях самих по себе нет проблем, они могут быть дополнительными. Но главное для формирования выборки в первом задании — опыт респондента в использовании Авито и его текущая потребность в покупке авто.
Когда мы тестируем что-то новое в сервисе, стоит посмотреть в исследовании как на его опытных пользователей, так и на пользователей-новичков. Это гигиеническое правило. В случае Авито опытный пользователь — это тот, кто недавно искал авто на нашей площадке. Неопытный — тот, кто искал машину на других сайтах или на Авито более полугода назад. Проблемы, потребности и непонимания у этих двух групп могут быть разными. Например, у опытного пользователя может быть больше запрос к детальности и подробности информации, в то время как новичку будет сложно разобраться в многообразии функций незнакомого сервиса.
Что касается потребности в покупке, то для задания не подходят просто собственники автомобилей или те, кто покупал их в прошлом. Это важно, потому что юзабилити-тест — не игра «заметит оценку или нет» и не попытка узнать, что про неё думает случайный человек. Нужно, чтобы инсайты о том, упрощают ли отметки процесс поиска и какой информации в них не хватает, были получены от людей, которые заинтересованы в покупке машины прямо сейчас. Такие пользователи точно знают и могут рассказать и показать нам, как её ищут и на что обращают внимание.
Ошибки в сценарии исследования
Самая обидная ошибка в первом задании — попытка загнать респондента в рамки. Многие кандидаты давали закрытую задачу по поиску авто: просили найти конкретную марку с конкретными параметрами или даже ограничивали бюджет покупки. Однако в тестовом задании нет гипотез, которые стоило проверять именно так.
Желательно делать все задания в исследовании максимально приближенными к реальной жизни респондента. Даже если проверяемые гипотезы очень конкретны и касаются определённых элементов интерфейса, то лучше сначала дать человеку возможность показать, что он ищет для себя и как это делает. Пока он будет это показывать, мы поймём его контекст, отметим для себя, что для него важно, и в частности — обратит ли он сам внимание на наши оценки стоимости авто. И уже после этого наступит время для уточняющих вопросов и точечных задач.
По самим вопросам в сценарии были такие ошибки:
- Закрытые вопросы. Например, «замечали ли вы информационные блоки с анализом уровня цены и отметками „хорошая цена“ или „отличная цена“?». Во-первых, на такой вопрос легко ответить просто «да» или «нет», что малополезно в качественном интервью. Во-вторых, он содержит в себе подсказку, из-за которой мы не узнаем, сказал бы сам человек про эти отметки или нет.
- Вопросы или задания в тесте с подсказкой. Например, кандидаты просили найти авто с ценой ниже рыночной. Такая постановка вопроса уже фокусирует внимание респондента на цене и всём, что с ней связано.
- Сложные формулировки вопросов. Например, вопрос «были ли какие-либо аспекты системы, которые помогли выполнить задачи?». Для респондента исследование — это беседа на бытовые темы, в которой не место сложным конструкциям и профессиональной терминологии. Если человек не поймёт ваш вопрос, то он в лучшем случае почувствует неловкость, а в худшем не переспросит, и вы не получите точный ответ. Намного лучше задавать простые вопросы, такие как «а что вам помогло при поиске?».
Последняя ошибка в сценариях — это сообщение цели исследования. В разных случаях это может быть в разной степени уместно. Например, бизнес-пользователям может потребоваться более конкретная формулировка, чтобы они вообще согласились с нами общаться. В то же время, общаясь с частными пользователями, не стоит «наводить» их на цель исследования. Лучше сформулировать задачу чуть более абстрактно. Как вариант — сказать, что мы хотим понять, как люди ищут машину на Авито.
Чек-лист для самопроверки
Вот чек-лист, который повысит шансы пройти отбор на стажёра-исследователя по результатам тестового задания:
- Проверьте, что вашу работу легко посмотреть: желательно, чтобы она открывалась по ссылке, не нужно было ничего скачивать или где-то регистрироваться. Помните, что задания смотрят не только HR, но и специалисты по вашему треку.
- Подумайте о том, как оформить тестовое задание. Когда нужно проверить десятки работ, идеально, если работа каждого человека находится в отдельном файле, подписана его именем и аккуратно структурирована. Также, лучше не использовать для работы исследователя Фигму. Основной результат работы здесь — текст. Его логичнее оформить в гугл-документе, Notion или любом другом инструменте для работы с текстом, а Фигму оставить дизайнерам.
- Старайтесь избегать ошибок, опечаток и слишком сложных предложений. Лучше перечитать работу на свежую голову, или показать другу, чтобы убрать лишнее и переформулировать непонятное.
- Стоит выполнять задания так, как указано в тестовом. Если вы решили сделать по-другому, поясните, почему. Конечно, в исследованиях зачастую нет единственного верного ответа, но нам важно понять, как вы мыслите.
- Описывая выполнение задачи, постарайтесь дать всю необходимую информацию для оценки работы: параметры выборки, гипотезы, сценарий, то есть список вопросов к респондентам, расшифровки интервью и тестов, результаты и выводы.
- В то же время помните, что исследование для компании — это не курсовая. Лучше опустить лишние подробности по выполнению заданий, например даты, объект и предмет исследования. Добавляя информацию, спрашивайте себя, точно ли она будет полезна или это просто следование стандартам.
- Продумывая гипотезы, помните, что они должны быть сформулированы чётко, однозначно и предполагать ответ «да» или «нет». Они должны быть именно предположениями, требующими проверки, а не очевидными утверждениями. От формулировки гипотезы зависит выбор метода и формирование выборки, поэтому перечитайте её дважды и спросите себя: «я смогу проверить это предположение тем методом, который указан в тестовом?» или «какой метод лучше всего поможет проверить такую гипотезу?», если это задача от заказчика. Также убедитесь, что результат проверки гипотезы будет полезен продукту и поможет продвинуться в его улучшении.
- При формировании выборки держите в голове тех людей, которые смогут лучше всего ответить на ваши гипотезы, исходя из своего опыта и потребностей. Кстати, когда я хотела понять, насколько хороша эта статья, я попросила её посмотреть людей с разным опытом из нашей команды: самого опытного эксперта, чтобы оценить верность выводов, и нашего стажёра, как представителя ЦА.
- Когда составляете сценарий, начинайте разговор и задания с реального опыта респондента.
- При составлении сценария фокусируйтесь на открытых вопросах, чтобы не наводить человека на ответы. Конкретизировать всегда успеете по ходу теста.
- Помните, что в сценарии не место сложным конструкциям и профессиональному жаргону. Говорите с респондентом на его языке.
Вместо заключения
Несмотря на то, что статья посвящена ошибкам, хочется отметить в конце позитивные моменты. Некоторые ребята перевыполнили задания и проактивно сделали классные вещи. Мы рассматривали как однозначный плюс:
- Упоминание общения с продуктовой командой, которая ставит задачу.
- Анализ конкурентов перед исследованием.
- Кабинетный этап исследования. Например, некоторые изучили аудиторию нашего сервиса по открытым источникам и использовали это при обосновании выборки.
- Протоколы интервью и тестов.
- Видеозаписи тестов.
В конце хочется сказать большое спасибо всем, кто набрался терпения и смелости не только податься на стажировку, но и проделал такую большую работу по тестовому заданию. В любом случае надеемся, что этот опыт усилил ваши навыки, и следующие попытки трудоустройства будут успешными.
С.А. КРАСНОВА
С.ЖАсфендияров атындагы цазацулттыцмедицинауниверситетi №1 шк аурулар кафедрасы
СТУДЕНТЩ ДЕРБЕС Ж¥МЫСЫ ПРИ НЕСИЕ ТЭЛ1М-ТЭРБИЕДЕ 4 КУРСТЬЩ, БАКАЛАВРИАТЕ СТУДЕНТТЕР1НЕ ША МАМАНДЫККА «ОРТАК МЕДИЦИНА» ША ТЭРТ1ПКЕ «1ШК1 КЫВДЫЛ-СЫНКЫЛДАР» №1 1ШК1 АУРУЛАР
КАФЕДРАСЫНДА
ТYЙiн: Краснованын, С.А айтылмыш макаласында.несие тэлiм-тэрбиенiн, (СРСП жэне СРС) крлданысынын, тэжiрибесi №1 шю аурулар кафедрасында при кэсштщ жасаша тэртiпке «шю кын,кыл-сын,к;ылдар»(кредиттер «кардиология», «гастроэнтерология», «гематология») 4 курстын, студенттерiмен ша мамандыкка «ортак медицина» суретте-. Тэжiрибе кeргiздi, не кауын кию оку YДерiсте студенттщ дербестiгiн тэлiм-тэрбиеде жогарылатады, курулы сурактын, дурыс тынымынын, iзденiсiнде eздiгiнен-eзi немесе педагогтын, кадагалауынын, астында. ТYЙiндi сездер: несие тэлiм-тэрбие, оку YДерiс, практикалык кэсiптер, СРСП, СРС, бшмнщ тексерюшщ.
S.A. KRASNOVA
Kazakh National medical University. S.D..Ac$eHdunpoea, Department of internal diseases №1
INDEPENDENT WORK OF STUDENTS UNDER A CREDIT TRAINING FOR THE «INTERNAL DISEASES» DISCIPLINE Resume: This article describes the experience of using credit courses (SRSP and CDS) in the department of internal diseases №1 in conducting studies on the subject «Internal Medicine» (loans «Cardiology», «Gastroenterology», «Hematology») with students of the 4th year in «total medicine. «Experience has shown that the method of melon in the learning process increases the autonomy of students in learning, to find the right solutions to the questions on their own or under the supervision of a teacher.
Keywords: credit training, the learning process, practical training, SRSP, CDS, knowledge control.
УДК 614.2
Г.М. КУРМАНОВА, Ш.С. САДЫКОВА Казахский Национальный медицинский университет им. С.Д. Асфендиярова. Кафедра интерантуры и резидентуры по терапии №1
ОСНОВНЫЕ ОШИБКИ ПРИ СОСТАВЛЕНИИ ТЕСТОВЫХ ЗАДАНИЙ ДЛЯ ИНТЕРНОВ
Новый формат учебного процесса по ГОСО-2006 требует полного обновления базы контрольно-измерительных средств, а именно разработки большой базы тестов в формате MSQ А-типа для проведения разных уровней контроля — текущего, рубежного, итогового. На основании анализа нескольких баз тестовых заданий общим объемом 3376 тестов выявлены основные ошибки при их составлении. Освящены ошибки по содержанию тестовых заданий, ошибки по структуре и форме, а также ошибки формулирования тестовых заданий.
Ключевые слова: обучение в интернатуре, тестовые задания MSQ, ошибки при составлении тестовых заданий.
В текущем учебном году кафедры интернатуры КазНМУ готовят первый выпуск интернов, занимающихся по ГОСО-2006. Новый формат учебного процесса и новые Типовые учебные программы (ТУП) требует полного обновления базы контрольно-измерительных средств, а именно тестовых заданий для рубежного контроля и для Итоговой аттестации.
Следует отметить, что для проведения независимой оценки знаний интернов в форме тестирования Республиканский центр оценки знаний и навыков (РЦОЗН) рекомендует и использует тесты в формате MSQ А-типа. База тестовых заданий формируется из тестов, подготовленных кафедрами всех 7 медицинских вузов РК, занимающихся подготовкой интернов.
Тест MSQ А-типа для клинических дисциплин — это тест, основанный на клинической ситуации, требующей принятия решения с одним наилучшим правильным ответом (выбор 1 ответа из 5 предложенных).
Первый опыт совместной работы кафедр, обучающих интернов 6-7 курса, при создании базы тестовых
заданий для рубежных контролей и для итоговой аттестации выявил многочисленные ошибки при составлении тестовых заданий MSQ А-типа. Был проведен анализ ошибок при составлении тестовых заданий по нескольким базам тестов по направлению подготовки «Внутренние болезни» (тесты кафедр КазНМУ по дисциплинам — терапия, клиническая лабораторная диагностика, клиническая фармакология, реанимация и анестезиология, неврология, психиатрия и наркология, фтизиатрия, инфекционные болезни), а также базы тестов по дисциплинам терапия и клиническая лабораторная диагностика, подготовленными соотвествующими кафедрами вузов РК (6 вузов).
Общий объем проанализированных тестов составил (по КазНМУ): терапия (включая нефрологию и ревматологию) — 1074, клиническая лабораторная диагностика — 180, клиническая фармакология — 180, реанимация и анестезиология — 60, неврология — 180, психиатрия и наркология -130, фтизиатрия — 180, инфекционные болезни — 180. Итого 2164. Общий объем пронализированных тестов по 6 вузам РК —
1212 тестов. Весь объем тестов, включенных в анализ — 3376.
Среди выявленных можно выделить три группы ошибок:
Ошибки содержания условий тестового задания Ошибки в содержании тестового задания по форме и структуре
Ошибки в формулировке вопроса и вариантов ответа
(дистракторы и правильный ответ).
Ошибки по содержанию условий тестовых заданий.
1. Первое требование к тесту для клинических дисциплин, что содержание тестовых заданий должно быть направлено на оценку знаний по содержанию дисциплины: другими словами тематика тестов должна соотвествовать темам и содержанию ТУП. При составлении тестовых заданий часто не соблюдалась процентное соотношение тестов темам ТУП и их содержанию (слишком много тестов по одним темам, слишком мало или вообще нет тестов по другим).
Например: по циклу гастроэнтерология удельный вес тестов по таким темам как вирусные гепатиты (особенно диагностика, противовирусная терапия, системные проявления), цирроз печени и осложнения цирроза печени, неотложные состояния у больных циррозом печени, гестационная патология печени был очень мал. В отдельных базах тестов (не КазНМУ) эти вопросы оказались не освящены вообще. По циклу гематология — следует отметить преобладание тестов по приобретенным анемиям в ущерб вопросам по врожденным анемиям, лейкозам, ДВС-синдрому и другим коагулопатиям. По циклу пульмонологии -недостаточное количество тестов по диссеминированным заболеваниям легких, практически отсутствовали тесты по пневмомикозам. По дисциплине клиническая лабораторная диагностика — ничтожно число тестов по ИФА диагностике терапевтических и инфекционных заболеваний (не только на определение антител к инфекционным агентам, но и аутоантител), практически нет тестов, позволяющих оценить знания экзаменуемого по выбору наиболее достоверного метода лабораторного обследования (сравнения диагностической ценности разных методов), очень мало тестов на ошибки лабораторной диагностики (например, ошибки при заборе материала, правила хранения и транспортировки и т.п.), практически отсутствуют тесты на алгоритм обследования пациента.
2. Несоотвествие уровня сложности теста и уровня компетентности по теме ТУП (простые вопросы первого уровня по часто встречающейся патологии с уровнем компетентности «диагностировать и лечить», сложные вопросы третьего уровня по теме с уровнем компетентности «иметь представление»). Рассмотрим на примере цикла гастроэнтерология: очевидно, что по наиболее распространенной патологии в практике врача-терапевта Н.ру1огу-ассоциированной патологии тесты должны быть преимущественно 3 уровня (применение). Напротив, по такой теме как аутоиммунные заболевания печени достаточно теста первого-второго уровня.
Тем более, что тест 3 по такой теме очень сложно сделать коротким (чтобы экзаменуемый уложился в отведенные 1,5 мин на ответ). Такая патология как аутоиммунный гепатит является диагнозом исключения, для подозрения на АИГ необходимо исключить вирусную, токсическую и наследственную
патологию печени. Для ясной и однозначной формулировки условия необходимо будет отразить не менее 7-8 клинических критериев, чтобы можно было ответить на вводный вопрос «какой наиболее вероятный диагноз?» или «какая лечебная тактика наиболее предпочтительна?». Чтобы соблюсти правило хорошего теста — «тест составлен так, что можно ответить на поставленный вопрос не видя вариантов ответа» — условие теста придется делать слишком длинным.
Соблюдение пропорции тестов по смежным профилирующим дисциплинам, входящим в модуль (превалирование тестов по внутренним болезням в ущерб частным вопросам клинической фармакологии, визуальной диагностики,
клинической лабораторной диагностики в рамках модуля).
На самом деле эта проблема связана с тем, что в проанализированных базах тестов превалировали тесты 1 уровня (от 24% до 58% от всех тестов в базе по отдельной дисциплине или модулю). Действительно, тест, основанных на клинической ситуации (2 и 3 уровня), непременно будет отвечать требованию накопительный (т.е. позволяет оценить применение знаний по нескольким связанным темам) и интегрированный — позволяет оценить применение знаний по нескольким дисциплинам одновременно. Применительно к терапии в таком тесте можно оценить знания экзаменуемого одновременно по терапии, клинической лабораторной и/или визуальной диагностике и/или клинической фармакологии. Если тест основан на клинической ситуации, требующей неотложных мероприятий — то он позволит оценить и знания по неотложной помощи.
Практически, банк тестовых заданий 2-3 уровня можно лишь условно разделить по отдельным дисциплинам, входящим в модуль. В реальности в рамках одного модуля нецелесообразно выделять тесты по одной дисциплине — хорошо составленных тест на понимание и применение непременно будет междисциплинарным.
Междисциплинарная интерграция (смежные непрофилирующие дисциплины) — при составлении тестов мало внимания уделяется проблемам дифференциальной диагностики. Например, суставной синдром у пациента может оказаться проявлением инфекционной, аутоиммунной, гематологической, хирургической патологии, являющейся предметом терапии, инфекцтологии, хирургии. Синдром боли в груди — кардиологичекой, неврологической, гастроэнтерологической,
хирургической проблемой.
Междисциплинарная интеграция при составлении тестов может быть направлена не только на дифференциальную диагностику, но и тактику ведения пациента с сочетанной патологией, на первичную и вторичную профалактику. Например, знания о мероприятиях, направленных на предупреждение туберкулеза у пациента с ревматоидным артритом, получающего
иммуносупрессивную терапию; или особенности введения пациента с туберкулезом и сахарным диабетом или ХОБЛ.
Устаревшее содержание тестов. Число тестов, в содержании которых используются устаревшие классификации, понятия, методы диагностики, методы лечения, устаревшая тактика ведения
пациента, препараты, не имеющие доказательной базы по их эффективности, невелико (около 1-5% в некоторых базах тестов), но само наличие таких тестов способно сильно скомпрометировать отвественных за формирование банков тестовых заданий. Наличие таких тестов говорит о недобросовествном отношении как преподавателя, составившего такой тест, так и заведующего кафедрой, отвечающего за качество контрольно-измерительных средств. Одним из самых вопиющих примеров является использование в условиях тестов классификации хронических гепатитов от 1978 года, в то время как действующая классификация принята в 1994 году — отставание на 20 лет. Или использование критериев диагностики
аутоиммунных заболеваний, потерявших свою актуальность в 1989 и 2010 году (аутоиммунный гепатит, первичный билиартный цирроз, системная красная волчанка).
Ошибки в содержании тестового задания по форме и структуре
Правильность определения тестов по уровню сложности. Несмотря на то, что в инструкциях и методических материалах достаточно четко определено, что такое тест на запоминание, на понимание, на применение, зачастую такого единого толкования сложности теста нет даже в рамках одной кафедры, в рамках одного вуза. Наиболее распространенным является обозначение тестов 1 уровня как соответствующих 2 и даже 3 уровню. В результате тесты 1 уровня достигают в некоторых базах тестов 58%, в то время как для оценки знаний интернов рекомендуется иметь в базе тестов на запоминание не более 10%.
Кроме того тест на запоминание может применяться для оценки знаний только по редкой патологии, включенной в Типовую учебную программу, но по которой интерн должен только иметь представление (то есть уровень компетенции -1). Превалирование тестов 1 уровня делает такую базу тестовых заданий непригодной для оценки уровня знаний интернов. Нереалистичное описание клинической ситуации. Тест содержит условие, в котором описана ситуация, которая не может быть в реальной клинической практике, то есть совершенно умозрительная. Наиболее часто имеется несоответствие между отдельными фактами. Например: в тесте, описывающий ревматоидный артрит,
продолжительность такого симптома как утренняя скованность не соотвествует указанным в условии лабораторным данным, поэтому определение активности становиться невозможным,
следовательно, невозможно ответить на поставленный вопрос о тактике лечения. Неструктуированная информация, неясная формулировка. Условие теста должно включать в себя все существенные факты, поданные структуировано (возраст, пол, место, жалобы, динамика, анамнез, объективные данные, результаты обследования и т.п.). Тесты могут быть перегружены несущественной информацией, существенная информация подана безсистемно. Такой тест сложен для восприятия.
Ошибки в формулировке вопроса и вариантов ответа. Наиболее частая ошибка в формулировке вводного вопроса — это вопросы открытого типа (например: «Мальдигестия может быть обусловлена: …»). Вводный вопрос должен быть сформулирован ясно и
четко, желательно с использованием слова «наиболее», поскольку экзаменуемому надо выбрать 1 наиболее правильный ответ из 4-5 вариантов правильных ответов.
Короткие вопросы с длинными вариантами ответов. Зачастую варианты ответов представлют собой предложение из 5-8 слов или представляют собой комбинацию из нескольких (повторяющихся в дистракторах) названий. Например: «Четырехкомпонентная терапия гломерулонефрита — это:
A) Цитостатики + антибиотики + нестероидные противоспалительные средства + антиагреганты
B) Цитостатики + нестероидные противоспалительные средства + антиагреганты + антикоагулянты
C) Цитостатики + кортикостероиды + антиагреганты + антикоагулянты
D) Нестероидные противовоспалительные средства + кортикоиды + антиагреганты + антикоагулянты
E) Цитостатики + антикоагулянты + антибиотики + антиагреганты»
Неоднородные дистракторы. В большинстве случаев под неоднородными дистракторами понимается, такая ситуация: например, вопрос стоит о выборе метода диагностики — однородность дистракторов выражается в том что все дистракторы должны быть про лабораторные методы или все — про инструментальные. Это действительно так. Но кроме того следует следить за тем, чтобы дистракторы были однородно сформулированы. Выделяющийся правильный ответ (правильный ответ намного длиннее дистракторов или более полный).
Использование торговых названий препаратов вместо международных непатентованных. Зачастую используются торговые названия препаратов, при этом есть тесты, в которых другое торговое название препарата используется как дистрактор (например, правильный ответ — «вольтарен», дистрактор -ортофен, оба препарата — торговое название диклофенака).
Проанализированные базы тестовых заданий сильно различались по общему числу и пропорции перечисленных выше ошибок, но все перечисленные ошибки были представлены во всех базах тестов. Число некорректных тестов составляет от 5-10% (в базах КазНМУ по терапии, инфекционным болезням, неврологии, клинической лабораторной
диагностике) до 40-50% (в базах других мед. вузов, клинической фармакологии).
Ошибки по структуре, форме тестовых заданий (условия, вводного вопроса и вариантов ответов) объясняются несколькими факторами: составители тестов либо не прошли обучения по тестологии, либо не овладели в полной мере техникой составления тестовых заданий; на кафедрах нет внутреннего контроля качества тестов, взаимопроверки, взаимообучения. Несоответствие тематики тестов и содержания ТУП, наличие устаревших тестов можно объяснить тем, что составители тестов не делают тесты de novo, а используют тесты (заимствованные без ведома настоящих авторов, тесты прошлых лет, скаченные из интернета), часто без какой-либо критического отношения, как к источнику тестов, так и к собственному плагиату, набирая необходимое общее
количество без соблюдения пропорции тестов по тематике ТУП и их качества.
в том числе и для проведения текущего и рубежного контроля — наиболее качественные из имеющихся тестов. Если тесты были отобраны без учета их соответствия действующей ТУП, и при этом тесты не соответствуют требованиям составлению тестов, то какой же уровень тестов для текущего, рубежного контроля, годовой аттестации?
Такое отношение свидетельствует о более глубоких проблемах в организации учебно-методической работы: ведь тесты для проведения итогового контроля и независимой экзаменации должны были бы быть отобраны из баз тестовых заданий, уже подготовленных в рамках УМКД каждой дисциплины
СПИСОК ЛИТЕРАТУРЫ
С.Кейс, Д.Свэнсон. Создание письменных тестовых вопросов по базисными клиническим дисциплинам. /под редакцией Булах И., Сироткина А., Мруги М. — Филадельфия, США, Национальный совет медицинских экзаменаторов, 1996.- 119 с.
Г.М. КУРМАНОВА, Ш.С. САДЫКОВА СЖ.Асфендияров атындагы Дазац ¥лттыцмедицинауниверситетi Терапия бойынша №1 интернатура жзне резидентура кафедрасы ИНТЕРНДЕРГЕ АРНАЛГАН ТЕСТ ТАПСЫРМАЛАРЫН Ц¥РАСТЫРУ КЕЗ1НДЕГ1 НЕГ1ЗГ1 ЦАТЕЛ1КТЕР
Тушн: О;у урдюшщ ГОСО-2006 интерндерге арналган тест тапсырмаларын курастыру кезiндегi негiзгi кателжтер бойынша жаца форматы ба;ылау-багалау куралдары ;орыныц толыгымен жацаруын, на;ты алганда ба;ылаудыц эртурлi децгешн — кунделiктi, аралы;, ;орытынды ба;ылауларды eткiзуге багытталган MSQ А-туршдеп тесттердщ улкен ;орын жасап шыгаруды талап етедi. Жалпы кeлемi 3376 тест курайтын тест тапсырмаларыныц бiрнеше ;орын сараптаудыц негiзiнде оларды курастырудагы негiзгi ;ателжтер аны;талды. Тест тапсырмаларыныц мазмунындагы ;ателжтер, курылымы мен жасалу туршдеп ;ателжтер, сонымен ;атар тест тапсырмаларын ;алыптасыру-курастырудагы ;ателжтер кeрсетiлген.
ТYЙiндi сездер: интернатурадагы о;ыту,MSQ тест тапсырмалары, тест тапсырмаларын курастырудагы ;ателжтер.
Resume: The new format of educational process demands a full recreation of base of control instruments, for the first time -the base of test tasks in MSQ format for carrying out different levels of control — current, boundary, final. 3376 tests from number of bases of test tasks for interns was enrolled in the analysis. The main errors are revealed: errors in test tasks contents, in structure and a form, and also errors of a formulation of test tasks. Keywords: internship, test tasks in MSQ format, errors in creation of test task.
G.M. KURMANOVA, SH.S. SADYKOVA THE TEST TASKS FOR INTERNS CREATION — MAIN ERRORS
1. РЕКОМЕНДАЦИИ ПО СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ MCQ
Типичные дефекты при составлении
тестовых заданий.
Баскакова И.В.
Центр образовательных технологий
КазНМУ им. С.Д. Асфендиярова
13.02.2015г.
2. Вопросы множественного выбора MCQ — Multiply Choice Questions)
• Сопоставление вариантов
• (вопросы А- типа)
• Тестовые вопросы с
одним НАИБОЛЕЕ
правильным ответом
• Расширенное
сопоставление вариантов
• (вопросы R-типа)
12.02.2017
Сделать
Показать, как
Знать, как
Знать
2
3. MCQ – вопросы множественного выбора
• Это тестовые вопросы, в которых условие задания
представлено с вводным вопросом и несколькими
вариантами ответов
• Среди всех вариантов ответов только один является
НАИБОЛЕЕ правильным
• Закрытые вопросы – с одним НАИБОЛЕЕ точным
ответом, отражающим суть явления, ведущий признак и
т.д.
• Эти вопросы используют преимущественно для
итогового контроля знаний по дисциплине.
3
4. Терминология
• Опции – варианты ответов
• Дистракторы – отвлекающие, неправильные
варианты ответов.
• Их функция — привлечь студентов, которые не
уверены в ответе.
• Существенные операции – число правильных
(эталонных) ответов.
5. Вопросы множественного выбора
• MCQ — с одним НАИБОЛЕЕ правильным
ответом (А-тип)
• Условие задания – вводный вопрос –
варианты ответов
• EMQ – Extended Matching Questions (R-тип)
• тема — варианты ответов — вводный вопрос
– условия заданий
Friedman et al., 1987; Norcini et al., 1985;
Scriven, 1991; Zelezkik et al., 1990
5
6.
• Мужчина 38 лет, инженер, госпитализирован в
многопрофильную больницу. Предъявляет жалобы на
коликообразную
боль
внизу
живота,
слабость,
полужидкий стул до 10 раз в сутки. Иногда обнаруживает
примесь крови в стуле. Результат проведенной
колоноскопии представлен на фото.
• Какой из перечисленных ниже предварительных
диагнозов НАИБОЛЕЕ вероятен?
1) болезнь Крона
2 ) язвенный колит
3 ) дизентерия
4) рак кишечника
5) синдром раздраженной кишки
7. Схема тестового вопроса с одним НАИБОЛЕЕ правильным ответом (основа – клинический случай)
Условие задание — относительно длинное
(максимум 7-8 строк)
Вводный вопрос ( со словом НАИБОЛЕЕ ) – пишется с новой строки
Дитстрактор 1
Дистрактор 2
Дистрактор 3
НАИБОЛЕЕ правильный ответ
Дистрактор 4
5 опций
(вариантов
ответов)
7
8. Выборка вопросов должна быть репрезентативной в отношении учебных целей
9. Конструирование базы тестовых заданий Матрица теста
Раздел
Удельный Запоминание,
вес, n ( %) n (%)
Раздел I
Тема 1
Тема 2
Тема 3
Раздел II
Тема 1
Тема 2
Тема 3
100%
Понимание,
n (%)
Применение
n (%)
10. 1. Каждое тестовое задание должно быть посвящено важной теме, т.е. распространенной или потенциально опасной клинической проблеме
• не тратьте время на вопросы, оценивающие
знание тривиальных фактов;
• ориентируйтесь на клинические ситуации или
проблемы, с которыми можно встретиться в
профессиональной деятельности (реальной
жизни);
• избегайте запутанных или излишне сложных
формулировок и вопросов .
11. 2. Каждое тестовое задание должно максимально оценивать способность применить знания, а не вспомнить изолированный факт.
• Условия тестовых заданий могут быть
относительно длинными.
• Варианты ответов (опции) должны быть
максимально короткими.
• В опциях НЕ должно быть информации,
дополняющей условия задания.
12. Хорошая основа для вопроса – клиническая ситуация.
• Мужчина, женщина, ребенок
возраст
профессия
предъявляет
жалобы
данные анамнеза
объективные данные
результаты диагностических исследований
…
• ВВОДНЫЙ ВОПРОС
13. Формулировка вопроса
• Вопрос должен быть сформулирован
корректно.
• Вместо «Поставьте диагноз»
• Какой из перечисленных ниже
предварительных диагнозов НАИБОЛЕЕ
вероятен?
14. Формулировка вопроса
• Вместо «Назначьте лечение, обследование и т.д.»
• Какое мероприятие из перечисленных является
НАИБОЛЕЕ целесообразным?
• Назначение какого лекарственного препарата из
перечисленных НАИБОЛЕЕ целесообразно?
• Какой из перечисленных методов обследования
является НАИБОЛЕЕ важным (первоочередным,
необходимым с т.з. дифференциальной
диагностики и т.д.)?
15. Формулировка вопроса
• Какая тактика ведения больного является
НАИБОЛЕЕ целесообразной?
16. Пример неудачного задания:
• Назовите жалобы больного при среднем кариесе:
• 1) наличие множественных меловидных симметричных пятен
на вестибулярной поверхности фронтальных зубов;
• 2) постоянные ноющие боли при накусывании на зуб;
• 3) кратковременные боли от химических, температурных
раздражителей, наличие кариозной полости;
• 4) продолжительные боли ноющего характера от
температурных раздражителей;
• 5) острые, приступообразные, ночные боли, иррадиирующие
по ходу ветвей тройничного нерва.
• Как оценить представленный вопрос?
• Дефекты при составлении задания?
• Как поднять когнитивный уровень вопроса?
17. Вопросы типа «сверху вниз»
• Вопросы типа «сверху — вниз» обычно проверяют
знание или запоминание!
• Стандартный шаблон:
• Ссылка на заболевание
вопрос о том,
какие признаки обнаружены у больного (как его
обследовать, чем лечить и т.д.).
НО!!!
В клиническом отношении вопросы имеют дефект,
поскольку больные редко называют врачу свое
заболевание, а потом спрашивают, каковы у них
жалобы и симптомы!!!
18. Вопросы типа «снизу — вверх»
• Вопросы типа «снизу — вверх»
классифицируются как вопросы на понимание
либо применение знаний, поскольку
построены в более клинически реалистичной
манере.
• Стандартный шаблон:
Жалобы, симптомы
определение
результаты обследования
заболевания,
диф. диагноз,
тактика лечения.
19. Как вариант:
Юноша 18 лет, обратился с жалобами на
кратковременные боли от химических раздражителей
в зубе нижней челюсти справа. Объективно: на
жевательной поверхности зуба 46 кариозная полость в
пределах плащевого дентина. Зондирование
болезненное по эмалево-дентинному соединению.
Какой из перечисленных диагнозов НАИБОЛЕЕ
вероятен?
Эрозия эмали
Некроз эмали
Средний кариес
Глубокий кариес
Клиновидный дефект
20. Формулировка вопроса
• Вопрос должен быть хорошо
сфокусирован!
• Достаточно ли сфокусирован вопрос?
• Условие тестового задания должно
ставить ясный вопрос, на который можно
ответить, не видя вариантов ответа.
21. Алгоритм составления задания в тестовой форме:
Сформулируйте вопрос и варианты ответов (опции).
Закройте варианты ответа листком бумаги.
Попросите опытного коллегу ответить на вопрос,
основываясь только на условии задания.
Перепишите условия задания или варианты ответа
(опции), если он не смог сделать этого.
22. Рекомендации:
• Не рекомендуется разрабатывать задания в
тестовой форме в одиночку.
• Необходимо коллегиальное обсуждение
каждого задания!
Прежде, чем включить задание в БТЗ, его
необходимо апробировать, оценить и
подкорректировать.
23. Дистракторы ( отвлекающие варианты ответов ) должны быть…
• гомогенны, т.е. относиться к той же
категории, что и правильный ответ
(например, все дистракторы – диагнозы,
анализы, методы лечения, прогнозы и т.д.);
• правдоподобны;
• грамматически последовательны;
• логически совместимы;
• приблизительно той же длины, что и
правильный ответ.
24. НЕ РЕКОМЕНДУЕТСЯ:
• Использовать А-тип тестовых заданий,
содержащие формулировки типа:
1) Какое из следующих утверждений
НЕ верно?
2) Что из следующего верно, КРОМЕ?
Как вариант:
Все перечисленное ниже верно, КРОМЕ:
25. 5. ИЗБЕГАЙТЕ!
• ВОЗНИКНОВЕНИЯ В ЗАДАНИЯХ
ТЕХНИЧЕСКИХ ДЕФЕКТОВ,
КОТОРЫЕ ДАЮТ ПРЕИМУЩЕСТВА
ОПЫТНЫМ В ТЕСТИРОВАНИИ СТУДЕНТАМ,
ИЛИ
ПРИВОДЯТ К ЧРЕЗМЕРНОЙ СЛОЖНОСТИ
ТЕСТОВЫХ ЗАДАНИЙ.
26. ТЕХНИЧЕСКИЕ ДЕФЕКТЫ ТЕСТОВЫХ ЗАДАНИЙ
• Дефекты, относящиеся к опытности в
тестировании.
• Дефекты, относящиеся к чрезмерной
сложности.
Вероятность правильного ответа на вопрос
должна зависеть от уровня знаний, а не от
опыта студента в тестировании!
27. Слишком длинная формулировка задания
В апреле месяце в поликлинику к окулисту обратился пациент 14 лет с
жалобами на светобоязнь в обоих глазах, сильный зуд и ощущение
инородного тела за веками. Данные жалобы беспокоят ежегодно в течение 3х лет, последнее обострение около недели. Травмы и переохлаждения
отрицает. Объективно: visusОU=1,0 Глазные щели слегка сужены,
симметричные. Умеренно выражены блефароспазм, светобоязнь, легкое
слезотечение. Кожа век не изменена. Поверхностная инъекция конъюнктивы
глазного яблока, патологического отделяемого нет. Конъюнктива хряща
верхнего века бледная с молочным оттенком, покрыта крупными
уплощенными плотными сосочковыми разрастаниями, напоминающими
«булыжную мостовую», в области лимба единичные серовато-бледные
возвышающиеся уплотнения. Роговица прозрачная. Какой из предлагаемых
диагнозов наиболее вероятен?
А) Острый бактериальный конъюнктивит
+В) Весенний катар
С) Эпидемический кератоконъюнктивит
D) Поллинозный конъюнктивит
Е) Аденовирусный конъюнктивит
28. Короткий вопрос и длинные ответы
Укажите правильное определение обмена веществ:
• 1. Это преобладание процессов ассимиляции над процессами
диссимиляции
• 2.+Комплекс биохимических и энергетических процессов,
обеспечивающих использование пищевых веществ для нужд
организма и удовлетворения его потребностей в пластических и
энергетических веществах
• 3. Повышение интенсивности энергетических процессов
• 4. Синтез необходимых веществ, их усвоение и использование для
роста, развития и жизнедеятельности организма
• 5. Реакция, связанная с распадом веществ, их окислением и
выведением из организма продуктов распада
29. Логические подсказки
Задачи гигиены:
1. Реабилитация больных
2. Изучение клинического течения болезни
3. Лечение болезни
4. Изучение функционального состояния
репродуктивной системы женщин
• 5. +Изучение природных и антропогенных
факторов, влияющих на здоровье человека
30. Неравнозначные по длине дистракторы
• Параноидная форма патологического опьянения характеризуется:
• * Наличием аффекта страха, иллюзорно – бредовым восприятием
окружающего, целенеправленной деятельностью, частичной
амнезией
• * Депрессивными проявлениями с суицидальными мыслями
• * Ощущение психического комфорта, эйфорией
• *Наличием фантастических сценоподобных галлюцинаций
• * Ощущение физического комфорта, благодушием
31. Правильный ответ – самый длинный
• Какая наиболее вероятная причина
развития полиорганной недостаточности и
нарушения системной гемодинамики при
панкреонекрозе?
• +A) Активация калликреин-кининовой системы и
цитокинов;
• B) Активация функции желез внутренней секреции;
• C) Активация протеолитических ферментов;
• D) Активация липолитических ферментов;
• E) Нарастающая эндогенная интоксикация
32. АБСОЛЮТНЫЕ ТЕРМИНЫ
• Использование терминов «всегда» или
«никогда» в некоторых вариантах ответов.
• Опытные в тестировании студенты
исключают такие варианты ответов, так как
они менее вероятны из-за абсолютности
утверждений.
33. Применение отрицания в вопросе
• При каких состояниях не сохраняется
ориентировка во времени и месте
пребывания:
• * Истерия
• * Делирий
• * Астения
• * Онейроид
• * Кататония
34.
• С учетом каких факторов разработаны
величины потребностей в пищевых
веществах и энергии?
• 1.+Пола, возраста и характера трудовой
деятельности
• 2. Профессиональной патологии
• 3. Влияния факторов внешней среды
• 4. Интенсивности обменных процессов
• 5. Только характера трудовой деятельности
35. Для профилактики опрелостей складки кожи новорожденного обрабатывают:
*+ Стерильным растительным маслом
* Физраствором
* Раствором фурацилина
* Раствором полиглюкина
* Спиртовым раствором
• Пример логической подсказки
36. Пример:
• Определите тактику при узловых не
верифицированных опухолевидных
образованиях в молочной железе:
динамическое наблюдение
гомеопатическая терапия
интрамаммарные тауфоновые блокады
секторальная резекция молочной железы со срочным
гистологическим исследованием+
37. ПОВТОРЕНИЕ СЛОВ
• Слово или фраза из условия задания повторяется
в правильном варианте ответа.
58-летний мужчина, госпитализированный в
психиатрическую клинику, растерян, возбужден,
воспринимает окружающий мир, как нереальный.
Это симптом …
1) Дереализации.
2) Деперсонализации.
3) Дезориентации.
4) Частичной потери памяти.
5) Сигнального возбуждения.
38. Пример задания
• Врач при осмотре больного в приемном покое выявил боли
по правому боковому каналу и в правой поясничной области.
При каком расположении червеобразного отростка
характерна данная локализация болей?
А) Тазовом расположении червеобразного отростка;
В) Типичном расположении червеобразного отростка;
С) Медиальном расположении червеобразного отростка;
D) Подпеченочном расположении червеобразного отростка;
+Е) Ретроцекальном расположении червеобразного отростка;
• Для какого расположения червеобразного отростка
НАИБОЛЕЕ характерна данная локализация боли?
39.
• Какая пища вызывает в организме
наименьший расход энергии при своем
специфически-динамическом действии?
• 1. Богатая белками
• 2.+Богатая углеводами
• 3. Богатая жирами
• 4. Богатая витаминами
• 5. Богатая минеральными веществами
40.
Дисфория это:
Расстройство восприятия
Расстройство самосознания
Расстройство познавательной деятельности
Расстройство эмоций
Расстройство ощущений
41. Тенденция к конвергенции
• Правильный ответ имеет наибольшее сходство с
элементами других вариантов ответа.
• В вариантах ответа, проставленных цифрами,
правильным, скорее, будет среднее значение, а
не крайние величины.
• В двойных вариантах правильным будет, скорее
всего, тот, который имеет наибольшее сходство с
дистракторами.
42. Словесная «мишура»
• Лицевая артерия выходит из-под края нижней
челюсти у переднего края жевательной мышцы и
направляется к медиальному углу глазницы.
Артерия имеет, как правило, извитой ход и на своем
пути отдает веточки к нижней и верхней губам (aa.
Labiales inferiores et superiores) заканчивается:
1) +угловой артерией (a.angularis)
2) поверхностной височной артерией
3) верхнечелюстной артерией
4) нижнечелюстной артерией
5) надглазничной артерией
43. Словесная «мишура»
• Околоушная слюнная железа расположена в
основном в занижнечелюстной ямке. Небольшая ее
часть распространяется кпереди от наружного
слухового прохода на латеральной поверхности
жевательной мышцы. Паренхима околоушной
слюнной железы содержит:
1) переднюю яремную вену
2) блуждающий нерв
3) +позадинижнечелюстную вену
4) лицевую вену
5) верхнюю щитовидную вену
44.
Больной 18 лет. Недавно перенесший тяжелую форму пневмонии с последующей
астенией. На свадьбе друга выпил 200 мл водки, быстро опьянел, речь стала
дизартричной, походка шаткой. Потом как будто бы отрезвел, встал из-за стола и
уверенным шагом вышел из комнаты на кухню. Не ответив на вопрос хозяйки, что ему
нужно, схватил нож и быстро вернулся к столу, где начал кричать, размахивать ножом.
Нападал на гостей, угрожал убийством, оказывал резкое сопротивление
удерживающим его. Лицо было бледным, зрачки расширены. Через 20 минут
успокоился и заснул на диване в соседней комнате. На следующее утро ничего не
помнил о случившемся.
Определите форму опьянения:
* средняя степень простого опьянения
* патологическое опьянение
* дисфорическая форма простого опьянения
* параноидная форма простого опьянения
*истерическая форма простого опьянения
45. ТЕНДЕНЦИЯ К КОНВЕРГЕНЦИИ
• Чем чаще любят рисовать дети?
1) Карандашом и ручкой.
2) Карандашом и фломастером.
3) Карандашом и кисточкой.
4) Ручкой и маркером.
Авторы тестовых заданий, как правило,
начинают с правильного ответа, а остальные
используют в качестве дистракторов!
46. Пример
• 337. Типы артерий в зависимости от строения
стенки:
• А)+эластический, мышечный и смешанный
• B) эластический, серозный и смешанный
• C) эластический, ретикулярный и смешанный
• D) эластический, гиалинованный и смешанный
• E) эластический, смешанный и серозный
47.
• Какие отделения можно располагать в
одном здании при централизованной
системе стройтельства:
• 1. +Терапевтические, кардиологические,
неврологические отделения
• 2. Психиатрические+детские
• 3. Туберекулезные+родильные
• 4. Инфекционные+хирургические
• 5. Кожно-венерологические+детские
48. . В каком случае чаще развивается гемолитическая болезнь плода:
• А) мать резус-отрицательная, плод резусположительный
• Б) мать резус-положительная, плод резусотрицательный
• В) мать резус-отрицательная, плод резусотрицательный
• Г) мать резус-положительная, плод резусположительный
• Д) мать резус-отрицательная, отец резусположительный
49. Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
• Варианты ответов являются длинными,
сложными или двойными.
• Нелогичный порядок вариантов ответа.
• Условия задания слишком сложны или
запутанны.
50. Пример задания:
• Для госпитального штамма сальмонеллы
характерно:
1) Чувствительность к антибиотикам.
2) Чувствительность к антибиотикам, резистентным к типовым
бактериофагам.
3) Резистентность к антибиотикам, чувствительность к типовым
бактериофагам, дезинфицирующим средствам.
4) Резистентность к антибиотикам, типовым бактериофагам,
дезинфицирующим средствам.
5) Чувствительность к антибиотикам, резистентность к типовым
бактериофагам, дезинфицирующим средствам.
Что делать???
Изменить формат ?
51.
• Антибиотикам какого ряда отдадите
предпочтение при лечении абсцесса
легкого?
• А. антибиотики пенициллинового ряда
• Б. полусинтетические пенициллины
• В. аминогликозиды
• +Г. цефалоспорины
• Д. антибиотики тетрациклинового ряда
52. Пример
• У мужчины 52 лет в течении 1 года отмечается
желтуха, анемия, периодический подъем
температуры тела с ознобом, снижение
массы тела. Какое наиболее информативное
обследование вы порекомендуете?
• а) МРТ с контрастированием +
• б) УЗИ брюшной полости
• в) рентгенография брюшной полости
• г ) компьютерная томография
• д ) онкомаркеры
53. Пример тестового вопроса
• Что из нижеперечисленного является
наименее грозным осложнением острого
аппендицита?
• А) Внутрибрюшное кровотечение;
• +В) Аппендикулярный инфильтрат;
• С) Периаппендикулярный абсцесс;
• D) Разлитой перитонит;
• Е) Пилефлебит
54. Какой признак септического шока наиболее соответсвующий?
а) температура выше 38ºС
б) температура ниже 36ºС+
в) гиповолемия
г) нарушения сознании
д) метаболический алкалоз
55. Формат «Все перечисленное верно, кроме …»
• Для госпитального штамма сальмонеллы верны все
перечисленные ниже признаки, КРОМЕ:
• 1) резистентности к антибиотикам;
• 2) чувствительности к типовым бактериофагам;
• 3) резистентности к дезинфицирующим средствам;
• 4) резистентности к типовым бактериофагам.
• Как оценить новый вариант задания?
• А может быть, не стоит его использовать?
56. Формат «Все перечисленное верно, кроме …»
• Для …….. синдрома характерны все перечисленные
ниже симптомы,
КРОМЕ: …
• Для (заболевание 1) и (заболевание 2) характерно
сходство всех перечисленных ниже клинических
признаков, КРОМЕ: …
• Для (название лекарственного препарата)
характерны все перечисленные ниже побочные
эффекты, КРОМЕ: …
57. Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
• Цифровые данные выражены
бессистемно.
• Таранно-пяточный угол в норме составляет:
• A) 10-20˚
• B) 20-30˚
• +C) 20-40˚
• D) 20-50˚
• E) 40-60˚
58.
• Чему равен расход энергии, связанный со
специфически-динамическим действием
пищи?
• 1. 5-8% от суточной калорийности
• 2. 10-15% от суточной калорийности
• 3.+10-15% от основного обмена
• 4. 15-20% от суточной калорийности
• 5. 15-20% от основного обмена
59.
• Какой процент суточных энергозатрат
должен компенсироваться за счет жира
для взрослого трудоспособного
населения?
• 1. 6-10%
• 2. 18-20%
• 3.+28-30%
• 4. 40-45%
• 5. 55-60%
60. Пример
• Аппендикулярный инфильтрат обычно
образуется на:
• А) 1-2 сутки
• В) 2-3 сутки
• +С) 3-5 сутки
• D) 7-9 сутки
• Е) 10-12 сутки
61. Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
• Использование неопределенных терминов
в вариантах ответа:
• «редко»
• «часто»
• «обычно»
• «иногда»
• «как правило» и т.д.
62. Пример задания в тестовой форме:
• Чаще всего острый аппендицит приходится
дифференцировать с:
• +А) Почечной коликой;
• В) Плевропневмонией;
• С) Инфарктом миокарда;
• D) Геморрагическим васкулитом;
• Е) Пищевой токсикоинфекцией
63. Необходимо избегать использования фраз:
«Ничего из перечисленного»;
«Все из перечисленного»;
«Все ответы правильные»;
«Все варианты верны»;
«Нет правильного ответа»;
«Лечения не требуется»;
«Наблюдения не требуется» и т.д.
в вариантах ответов.
64. НЕ рекомендуется использовать слова и фразы в вопросах:
Как Вы думаете…
Как, по Вашему мнению…
На Ваш взгляд…
Ваш диагноз…
Как Вы считаете…
Укажите…
Назовите…
Определите… и т.д.
65.
• Ваша тактика при выявлении случаев изготовления
продуктов питания с применением допущенных
пищевых добавок по рецептурам, несогласованным с
органами санитарного надзора.
• 1. Нет причин что-либо предпринимать
• 2. Запретить выпуск такой продукции
• 3. Разрешить реализацию продукции для взрослого
населения
• 4. Разрешить реализацию продукции лишь порционно в
системе общепита
• 5.+Разрешить реализацию продукции после
лабораторного исследования концентрации пищевых
добавок в изделии
66. Пример вопроса
• В какой ситуации аппендэктомия не
проводится, а операцию заканчивают только
лишь дренированием?
• А) При абдоминальном сепсисе;
• В) При распространенном перитоните;
• С) При периаппендикулярном абсцессе;
• D) При крайне тяжелом состоянии больного;
• +Е) При плотном аппендикулярном
инфильтрате;
67. Пример неудачного задания:
• Ребенку 4-х лет, проживающему в хороших бытовых условиях,
на основании клинико-эпидемиологических и
бактериологических данных выставлен диагноз
«Сальмонеллез, желудочно-кишечная легкая форма».
Ребенок может лечиться на дому.
• Сколько дней необходимо наблюдать за очагом
сальмонеллезной инфекции, если больной
госпитализирован?
А) 5 дней.
Б) 7 дней.
В) 14 дней.
Г) 21 день.
Д) Наблюдения не требуется.
68. Вопрос, сложный для восприятия
• Какова основная причина формирования
абсцесса Дугласова пространства после
операции аппендэктомии, выполненной
по поводу флегмонозной формы острого
аппендицита?
А) Отсутствие антибиотикотерапии;
В) Назначение малых доз антибиотиков;
С) Не подведение марлевого тампона;
+D) Неадекватная санация малого таза;
Е) Ушивание операционной раны наглухо
69.
• Укажите не деструктивную форму острого
аппендицита у детей?
• * Флегмонозная
• * Гангренозная
• * + Катаральная
• * Гангенозно-перфоративная
• * Некротическая
70.
• Укажите характерный признак для атрезии
пищевода:
• * рвота с рождения
• * + пенистые выделения изо рта при
рождении
• * кровотечение из пищевода
• * запавший ладьевидный живот
• * срыгивания створоженным молоком
71.
• ! Качество медицинской помощи –
• *уровень соответствия оказываемой медицинской помощи
стандартам и протоколам диагностики и лечения
• *уровень соответствия оказываемой медицинской помощи
потребностям пациентов;
• *+уровень соответствия оказываемой медицинской помощи
стандартам, утвержденным уполномоченным органом и
установленным на основе современного уровня развития
медицинской науки и технологии;
• *интегральный показатель соответствия оказываемой медицинской
помощи стандартам и протоколам;
• *уровень соответствия оказываемой медицинской помощи
индикаторам качества
72.
Здравоохранение – это
*+система мер политического, экономического, правового, социального,
культурного, медицинского характера, направленных на предупреждение
и лечение болезней, поддержание общественной гигиены и санитарии, сохранение и
укрепление физического и психического здоровья каждого человека, поддержание
его активной долголетней жизни, предоставление ему медицинской помощи в случае
утраты здоровья;
*совокупность государственных органов и субъектов здравоохранения, деятельность
которых направлена на обеспечение прав граждан на охрану здоровья;
*деятельность медицинских организаций, направленная на сохранение и укрепление
здоровья населения;
*совокупность медицинских организаций и система мер политического,
экономического, медицинского характера, направленных на предупреждение и
лечение болезней
73.
• Охлаждение новорожденных во время операции
вызывается всеми названными причинами, за
исключением:
• * незрелостью центров терморегуляции
• * инфузией и трансфузией холодных сред
• * полуоткрытым контуром и наружным
охлаждением
• *+ дыханием по системе Мэджилл — Мейплсона
• * перспирацией
74. Как вариант:
• Охлаждение новорожденных во время
операции вызывается всеми
перечисленными ниже причинами,
КРОМЕ:
* незрелости центров терморегуляции
* инфузии и трансфузии холодных сред
* полуоткрытого контура и наружного охлаждения
*+ дыхания по системе Мэджилл — Мейплсона
* перспирацией
Форматом «Все…КРОМЕ» нельзя злоупотреблять!
75.
• У новорожденных и грудных детей
*повышена чувствительность к деполяризующим и резистентность к
недеполяризующим релаксантам
*+повышена чувствительность к недеполяризующим,
*повышена чувствительность к недеполяризующим и
деполяризующим релаксантам
• *отмечается резистентность к недеполяризующим и
деполяризующим релаксантам
• *+имеется резистентность к деполяризующим релаксантам
76.
• Основная часть больных с атрезией пищевода
оперируется:
• *+в срочно- плановом порядке после завершения всего
комплекса обследования и тщательной
предоперационной подготовки в течение одних или
нескольких суток
• * по жизненным показаниям.
• * обязательно в первые сутки после рождения.
• * в экстренном порядке после предоперационной
подготовки
– часа) с момента поступления.
• *на вторые сутки после госпитализации.
77. Пример
• Если у 2-х дневного новорожденного ребенка на обзорной
рентгенограмме брюшной полости определяются два больших
газовых пузыря с горизонтальным уровнем жидкости, то Ваш
предварительный диагноз
• * пилоростеноз
• *+высокая врожденная кишечная непроходимость на уровне 12перстной кишки
• *низкая врожденная кишечная непроходимость
• *заворот средней кишки
• *высокая врожденная кишечная непроходимость на уровне
пилорического отдела
78.
• Мальчик 7 лет доставлен в экстренном порядке с жалобами на резкие
боли внизу живота, отсутствие самостоятельного мочеиспускания.
Мочеиспускание отсутствует в течение 10 часов. При осмотре
отмечается увеличенный и болезненный мочевой пузырь.
Предварительный диагноз?
• *фимоз
• *парафимоз
• *+камень уретры
• *опухоль мочевого пузыря
• *острый цистит
• Какой из перечисленных ниже предварительных диагнозов
НАИБОЛЕЕ вероятен?
79. Шаблон «сверху вниз»
• Мальчику 5 недель с весом 4.1 кг с истощающей рвотой
планируется выполнить пилоромиотомию.
• *+ у ребенка вероятно имеется гипокалиемия и алкалоз
• *+ при интубации нежелательно применять
сукцинилхолин
• *+ интубация должна проводиться с использованием
приема Селлика (давления на перстневидный хрящ)
• * у ребенка вероятно имеется гиперкалиемия
• * для этой патологии характерно развитие ацидоза
80.
• Какое первоочередное мероприятие, которое должен
сделать врач – терапевт при подозрения на
инфекционное заболевание?
• A) вызвать инфекциониста
• B) вызвать зам. главного врача
• C) +передать экстренное извещение
• D) провести дезинфекцию в кабинете
• E) направить в инфекционный стационар
81.
• В приёмный покой инфекционного стационара
одновременно обратились больные с диагнозами: ОРВИ,
ОКИ, вирусный гепатит.
• Как должен проводиться приём этих больных?
• A) первоочередно принимается больной с ОРВИ
• B) больной ОРВИ принимается в последнюю очередь
• C) все больные принимаются по очереди в одном боксе
• D) больные принимаются в машине скорой медицинской
помощи — ?
• E) +больные принимаются в разных боксах по механизму
передачи
82.
• У женщины, устраивающейся на работу в молокозавод,
при посеве кала обнаружена Sh. Flexneri. Клинически
здорова.
• Выберите наиболее правильную тактику врача?
• A) в лечении не нуждается
• B) диспансерное наблюдение
• C) назначить амбулаторное лечение
• D) *госпитализировать в инфекционное отделение
• E) контрольное бактериологическое обследование
83.
Мужчина 24 года доставлен с бригадой СМП в приемный покой ЦРБ с
диагнозом: острая кишечная инфекция. Заболел остро, 2 дня назад. Жалобы
на тошноту, рвоту 2 раза, ослабление стула 1 раз, постоянная усиливающаяся
боль в нижнем правом квадранте живота. При осмотре определяется резкая
болезненность и напряжение в правой подвздошной области без симптомов
раздражения брюшины, выслушиваются кишечные шумы. Количество
лейкоцитов 18 х 109/л. Активность амилазы сыворотки в пределах нормы.
Анализ кала на скрытую кровь отрицателен.
С каким заболеванием наиболее (НАИБОЛЕЕ)целесообразно провести
дифференциальную диагностику?
A) перитонитом
B) острым панкреатитом
C) +острым аппендицитом
D) острым холециститом
E) ущемление паховой грыжи
84.
• На профилактическом осмотре в одном из университетов
врач заметил у студента на коже лица, волосистой части
головы, туловища, конечностей пятнисто-папулезную,
везикулезную сыпь, местами покрытую корочками.
• Какова длительность срока наблюдения за контактными в
очаге?
• A) 5 дней
• B) 10 дней
• C) 14 дней
• D)+ 21 день
• E) 30 дней
85.
• Женщина 22 года, со сроком беременности 18-19 недель доставлена с
бригадой СМП в приемный покой ЦРБ. Заболела остро, 7 дней назад,
жалобы на тошноту, рвоту 1-2 раза, тяжесть в эпигастрии, потемнение
мочи. Эпид. анамнез: живет в частном доме, употребляет сырую воду
из колонки. Объективно: кожные покровы умеренный желтушной
окраски, склеры субиктеричные, печень под краю реберной дуги +2,0
см. Моча на желчные пигменты резко положительная, билирубин 120
ммоль/л, прямой 98 ммоль/л, АЛТ 463 ед/л(при нормы 44 ед/л),
тимоловая проба 15 ед.
• Куда госпитализируется беременная женщина?
• A) в обсервационное отделение роддома
• B) + в инфекционное отделение
• C) в терапевтическое отделение
• D) гастроэнтерологическое отделение
• E) в общую палату родильного отделения
86.
Мужчина, 32 лет, поступил в стационар 10 октября на 4-й день болезни.
Жалобы: на повышение температуры до 38,8ºС, озноб, слабость, головную
боль, боли в горле при глотании, насморк, жидкий стул до 3-х раз. В
анамнезе: не работает, живет в частном доме. При осмотре: состояние
средней тяжести. На коже туловища необильная пятнисто-папулезная сыпь.
Легкая субиктеричность склер. Зев: гиперемия слизистой оболочки,
миндалины увеличены, налетов нет. Увеличены шейные, подчелюстные,
подмышечные, локтевые лимфоузлы. Нижний край печени выступает из-под
реберной дуги на 1,5 см.
Какой предварительный диагноз из перечисленных ниже наиболее
НАИБОЛЕЕ вероятен?
A) + иерсиниоз
B) лептоспироз
C) сальмонеллез
D) вирусный гепатит
E) острый тонзиллит
87.
• При патронаже мать новорожденного ребенка жалуется
на шумное дыхание, отмечаемое с рождения и
усиливающееся при кормлении и беспокойстве. При
осмотре ребенка отклонений от нормы со стороны
внутренних органов не выявлено. Какое заключение
было сделано врачом? — ???????????????
• * Стеноз гортани
• * Бронхит
• * Трахеит
• * Ларингоспазм
• *+ Врожденный стридор
88. Как сфокусирован вопрос?
• При появлении на коже гнойных элементов и изменения
общего состояния новорожденные из группы риска по
возникновению гнойно-воспалительных заболеваний:
• *+ Госпитализируются в стационар
• * Лечатся на дому
• * Лечатся в дневном стационаре
• * Консультируются зав. отделением
• * Лечатся амбулаторно у хирурга
89. На данном рисунке изображены кривые распределения недельной учебной нагрузки школьников. Какой из вариантов неверный?
90. Варианты ответов
• На данном рисунке изображены кривые
распределения недельной учебной нагрузки
школьников. Какой из вариантов неверный?
1. На левом рисунке
2 +На правом рисунке
3. На обоих рисунках — ?
4. Ни на одном из рисунков -?
5. Зависит от возраста учеников -?
91.
• Стартовым раствором для выведения больного
из кетоацидотической комы является
• А) 2 % раствор глюкозы
• Б) 5 % раствор глюкозы
• В) 0,45 % раствор хлорида натрия
• Г) 0,9 % раствор хлорида натрия
• Д) 4,0 % раствор хлорида калия
92.
• Больной с сахарным диабетом 2 типа доставлен каретой скорой
помощи в бессознательном состоянии. Накануне отмечалась 3
кратная рвота, принимает мочегонные средства для лечения
сердечной недостаточности. Гликемия 30 ммоль/л. Кетонурии нет. С
чего следует начать лечение?
• А) С введения изотонических растворов
• Б) С введения гипотонических растворов
• Г) С введения раствора Рингера
• Д) Оральной регидратации
• Д) С введения гемодеза
• Введение какого лекарственного препарата из перечисленных
НАИБОЛЕЕ целесообразно в первую очередь?
93.
• На глазном дне описаны следующие изменения: множество
микроаневризм в парамакулярной области, неравномерное
расширение вен с перетяжками, новообразованные сосуды в
плоскости сетчатки, начальный фиброз без тракции сетчатки.
Поставьте диагноз.
• А) Непролиферативная диабетическая ретинопатия
• Б) Препролиферативная диабетическая ретитнопатия
• В) +Пролиферативная диабетическая ретинопатия
• Г) Гипертоническая ретинопатия
• Д) Диабетическая макулопатия
94. Хороший пример клинической ситуации
Ребенок на 8-й день жизни выписан из роддома. Матери 28 лет, по
профессии инженер-химик, курит. При сроке беременности 12 недель
перенесла грипп. Роды произошли в 37-38 недель. Слабость родовой
деятельности, безводный период 5 часов. Родился в асфиксии, 6-7 баллов, с
массой 2800,0, рост 48 см. К груди приложен через 12 часов, сосет вяло,
быстро засыпает. Физиологическая убыль 250,0. На 4-е сутки появился
интенсивный систолический шум во 2 межреберье слева у грудины и на
спине. Тахикардия.
Определите группу здоровья: — нужно переформулировать вопрос
*І
* ІІ
*+ ІІІ
* ІV
* V
95.
• Пациентка 35 лет предъявляет жалобы на головные боли,
периодические головокружения, мелькание «мушек» перед глазами.
При осмотре выявлена бледность кожи и слизистых оболочек. При
проведении общеклинического анализа крови на гематологическом
анализаторе были получены следующие результаты: RBC – 2,8х10 12 /
л, HB — 60 г/л, MCH – 21pg, MCV – 71fl, RET – 2%, LEU – 5,2 х109/л PLT 180х109.
• НЕТ ВОПРОСА
• Железодефицитная анемия
• Острая постгеморрагическая анемия
• В12, фолиево-дефицитная анемия
• Гемолитическая анемия
• Апластическая анемия
96.
• Пациентка 35 лет предъявляет жалобы на головные боли,
периодические головокружения, мелькание «мушек» перед глазами.
При осмотре выявлена бледность кожи и слизистых оболочек. Было
назначено проведение общеклинического анализа крови на
гематологическом анализаторе. Какие результаты, наиболее
вероятно, следует ожидать?
• RBC – 2,9*10 12 / л, HB — 70 г/л, MCH -23 pg , RET – 3%, MCV — 72fl
• RBC – 8,5*10 12 / л, HB — 180 г/л, MCH -21 pg, RET – 2%, MCV — 80 fl
• RBC – 5,5*10 12 / л, HB — 130 г/л, MCH -80 pg , RET – 1%, MCV -90fl
• RBC – 3,5*10 12 / л, HB — 90 г/л, MCH -21 pg, RET – 1%, MCV — 120 fl
• RBC – 1,5*10 12 / л, HB — 50 г/л, MCH — 30 pg, RET – 0,4%, MCV -70 fl
97.
Больной 28 лет поступил с жалобами на резкую слабость, отек лица, голеней, головную боль,
одышку. Эти жалобы появились внезапно через неделю после перенесенной ангины, одновременно
резко уменьшилось количество выделяемой мочи, которая имеет красновато-бурый цвет.
Анализ мочи:
Микроскопия мочи:
Суточное количество мочи – 300 мл.
Почечный эпителий – 5-6 в поле зрения,
Цвет — красно-бурый.
Лейкоциты – 4-6 в поле зрения,
Прозрачность — мутная.
Эритроциты более 100 в поле зрения,
Относительная плотность – 1030.
Цилиндры гиалиновые — 1-2-3 в поле
зрения,
Цилиндры зернистые –1-2-3 в поле зрения.
Белок – 4 г/л.
Какой из перечисленных диагнозов наиболее вероятен?
Острый пиелонфрит
Мочекаменная болезнь
Диабетическая нефропатия
Острый гломерулонефрит
Острый цистит
98.
• Назначение инсулина является
абсолютным показанием для одного из
нижеперечисленных состояний
• А) Сахарный диабет 1 типа
• Б) Сахарный диабет 2типа
• В) Нарушенная гликемия натощак
• Г) Гестационный сахарный диабет
• Д)Нарушенная толерантность к глюкозе
99.
• Укажите средство, ослабляющее гипогликемизирующее
действие сахароснижающих пероральных препаратов
• А) иАПФ
• Б) нейролептики
• В) глюкокортикоиды
• Г) производные салициловой кислоты
• Д) антикоагулянты непрямого действия
100.
• Один из нижеперечисленных критериев нарушений
углеводного обмена соответствует нарушенной
толерантности к глюкозе:
• А) натощак – <5,6; через 2 часа – <7,8
• Б) натощак – ≥6,1, через 2 часа – ≥7,8
• В) натощак –≥6,1, через 2 часа – ≥7,8 и <11,1
• Г) натощак – <6,1, через 2 часа – ≥7,8 и <11,1
• Д) натощак – ≥5,6 и <6,1ммоль/л, через 2 часа – <7,8
101. Методология разработки заданий в тестовой форме
• Б. Блюм или В.С.Аванесов?)))
102. Когнитивные уровни
по Аванесову В.С.
по Блюму Б.
Знание названий, имен и смысла названий и имен
Знание определений
Фактуальные знания
Классификационные знания
Ассоциативные знания
Сравнительные сопоставительные знания
Знание противоположностей, противоречий
Причинные знания, причинно-следственных отношений,
знание оснований, принципов классификации
Понимание
Алгоритмические знания
Процедурные знания
Технологические знания
Структурные знания
Применение
Обобщенные, системные знания
Оценочные знания
Вероятностные знания
Процессуальные знания
Абстрактные знания
Запоминание
Анализ
Синтез
Оценка
103. ЭТАПЫ РАЗРАБОТКИ ТЕСТА
По Аванесову В.С.
1. Теоретический этап: цели тестирования, выбор
подхода к созданию теста, изучение учебного материала
2. Практический этап -1:
•Определение структуры теста (спецификация теста)
•Разработка тестовых заданий
•Экспертиза тестовых заданий
•Корректировка тестовых заданий
•Конструирование теста для апробации: (определение
трудности ТЗ, количества, темпа выполнения и создание
композиции ТЗ в дидактическом тесте)
•Разработка инструктивно-методического обеспечения
теста: подготовка процедуры проведения теста, в том
числе: бланка заданий, бланка ответов, инструкции для
студента, инструкции для преподавателя, ключей тестов,
сценарий проведения тестирования.
•Экспертиза теста
3. Экспериментальный этап
•Предварительное тестирование
•Анализ и интерпретация результатов тестирования
(определение качественных характеристик тестов)
4. Практический этап -2
•Переработка теста на основе результатов
предварительного тестирования
•Составление окончательного варианта теста
•Стандартизация теста (при необходимости)
National Board of Medical Examiners (NBME)
1. Анализ работы
2. Разработка матрицы
•Определить контингент
•Определить цели тестирования
• Определить спецификацию теста (продолжительность,
количество ТЗ, формат ТЗ)
•Экспертиза матрицы и спецификации экспертной
комиссией
•Совершенствование матрицы и спецификации теста
3. Написание тестовых заданий
•Экспертная оценка содержания ТЗ
•Экспертная оценка формата ТЗ
•Претест
•Анализ статистических параметров претеста
•Коррекция тестовых заданий
•Решение о соответствии тестовых заданий матрице,
формату и др.
4. Формирование банка тестовых заданий
104. Формат тестовых заданий
по В.С.Аванесову
1. Задания закрытой формы
— с выбором одного правильного
ответа (количество вариантов не
менее 6)
— с выбором нескольких
правильных ответов (количество
вариантов ответов от 5 до 12)
National Board of Medical Examiners
(NBME)
1. Задания закрытой формы
множественного выбора
(верно/неверно, А-, K-, R-, N-, B- E –
типов)
2. Задания открытой формы
— на дополнение
— на соответствие
— на правильную
последовательность
2. Задания открытой формы
Эссе
Сочинения
Открытые вопросы
105. ТРЕБОВАНИЯ К СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ
• По Аванесову В.С.
National Board of Medical Examiners
(NBME)
•Соответствие матрице теста
•Соответствие формату ТЗ
•Правильность содержания и формулировки
определений, симптом и т.д.
•Соответствие правилу «закрытых ответов»
•Шаблон «снизу вверх»
•Относительно длинное условие и
относительно короткие варианты ответов
•Логическая последовательность
•Грамматическая правильность
•Содержательная и грамматическая
гомогенность дистракторов
•Краткость
•технологичность
•правильность формы
•правильность содержания
•логическая форма высказывания
•одинаковость правил оценки ответов
•наличие определенного места для ответов
•одинаковость инструкции для всех
испытуемых
•правильность расположения элементов
задания
•адекватность инструкции форме и
содержанию задания
Аванесов В.С. Основы педагогической
теории измерений // Педагогические
Измерения, 1, 2004г. С. 17.
«Guide to good practices
for the development of test
Items» U.S. Department of Energy FSC 6910
Washington, D.C. 20585
106. Экспертиза заданий в тестовой форме
• Рассмотрение на заседании тестового Комитета
(кафедра, профильный КОП)
• Повторная экспертиза по итогам апробации заданий в
тестовой форме
• Дистракторный анализ по итогам
проведения экзамена
107. Обратная связь по итогам 1 этапа экзамена
• Программное обеспечение -?
• Статистическая обработка -?
• Дистракторный анализ -?
• Уровень сложности
• Надежность
• Валидность
108. Статистические параметры уровня тестового задания
• Два основных понятия:
• Уровень сложности – степень «тяжести» задания (Р)
• Дискриминационная способность (индекс ID) – на сколько
«хорош» вопрос (тестовое задание)
0,35 – предпочтительно
Отрицательное значение не допустимо
Высокое «+» значение свидетельствует об эффективности деления испытуемых.
Является параметром критериальной валидности.
Кто лучше ответил на вопрос?
Сильные студенты?
Слабые студенты?
Все отвечают правильно?
Никто не отвечает правильно?
109. Для чего делается анализ задания?
• Контроль качества: дефектные компоненты (задания,
вопросы, дистракторы)
• Определение неудачных заданий:
пересмотр, замена, удаление
• По международным стандартам, из прошлогодней
базы должно остаться не более 15-20% ЛУЧШИХ
заданий в тестовой форме
110. От разработчика тестов и эксперта требуется:
• некоторая математико-статистическая подготовка
• знание основных тестовых теорий и методов
многомерного статистического анализа
• опыт правильной интерпретации тестовых результатов
• умение тактично обсуждать с авторами явные и скрытые
дефекты их заданий в тестовой форме
• психологическая готовность к совместному поиску
аргументов
• и…бесконечное терпение….
111.
• Вопросы?
• Благодарю Вас за внимание!
Разработка тестов
по учебной дисциплине
Методические рекомендации
для преподавателей
Методические рекомендации содержат
основные требования к разработке тестов для проведения внутреннего аудита
качества профессиональной подготовки обучающихся, образцы тестовых заданий,
перечень типичных ошибок, допускаемых преподавателями при составлении тестов. Предназначены
для преподавателей – составителей тестов. Методические рекомендации могут быть
полезны при разработке тестов для обучающихся учреждений начального, среднего и
высшего профессионального образования.
СОДЕРЖАНИЕ
Введение
- Педагогический
тест как контрольно-измерительный материал - Этапы
и общие требования к разработке теста - Виды
тестовых заданий - Типичные
ошибки, допускаемые при составлении вопросов к тесту - Внутренняя
экспертиза теста - Оформление
тестового материала и подготовка его к компьютерному варианту тестирования
Словарь
терминов
Список
рекомендуемой литературы
ВВЕДЕНИЕ
В связи с
модернизацией современного высшего образования, с введением ФГОС третьего
поколения, возрастают требования к повышению качества педагогического контроля,
ведется поиск его лучших форм и методов, его экономичности, оптимизации. Оценка
качества образования также на сегодняшний день является наиболее приоритетной
проблемой в образовательной деятельности. Новый стандарт предполагает также
переход на рейтинговую систему контроля и оценки знаний слушателей, в связи с
этим большое значение приобретает измерение результатов усвоения программного
материала.
Мониторинг
качества образовательной системы предполагает, прежде всего, регулярный сбор и
обработку информации об уровне профессиональных знаний, умений студентов. Одним
из основных инструментов оценки качества уровня обученности студентов является
тестирование вообще и компьютерное тестирование в частности, позволяющие дать
достаточно объективную нормативно-ориентированную оценку учебных достижений
обучающихся.
Каким содержанием наполнено понятие
«педагогический тест»? Какие классификации педагогических тестов существуют, и
какие критерии применяются для оценки качества педагогических тестов? В чем
преимущество тестовых форм контроля в процессе обучения? Что понимается под
термином «тестовое задание», и какие правила необходимо соблюдать при
составлении тестовых заданий? Как составить тестирование обучающихся при
подготовке к внутреннему тестированию в рамках внутривузовской проверки
качества профессиональной подготовки? Ответы на эти вопросы, а также конкретные
образцы тестовых заданий разного вида представлены в данном учебно-методическом
издании.
Педагогический
тест как контрольно-измерительный материал
Педагогический тест
является наиболее распространенным контрольно-измерительным материалом в современном
образовательном процессу в вузе. Педагогический тест — это совокупность
заданий, отобранных на основе научных приемов для педагогического измерения в
тех или иных целях.
Педагогический тест рассматривается как система, как
упорядоченное множество тестовых заданий. Задания — это те элементы,
«кирпичики» из которых составляется педагогический тест.
Почему именно тестирование
становится все более массовым явлением в процессе педагогического оценивания?
Опыт
использования тестов в качестве инструмента для оценивания позволяет выделить
многие его преимущества, в частности, тест:
· это
более качественный и объективный способ оценивания, что достигается путем
стандартизации процедуры проведения (отсутствие субъективной оценки на всех
этапах тестирования) и стандартизации заданий;
· более
емкий инструмент – показатели тестов ориентированы на измерение степени,
определение уровня усвоения ключевых понятий, тем и разделов учебной
программы, умений, навыков, а не на констатацию наличия у обучающихся определенной
совокупности усвоенных знаний;
· позволяют
включить в экзаменационную работу гораздо большее количество заданий;
· это
более «мягкий» инструмент, они ставят всех испытуемых в равные условия,
используя единую процедуру и единые критерии оценки, что приводит к снижению
нервного напряжения;
· широкий
инструмент – и с точки зрения интервала оценивания;
· более
эффективен с экономической точки зрения, так как при тестировании основные
затраты приходятся на составление качественного инструментария.
Было бы конечно
большой ошибкой считать, что педагогическое тестирование свободно от
недостатков. Применение педагогических тестов – эта та область знаний и умений,
которая поддается формализации. Но далеко не все учебные дисциплины или их
разделы формализуемы.
К недостаткам тестов следует отнести то, что тестовый
контроль лишает возможности слушателей самостоятельно формулировать ответы,
отсутствует возможность проявить свою индивидуальность, творчество.
Но
самый большой недостаток – это сложность разработки хороших тестовых заданий,
хотя на первый взгляд кажется, что с этим никаких трудностей быть не должно,
ведь тестовые задания разрабатываются преподавателями, хорошо знающими свой
предмет. На самом деле разработка педагогических тестов требует высокой
педагогической квалификации, научной компетенции и большого методического опыта
составления тестов преподавателем. В этой связи необходимо самое пристальное
внимание уделять повышению качества тестовых заданий.
При проведении тестирования учитываются три
критерия качества теста: надежность, валидность и объективность.
Надежность теста – критерий отражающий точность диагностических
измерений, а также устойчивость результатов теста к действию посторонних
случайных факторов. Надежность педагогического теста позволяет при его
применении в разных группах обучающихся с близким уровнем подготовки получать
примерно одинаковые результаты. Результат педагогического тестирования обычно
подвержен влиянию большого количества неучитываемых факторов (например,
эмоционального состояния и утомления, уровня мотивированности тестируемых и
др.). Любое изменение ситуации тестирования усиливает влияние одних и ослабляет
воздействие других факторов на результат теста.
В самом широком смысле надежность педагогического
теста – это характеристика того, в какой степени выявленные у слушателей
различия в уровне знаний по тестовым результатам являются отражением
действительных различий в измеряемых свойствах и в какой мере они могут быть
приписаны случайным ошибкам.
В более узком смысле, связанном с непосредственными
методами определения характеристик надежности, под этой группой показателей
понимают степень согласованности результатов теста, получаемых при первичном и
повторном его применении, по отношению к тем же тестируемым в различные моменты
времени, с использованием разных (но сопоставимых по характеру) наборов
тестовых заданий или при других измененных условиях тестирования.
Важнейшим средством повышения надежности
педагогических тестов является стандартизация процедуры тестирования.
При строгой регламентации процедуры тестирования (обстановка и условия работы
слушателей, характер инструкции, временные ограничения, способы и особенности
контакта со слушателями, порядок предъявления тестовых задач и т.д.)
существенно уменьшается дисперсия ошибки и повышается надежность теста. При
прочих равных условиях надежность теста зависит от числа заданий (длины теста)
– чем длиннее тест, тем он надежнее.
Валидность теста – это критерий, который определяет, что тест
измеряет и насколько хорошо он это делает. В понятии валидности отражается идея
соответствия педагогического тестирования его цели. Интуитивно все понимают,
что одно и то же можно проверять по разному. Отсюда возникает вопрос поиска
наиболее подходящего (валидного) средства, полнее, чем другие, удовлетворяющего
требованиям качества проверки.
В педагогических тестах наиболее важным типом
валидности является валидность по содержанию. При проверке
содержательной валидности речь идет об определении степени соответствия
содержания тестовых заданий содержанию учебного предмета, успешность усвоения
которого тестируется, то есть решается вопрос о том, в какой степени задачи
данного диагностического контроля успеваемости репрезентативны для содержания
учебной программы.
Для обеспечения валидности педагогического теста
требу-ется систематическая проверка того, насколько задания теста охватывают
все главные аспекты учебной программы и в правильной пропорции. Тест легко
перенасытить теми аспектами учебной программы, по которым легче составить
объективные задания. Поэтому рассматриваемое содержание следует фиксировать
заранее, а не после того как тест уже составлен. Правильно построенные
педагогические тесты должны соответствовать не только предмету обучения, но и
его задачам. Содержание, следовательно, необходимо определять достаточно
широко, включая в него помимо знания фактического материала такие важнейшие
цели обучения, как применение изученных принципов и интерпретацию данных.
Валидность также обеспечивается распределением тестовых заданий различной трудности
пропорционально уровню трудности учебного материала.
Валидность по содержанию закладывается в тест уже при
отборе соответствующих заданий. Для педагогических тестов подготовке их заданий предшествует
полная систематизированная проверка соответствующих учебников и учебных
программ, а также консультации со специалистами по данному предмету. На основе собранной таким путем информации
составляется спецификация теста для тех, кто будет составлять задания. В
спецификации указываются тестируемые области содержания (темы), задачи
(процессы) обучения, а также относительное значение каждой темы и процесса. На
этой основе по каждой теме устанавливается число заданий различных типов.
(Более подробно вопрос составления спецификации будет рассмотрен ниже).
Надежным средством обеспечения валидности теста
является экспертная оценка тестовых материалов, которая проводится экспертами
из числа наиболее квалифицированных специалистов-предметников и специалистов в
области тестирования. Конкретные задания оцениваются экспертами по принципу их
близости к реальным требованиям. Эксперты выносят суждение о том, охватывает ли
тест репрезентативную выборку конкретных навыков и знаний исследуемой области
обучения.
Валидность по содержанию является адекватным средством
оценки педагогических тестов. Она позволяет установить, охватывает ли тест
репрезентативную выборку конкретных навыков и знаний и свободно ли выполнение
теста от влияния посторонних факторов.
Следующий важный критерий качества педагогического
тестирования — объективность, то есть независимость получения и
интерпретации диагностических данных от преподавателя. Объективность
педагогического тестирования является важным синтезирующим критерием,
включающим в себя идеи надежности, валидности, кроме того, ряд аспектов педагогического
и этического характера.
Педагогический аспект повышения объективности
педагогического тестирования проявляется в использовании стандартных тестовых
программ, технических средств контроля, в первую очередь использование
компьютерных технологий в организации проведения педагогического тестирования.
Этический аспект объективности охватывает широкую
область морального регулирования. Результаты педагогического теста могут
оказаться полностью или частично неадекватными поставленной цели, если допускается
списывание, подсказки со стороны слушателей, репетиторство (но не всякое, а
«натаскивание»), снисходительность или, наоборот, чрезмерная требовательность
преподавателей.
Таким образом, результаты педагогического теста
зависят от соблюдения всех вышеназванных требований, которые обеспечивают
получение адекватных и достоверных оценок знаний слушателей.
2.
Этапы составления и общие требования к разработке теста
В данном разделе представлены
основные этапы составления теста.
В разработке педагогических тестов можно выделить три
этапа: планирование, написание заданий и анализ заданий (см. Рис.1).
Перед разработкой теста необходимо четко иметь
представление о требованиях к знаниями, навыкам и умениям обучающихся по данной
учебной дисциплине. Эти требования определены в соответствующих Государственных
образовательных стандартах, предметных квалификационных характеристиках и
типовых учебных программах. Первый шаг в планировании теста – это анализ данных
документов. Задания теста должны в полной мере выявить степень овладения
требуемыми знаниями, навыками и умениями.
Составитель теста, начинающий с написания задания,
скорее всего, создаст узконаправленный тест. Без предварительного плана
некоторые темы изучаемого предмета могут занять слишком много места, в то время
как другие останутся незатронутыми.
Рисунок 1 . Этапы разработки теста
Во избежание несбалансированности и диспропорции
охватываемых тестом тем составлению заданий должна предшествовать разработка
его спецификации.
Спецификация теста является обязательной операцией
эмпирического анализа теста и необходимым условием создания нового теста.
Спецификация заключается в том, что строится таблица, в которой указываются:
·
номера заданий и их
принадлежность к субтестам;
·
направленность заданий;
·
сложность, трудоемкость,
вес заданий;
·
какую из характеристик
каждое из заданий конкретно диагностирует.
При подготовке тестов подобную спецификацию следует
начать с описания целей изучения данного предмета, а также охватываемого этим
предметом содержания. Перечисляя цели, создатель теста должен спросить себя, к
каким изменениям в поведении ведет освоение изучаемого предмета: скажется ли
оно на привычных способах работы, на способе решения задач, на способностях,
интересах и других характеристиках, а также на приобретении и развитии
интеллектуальных навыков.
В табл.1 приведена спецификация теста по дисциплине «Зоогигиена
с основами проектирования животноводческих объектов», состоящего из 116 заданий.
В левой колонке перечислены 11 тем, или содержательных категорий, которые
должны быть охвачены тестом. В верхней части таблицы приведены также 4
тестируемые учебные цели или типа обучения. Вся таблица дает предоставление о
желательном числе заданий относительно содержания и целей обучения. Число
заданий соответствует важности и широте каждой темы и целям ее изучения. Если
конкретная цель или тип обучения данной темой не затрагиваются, то задание в
соответствующей клетке таблицы отсутствует. В вертикальных и горизонтальных
рядах таблицы представлены относительный вес каждой темы и цели обучения во
всем тесте. Часто эти веса устанавливаются заранее, что позволяет
проконтролировать охват заданием тем и целей обучения, не устанавливая сквозную
классификацию индивидуальных заданий.
Таблица 1
Пример спецификации теста по дисциплине
«Зоогигиена с основами проектирования
животноводческих объектов»
|
Изучаемое содержание |
Учебные цели |
Всего |
|||
|
Знание основных терминов |
Понимание целей и принципов |
Навыки по мониторингу и оценке |
Расчет и управление параметрами |
||
|
1.Предмет и задачи гигиены и зоогигиены, как раздела медицины и |
3 |
2 |
— |
— |
5 |
|
2.Факторы природно- территориального комплекса и их влияние на |
5 |
4 |
3 |
— |
12 |
|
3.Зоогигиенические требования к почве и санитарная охрана её от |
4 |
4 |
4 |
— |
12 |
|
4.Зоогигиеническое значение воды. Гигиена водоснабжения и поения |
3 |
3 |
3 |
3 |
12 |
|
5.Гигиенические требования к кормам и кормлению с. х. животных |
4 |
2 |
2 |
2 |
10 |
|
6.Требования к санитарно- техническому оборудованию животноводческих |
4 |
2 |
2 |
2 |
10 |
|
7.Гигиена содержания крупного рогатого скота |
5 |
5 |
3 |
2 |
15 |
|
8.Гигиена содержания свиней и птицы |
3 |
3 |
2 |
2 |
10 |
|
9.Гигиена содержания овец |
3 |
3 |
2 |
2 |
10 |
|
10.Гигиена содержания лошадей |
3 |
3 |
2 |
2 |
10 |
|
11.Гигиена содержания кроликов и пушных зверей |
3 |
3 |
2 |
2 |
10 |
|
ИТОГО |
40 |
34 |
25 |
17 |
116 |
Исходным моментом составления
тестовых заданий является выделение общей цели, преследуемой тестовым заданием.
Такие цели должны предусматривать требование от обучаемого:
а) простого воспроизведения знаний, анализа и
сравнения данных. Постановка таких вопросов в заданиях позволяет проверить
усвоение слушателями материала на уровне запоминания, тренирует память;
б) анализа признаков понятия. При этом выявляется
умение обучаемых находить общее и специфическое в изучаемом материале, отделять
существенные признаки от несущественных, родовые от видовых, способствует
развитию аналитического мышления;
в) умения распознавать схемы, рисунки;
г) понимания функций, выполняемых различными органами
(звеньями, приборами, устройствами и т.п.), и процессов взаимодействия между
этими органами. Вопросы такого типа позволяют проверить умение слушателя
вскрывать определенные причинно-следственные связи и отношения, оценивать роль
и значение данного органа для процессов, происходящих во всей системе;
д) приведения в логическую последовательность
элементов множества, расположенных в беспорядке, т.е. умения решать
определенного класса задачи, требующие обнаружить последовательность
расположения элементов в информационном ряде объектов, тактических приемов,
например, в следственном действии либо оперативно-розыскном мероприятии;
е) творческого подхода к рассматриваемым проблемам и
вопросам, умения применять полученные знания в условиях той или иной ситуации.
При создании
тестов для проверки остаточных знаний на основании ФГОС ВПО по соответствующей
дисциплине или для проверки итоговых знаний студента на основании программы
дисциплины прежде всего определяется область содержания теста и цели
тестирования. План теста для промежуточного контроля знаний должен охватывать
знания, умения и навыки по одной или нескольким дидактическим единицам, для
итоговой аттестации – по всем дидактическим единицам дисциплины в соответствии
с программой дисциплины, для проверки остаточных знаний по всем дидактическим
единицам дисциплины в соответствии с ФГОСом по специальности.
Преподавателю следует ориентироваться на следующие
принципы отбора содержания тестовых заданий для тестов:
1. Содержание теста должно
соответствовать содержанию учебной дисциплины. Задания теста должны в
правильной пропорции охватывать все важные аспекты области содержания.
2. Необходимо включение в
тесты только наиболее важных, базовых знаний, выражающих сущность, содержание,
законы и закономерности рассматриваемых явлений. Все спорные точки зрения,
допустимые в научном споре, следует исключить из тестовых заданий.
3. Каждый учебный элемент
должен иметь некоторую усредненную меру трудности, которую необходимо учитывать
в процессе контроля знаний.
Эксперты,
определенные на кафедре, оценивают соответствие заданий области содержания и
целям тестирования. Проводится внутреннее пробное тестирование преподавателями
кафедры. Осуществляется предварительная корректировка теста. Определяется время
тестирования студентов. Рекомендуемая продолжительность ответа на тестовое
задание составляет 1,5 минуты.
На основании анализа
статистических параметров по каждому заданию и тесту в целом производится
повторная корректировка теста – удаляются неудачные задания, если необходимо —
составляются новые.
Производится выбор
стандартов оценивания экспертными и эмпирическими методами. Выполняется оценка
надежности теста и содержательной валидности (соответствия заданий содержанию
дидактических единиц). Составляется окончательный вариант теста и его
параллельных форм. Тиражируется сам тест и связанный с ним материал (если
используется бумажный вариант тестирования). При подготовке теста к
компьютерному тестированию готовится бумажный и электронный вариант теста и
заносится в тестовую оболочку программистом компьютерного класса.
Виды
тестовых заданий
Существует ряд требований к тесту организационного
характера:
- тестирование осуществляется главным образом через
программированный контроль, никому не дается преимуществ, все отвечают на
одни и те же вопросы в одних и тех же условиях; - оценка результатов производится по ранее
разработанной шкале;
·
применяются необходимые меры, предотвращающие искажение результатов
(списывание, подсказку и утечку информации о содержании тестов)
При разработке теста целесообразно
использовать различные виды тестовых заданий. В частности:
·
Задания с выбором одного правильного ответа (ВО)
·
Задания с выбором нескольких правильных ответов (МВ)
·
Задания на установление правильной последовательности (УП)
·
Задания на установление соответствия (УС)
·
Задания с кратким ответом (КО)
Общие требования к
тестовым заданиям разного типа
·
Текст задания должен исключать всякую двусмысленность и неясность
формулировок.
·
Текст задания формулируется предельно кратко, т.е.
освобождается от всякого постороннего для данной
проблемы материала. Текст задания должен иметь предельно простую синтаксическую
конструкцию.
·
В задании не используются слова, вызывающие различное
понимание у испытуемых, а также слова, являющиеся
подсказкой, например, «иногда», «часто», «всегда», «все», «никогда».
·
В заданиях, носящих составной характер, необходимо обеспечить
такую последовательность, чтобы правильность выполнения одного
задания не зависела от правильности выполнения другого задания данной группы.
·
В тексте задания исключается двойное отрицание.
·
Задания должны быть направлены на проверку значимых элементов
содержания, а не тех, которые проще формулируются или просты в обработке.
·
Используемая в заданиях терминология не должна выходить за
рамки учебной литературы, используемой в вузе
Требования
к дистракторам :
·
По возможности, не следует делать ответы длинными;
·
Одно и то же слово (или словосочетание, или однокоренное
слово) не должно находиться в тексте задания и правильном ответе;
·
Все ответы должны быть подобными (аналогичными, похожими),
это касается и их внешнего вида, и грамматической структуры.
·
В вариантах ответа на задания желательна краткость;
·
Ответы на основу задания должны быть сформулированы
достаточно просто, чтобы были понятны существенные различия между ними;
·
Каждый дистрактор должен быть правдоподобным, внушающим
доверие, вполне убедительным и привлекательным для экзаменующихся;
·
Правильный ответ должен быть ясен, краток, правилен и
свободен от подсказок (как внутри текста задания, так и вне его);
·
Ответы должны быть одинаковы по длине (хотя бы
приблизительно), не следует формулировать правильный ответ заметно длиннее или
короче, чем дистракторы;
·
В дистракторах не следует использовать слова или технические
термины, которые экзаменующийся не может или не должен знать;
·
При формулировке дистракторов не следует использовать
выражения: «ни один из перечисленных», «все перечисленные» и т.д., так как они
способствуют угадыванию правильного ответа;
·
Из дистракторов, как правило, исключаются все повторяющиеся
слова путем ввода их в основной текст задания;
·
Все ответы должны быть грамматически согласованными с
основной частью задания;
·
Если ответ выражен в виде числа, то, как правило, эти числа
располагаются от меньшего к большему или наоборот.
Далее представлены требования к содержанию тестовых заданий
разного типа.
Задания
с выбором одного верного ответа (ВО)
Общие
требования
— Формулировка основной части задания, должна быть
законченной
— В заданиях базового уровня в ответы целесообразно включать
не более двух-трех важных, ключевых слов, при этом правильный ответ не должен
отличатся какими-либо формальными признаками от неправильных ответов
(дистракторов).
— В заданиях базового уровня не должно требоваться выбрать
один НЕПРАВИЛЬНЫЙ ответ при наличии нескольких правильных.
— Из текста задания исключаются все словесные ассоциации,
способствующие выбору правильного ответа с помощью догадки.
— Если имеется задание с отрицаниями, то частицу НЕ или
слово, выражающее отрицание, необходимо выделить в тексте (жирным текстом с
подчеркиванием).
— Задания должны иметь одинаково правдоподобные дистракторы
(ответы), одинаково привлекательные для выбора.
— Исключаются ответы, вытекающие один из другого или
дополняющие друг друга.
Задания с выбором одного
верного ответа (ВО)
Примеры заданий:
Функция живого вещества, связанная с преобразованием
физико-химических параметров среды, называется …
A.
средообразующей
B.
транспортной
C.
деструктивной
D.
концентрационной
Различные типы заданий с
выбором ответа
Примеры заданий ВО
в повествовательной форме ( в виде суждений)
Аппаратом
сухой, инерционной очистки газов от пыли является…
1)
циклон
2)
скруббер
3)
волокнистый фильтр
4)
электрофильтр
Регулярное
наблюдение и контроль за состоянием окружающей среды;
определение
изменений, вызванных антропогенным воздействием,
называется
экологическим …
1)
мониторингом
2)
аудитом
3)
страхованием
4)
нормированием
Задания на отрицание
В архейскую эру НЕ существовало…
A. беспозвоночных
животных
B. цианей
C. анаэробных
бактерий
D. одноклеточных
водорослей
Примеры заданий с
рисунком
Об экологической чистоте
товара и о безопасности его для человека и окружающей среды указывает знак
экологический маркировки…
|
|
||||||
|
|||||||
|
|||||||
На представленном рисунке
показана схема…
|
1)оборотного
водоснабжения ГЭС
2) очистки газовых выбросов ТЭС
3) работы АЭС
4) очистных
сооружений ЦБК
Примеры заданий
формы множественный выбор «два из пяти»
(МВ):
К цветковым растениям относятся…
A. одуванчик
лекарственный
B. рябина
обыкновенная
C. ель
европейская
D. сосна
обыкновенная
E. плаун
булавовидный
Примеры
заданий формы множественный выбор «три
из шести»(МВ):
В.И.
Вернадский выделял такие виды веществ в биосфере, как…
1)
живое
2)
косное
3)
биоксное
4)
твердое
5)
мертвое
6)
автотрофное
Пример задания
формы установление последовательности (УП):
Расположите биоценозы в
той последовательности, в которой они сменяют друг друга в процессе сукцессии…
1)
пожарище
2)
кустарник
3)
смешанный лес
4)
ельник
Установите правильный порядок действий при выделении
хлоропластов методом центрифугирования…
1)
поставить центрифужные пробирки в центрифугу
2)
измельчить лист растения ножницами
3)
растереть растительную навеску в ступке при помощи пестика
4)
уравновесить центрифужные пробирки
5)
включить центрифугу на определенное время и определенное количество оборотов
Задания
на установление соответствия (УС)
Общие
требования
Задания
контролируют умение установить соответствие между объектами или процессами
и описанием их свойств и признаков. Задания на установление
однозначного или множественного соответствия начинаются
со слов: «Установите соответствие…».
Задание
формулируется так, чтобы содержание можно было выразить в виде двух
множеств с соответствующими названиями. Элементы первого
столбца обозначаются цифрами и располагаются слева, а элементы
второго обозначаются буквами русского алфавита и располагаются справа. Для
каждого столбца вводится определенное название, обобщающее все элементы
столбца. Название столбца записывается заглавными буквами. Элементы
столбцов должны быть выбраны по одному основанию.Для заданий на однозначное
соответствие необходимо, чтобы второй столбец содержал
не менее одного дистрактора.
Для
всех учебных предметов используется одинаковый формат ответов, представленный
ниже.
Пример задания
формы УС:
Установите соответствие
между группами растений по отношению к свету и признаками растений:
|
ПРИЗНАКИ |
ЭКОЛОГИЧЕСКИЕ ГРУППЫ РАСТЕНИЙ |
|
1) |
А) |
|
2) |
Б) |
|
3) |
|
|
4)Не |
|
|
5) |
|
|
6) |
Задания
открытой формы
Общие
требования
В заданиях открытой формы
не используются готовые варианты ответов. В них испытуемому нужно дополнить
недостающее слово (группу слов, формулу, число, знак и др.), которое
свидетельствует о его знании.
Существует большое
разнообразие типов заданий в открытой форме.
Задания открытой формы подразделяются на задания с
коротким ответом и задания с развернутым ответом или эссе.
В практике массового педагогического тестирования в
основном применяются следующие модификации заданий открытой формы:
· задания
с коротким ответом (КО);
· задания
на завершение утверждения (ЗУ);
· задания
на заполнение пробела (ЗП);
· задания
на завершение (или на конструирование) графического объекта (диаграммы,
графика, схемы).
Примеры
заданий формы КО:
1). Если ПДК нитратов для
человека составляет 3,05 мг/кг в сутки, то для человека массой 68 кг допустимо
поступление в организм этих веществ до ___ мг.
Ответ: 207
2). Если норматив платы
за выброс 1 тонны фенола в атмосферу в пределах установленных лимитов
составляет 3,415 тыс. руб., то при выбросе предприятием 22 тонн данного
загрязняющего вещества, выплаты составят ______ тыс. рублей.
Ответ: 75
Задания на завершение утверждения
Представленный ниже график иллюстрирует
закон _________________.
|
|||
|
|||
Изображенная на рисунке модель
иллюстрирует закон _______.
Типичные
ошибки, допускаемые при
составлении
вопросов к тесту
При составлении тестовых
заданий разработчикам следует не только придерживаться определенных правил к
формулировке заданий, правильных ответов и дистракторов, но и избегать
основных, наиболее типичных неточностей и ошибок при их написании. Наиболее
часто встречаются следующие нарушения требований и определенных критериев при
написании тестовых заданий.
Следует избегать составлять
задания, которые проверяют
больше чем одну идею, проблему, концепцию. При этом в правильном ответе и
дистракторах не должно содержаться разное количество элементов ответа:
Важнейшими экологическими
последствиями глобального загрязнения атмосферы являются …
1) кислотные
осадки и парниковый эффект
2)
демографические параметры
3)
извержения вулканов
4)
естественные сукцессии
В
правильном ответе и дистракторах содержится разное количество элементов
ответа:
В ходе световой фазы фотосинтеза
происходит…
1) фотолиз воды и выделение свободного кислорода
2)
фиксация углекислого газа
3)
использование энергии АТФ
4)
синтез глюкозы
К
липидам относятся…
1) стероиды, терпены, воска и фосфолипиды
2)
только стероиды
3)
только терпены
4)
только фосфолипиды
Из
дистракторов, как правило, исключаются все повторяющиеся
слова путем ввода их в основной текст задания, например:
|
Неправильно |
Правильно |
|
Области 1) 2) 3) 4) |
Области концентрации живого вещества на 1) 2) 3) 4) |
Часть
ответа лучше вынести в вопрос, например:
|
Неправильно |
Правильно |
|
Для изучения тонкой структуры клеточных 1) 2) 3) 4) |
Для изучения тонкой структуры клеточных наиболее 1) 2) 3) 4) |
Все
ответы должны быть грамматически согласованными
с основной частью задания. Например, наблюдается несоответствие родов или
падежей:
Круговорот веществ, движущей силой
которого является деятельность живых организмов, называется …
1) биологическим
2) большой
3) геологический
4) антропогенным
Не
все иностранные фамилии можно склонять по падежам.
|
Неправильно |
Правильно |
|
Роль 1) 2) 3) 4) |
Роль микроорганизмов в питании растений 1) 2) 3) 4) |
Все
ответы должны быть грамматически согласованными
с основной частью задания. Например, может наблюдаться несоответствие чисел
(единственное и множественное):
|
Неправильно |
Правильно |
|
Пространство, на 1) ареалом 2) площадью 3) зонами 4) территориями |
Пространство, на 1) ареалом 2) площадью 3) зонами 4) территориями |
Не
допускается использование словосочетаний: ни один из перечисленных выше; все
перечисленные; все, кроме…
Основные способы приспособления организмов
к условиям
окружающей
среды –это …
1)
активный путь, пассивный путь, избегание неблагоприятных воздействий
2) все перечисленные, кроме активного пути
3) только активный путь
4) ни один из перечисленных вариантов ответа не верен
Ответы
должны быть одинаковы по длине (хотя бы приблизительно),
не следует формулировать правильный ответ заметно длиннее или короче, чем
дистракторы. Следовательно, правильный ответ не должен отличаться внешне по
длине от дистракторов:
Для защиты атмосферы от загрязнения
проводят …
1) очистку выбросов предприятий от вредных примесей с помощью
газоулавливающих средств
2)
интродукцию растений
3)
рекультивацию земель
4)
мелиоративные мероприятия
Не
следует в качестве дистракторов приводить понятия, явно
не имеющие отношения к предмету тестирования:
Для физико-химической очистки сточных вод
используют …
1)
адсорбер
2) автобус
3) автомат
4) аттестацию
Не
следует разрабатывать тестовые задания на несоответствие
современным научным достижениям или использовать устаревшую информацию:
В
настоящее время количество населения на планете составляет ________ человек.
1)
5 млрд.
2) 3 млрд.
3) 500 млн.
4)100 млн.
Не следует формулировать
задание в виде вопроса:
|
Неправильно |
Правильно |
|
Что содержится в файле с расширением obj?
|
Файл с расширением obj
|
Внутренняя
экспертиза теста
Каждому эксперту выдаются следующие материалы:
- Спецификация и план теста
- Инструкция по экспертизе
- Формы для заключения об экспертизе и записи
решений
В процессе экспертизы проводится следующая работа:
- Выполняется каждое задание теста (указывается
правильный ответ, приводится решение задания, где необходимо) - Анализируются формулировки задания (проверяется
предметная корректность формулировок) - Анализируется содержание заданий на их
тематическую принадлежность и уровень сложности (базовый, повышенный или
высокий) - Формулируются замечания каждому из заданий, в
конструктивной форме с предложениями, что и как необходимо изменить. - Формулируется заключение о пригодности теста для
использования
Спецификация теста включает:
- Цель создания теста, обоснование выбора подхода к
его созданию, описание возможных сфер его применения. - Перечень нормативных документов (базисных
программ, требований к уровню подготовки выпускников и др.), используемых
при планировании содержания теста. - Количество заданий различной формы с указанием
числа ответов к закрытым заданиям, общее число заданий в тесте. - Вес каждого задания, рекомендуемый автором теста.
- Рекомендуемое время выполнения теста, среднее
время выполнения одного задания с учетом специфики формы. - Охват требований государственных образовательных
стандартов по дисциплине.
Требования к экспертной комиссии и
процедуре экспертизы качества теста
- Оценка качества содержания теста проводится
независимыми экспертами, не участвовавшими в разработке теста. Число
экспертов составляет не менее 3-х человек — наиболее опытные
преподаватели, с большим стажем работы. - В комплект материалов для экспертизы должен
входить перечень требований к уровню подготовки испытуемых. - Эксперту при работе потребуются часы для фиксации
времени работы над каждым заданием и бланк для экспертного заключения. - Если задание теста проверяет степень достижения
требований на минимальном уровне — это базовое задание, на уровне
«хорошей» оценки – задание повышенного уровня, «отличной» оценки – сложное
задание. - Эксперт должен оценить значимость содержания
теста по следующей шкале – 0 – неоправданное включение задания в тест, 1 –
незначимое задание, 2 – значимое, 3 – наиболее важный опорный элемент.
Оформление
тестового материала и подготовка его
к
компьютерному варианту тестирования
План теста
При разработке плана тестовых
заданий по дисциплине делается примерная раскладка процентного содержания
разделов и определяется необходимое число заданий (но не менее 3-х) по каждому
разделу дисциплины (по каждой дидактической единице) исходя из его важности и
числа часов, отведенных на его изучение в программе.
Требования к оформлению
тестовых материалов
|
N |
Наименование |
N |
Тема |
|
1 |
Общая теория права и государства |
1 |
Понятие и признаки права. Система |
|
2 |
Источники и формы права. Норма |
||
|
3 |
Правоотношения. Правонарушение и |
||
|
4 |
Российское право и основные |
||
|
2 |
Основы конституционного права |
5 |
Конституция Российской Федерации |
|
6 |
Основы конституционного строя |
||
|
7 |
Правовой статус личности в |
||
|
8 |
Органы государственной власти в |
||
|
3 |
Основы гражданского права |
9 |
Граждане и юридические лица как |
|
10 |
Право собственности |
||
|
11 |
Обязательства и договоры |
||
|
12 |
Наследственное право Российской |
||
|
4 |
Основы трудового права Российской |
13 |
Основания возникновения трудовых |
|
14 |
Рабочее время и время отдыха |
||
|
15 |
Дисциплина труда |
||
|
16 |
Защита трудовых прав граждан |
||
|
5 |
Административное правонарушение и |
17 |
Административное правонарушение и |
|
18 |
Преступление. Уголовный закон и |
||
|
19 |
Категории и виды преступлений. |
||
|
20 |
Система наказаний по уголовному |
Бумажная копия теста должна
быть обязательно подписана автором (авторами) тестового материала с указанием
даты составления и передачи, листы скреплены и пронумерованы.
Особенностью
современного образовательного процесса в вузе является его компьютеризация,
что позволяет организовывать тестирование обучающихся на компьютерной основе.
«Компьютерные»
педагогические тесты имеют свои особенности, которые необходимо учитывать при
их разработке. Анализ информации на экране монитора компьютера часто бывает
затруднен из-за неправильной подачи материала. Хотя именно компьютеризованное
тестирование имеет свои преимущества и перспективы применения в образовании.
Особенная роль здесь принадлежит компьютерно-индивидуальному тестированию,
когда каждому испытуемому предъявляется уникальный набор заданий.
Возможности компьютерных
средств позволяют сочетать звуковые и зрительные формы предъявления тестовых
заданий. Компьютерные тесты должны быть адаптированы к реальному учебному
процессу. Одно из главных требований к компьютерным тестам — многовариантность.
Многовариантность должна быть двух типов: во-первых, по данным заданий,
во-вторых, по порядку их предъявления. Реализация этого требования снимает
сразу две организационные проблемы: списывание и запоминание ответов.
Достоинства компьютерного
тестирования:
— объективность тестирования
– персональный компьютер «беспристрастен» при предъявлении тестовых заданий и
подсчете результатов их выполнения.
— удобство фиксации,
хранения и представления результатов тестирования, а также возможность их
автоматизированной обработки, включая ведение баз данных и статистический
анализ.
— удобство реализации
процедур индивидуально-ориентированного тестирования.
— возможность создания
таких тестовых заданий, которые не могут быть представлены без компьютера. При
этом могут быть использованы графические, динамические, интерактивные и другие
специфические возможности представления тестовых заданий на компьютере.
Недостаток компьютерного
тестирования:
— необходимость минимальных
навыков работы на компьютере тестируемого.
В вузах существуют тестовые
оболочки, куда заносятся вопросы и варианты ответов тестовых заданий (например «iTest», «Му test» и др.). При подготовке компьютерного
тестирования следует учитывать следующую (рекомендуемую) схему взаимодействия
подразделений вуза (см. рис. 2).
Рисунок 2. Схема взаимодействия подразделений
в разработке и реализации
компьютерного теста
Сектор качества
образования УМЦ обеспечивает централизованное и конфиденциальное хранение
тестовых заданий по учебным дисциплинам.
При оценке выполнения
теста следует исходить из следующих рекомендаций:
- Оценка «удовлетворительно»
ставится, если студент ответил на от 55 до 70% вопросов. - Оценка «хорошо» ставится, если
студент получил от 71 до 85%. - Оценка «отлично» ставится,
если студент получил 86% и более правильных ответов.
Список рекомендуемой литературы
1. Аванесов, В.С.
Композиция тестовых заданий/ В.С. Аванесов. – М.: АДЕПТ, 1998. – 216 с.
2. Воскресенская,
О.Л.
Оценка
качества подготовки студентов по дисциплине «Физиология растений» на основе
результатов Интернет-экзамена/ О.Л. Воскресенская, Г.П. Тикина /Материалы
Всероссийской конференции «Преподавание современной физиологии растений в
университетах и вузах страны: проблемы и решения». – М., 2008.
3. Геворкян,
Е.Н., Комплексная
оценка высших учебных заведений/ Е.Н. Геворкян, В.Г. Наводнов, Г.Н.Мотова,
М.В.Петропавловский. — М.: Центр государственной аккредитации, 2003. — 176 с.
4. Ефремова, Н.Ф.
Современные тестовые технологии в образовании/ Н.Ф. Ефремова. – Ростов-на-Дону:
Издательский центр ДГТУ, 2001. – 187 c.
5. Киселева,
В.П. Методика
определения уровня подготовки студентов по результатам аттестационных
педагогических измерений/ В.П. Киселева, А.С. Масленников, В.Г. Наводнов. – Йошкар-Ола:
Центр государственной аккредитации, 2004. — 44 с.
6. Клайн, П.
Справочное руководство по конструированию тестов/ П. Клайн. – Киев, 1994. – 238
с.
7. Майоров,
А.Н.
Теория и практика создания тестов для системы образования. / А.Н.Майоров. – М:
Народное образование, 2000. – 351 с.
8. Масленников,
А.С. Оценка
уровня обученности студентов в целях аттестации образовательного учреждения
профессионального образования: Учебное пособие/А.С. Масленников, Б.А. Савельев. – М.:
Логос, 2003. – 136 с.
9. Мельников, Ю.В.
Технология использования и разработки тестов и обучающих программ: Методическое
пособие / Ю.В.Мельников. – Домодедово: ВИПК МВД России, 1999. – 21 с.
10. Михайлычев, Е.А.
Дидактическая тестология / Е.А. Михайлычев. – М.: Народное образование, 2001. –
432 с.
11. Морев, И. А.
Образовательные информационные технологии. Часть 2. Педагогические измерения:
Учебное пособие/ И.А. Морев. – Владивосток: Изд-во Дальневост. ун-та, 2004. –
174 с.
12. Переверзев, В.Ю.
Критериально-ориентированное педагогическое тестирование: Учеб. Пособие/ В.Ю.
Переверзев. – М.: Логос, 2003. –120 с.
13. Родионов, Б.У. Стандарты
и тесты в образовании / Б.У. Родионов, А.О.Татур. – М.: Б.и., 1995. – 48 с.
14. Челышкова, М.Б. Теория и
практика конструирования педагогических тестов: Учебное пособие/ М.Б.
Челышкова. – М.: Исследовательский центр проблем качества подготовки специалистов,
2001. – 410 с.
Приложение 1
Классификация тестов
1.
По процедуре создания:
· стандартизованные (в образовании, для целей итоговой аттестации);
· не стандартизованные.
2. По средствам предъявления:
· бланковые;
· предметные (манипулируем материальными объектами);
· аппаратурные (используются устройства для изучения особенностей внимания,
восприятия, памяти, мышления);
· практические (лабораторные работы, снабженные соответствующими инструкциями и
имеющие тестовое оснащение);
· компьютерные.
В
рамках компьютерного тестирования В.С. Аванесов предлагает адаптивные тесты —
задания, в которых предъявляются по одному, в зависимости от ответа испытуемого
на предыдущий вопрос.
3.
По направленности:
· тесты интеллекта;
· личностные тесты;
· тесты достижений.
4. По характеру действий:
· вербальные (с использованием умственных действий);
· невербальные (связанные с практическим манипулированием предметов).
5. По ведущей ориентации:
· тесты скорости (содержат простые задачи; время решения ограничено);
· тесты мощности или результативности (содержат трудные задачи, время решения
не ограничено, или мягко лимитировано);
· смешанные тесты (задачи различного уровня сложности, от самых простых до
самых сложных, время испытания ограничено, но достаточно для решения
большинства задач).
Эти тесты наиболее часто применяются на практике, к ним относятся большинство
тестов учебных достижений.
6. По степени однородности задач:
· гомогенные (задачи, сходные по характеру, но различающиеся конкретным
содержанием);
· гетерогенные (задания отличаются и по характеру, и по содержанию).
7. По объективности оценивания:
· объективные (в процессе обработки результатов тестирования не
предусматривается использование субъективных толкований тестирующим);
· проективные тесты (допускается чрезвычайно большое разнообразие ответов и
проявление определенной субъективности при их толковании тестирующим.
8. По специализации:
· широкоориентированные (для тестов в системе образовании), позволяющие оценить
эффективность процесса обучения, степень освоения учащимися системы знаний,
умений и навыков в ходе учебного процесса;
· узкоориентированные, направленные на выявление достижений учащихся в процессе
освоения отдельных предметов, отдельных тем и т.д.
9. По целям использования (только для тестов в системе образования):
· предварительный определяющий тест (определяет знания в начале обучения,
затрагивает минимум знаний по теме обучения);
· тест прогресса, достигнутого в процессе обучения, формирующий тест
(затрагивает ограниченный сегмент обучения, раздел или главу, состоит из серии
отдельных тестовых вопросов, всесторонне охватывающих ограниченную область
обучения). Пример, обучающие тесты. Ученику даются конкретные инструкции для
исправления обнаруженных ошибок;
· диагностический тест (содержит большое число вопросов, имеющих отношение к
конкретной тестируемой области). Цель теста — определение трудностей обучения.
· суммирующий тест (используется для оценки широкого диапазона результатов
обучения, ожидаемого в конце учебного процесса, содержит вопросы,
представляющие более высокий уровень сложности, чем другие виды тестов).
10. По широте использования (только для тестов в системе образования):
· для использования преподавателем;
· для использования группой преподавателей или администрацией образовательного
учреждения;
· для целей отбора и формирования групп;
· для аттестации обучающихся.
11. По форме:
· тесты закрытого типа (задания с выбором верного ответа (или нескольких
верных) из набора предлагаемых;
· тесты открытого типа (ввод предполагаемого ответа на задание самим
тестируемым).
Приложение 2
Образец оформления титульного
листа теста по дисциплине
|
МИНИСТЕРСТВО ФГОУ ВЕТЕРИНАРНОЙ ТЕСТОВЫЕ ЗАДАНИЯ Для ________________________________________ По дисциплине Для Составлены______________________________________ ФИО,ученая Троицк
|
Образец оформления первого листа
тестовых заданий
Утверждено
на заседании кафедры
Согласовано:
______________________(протокол
№___) Декан
____________________________
Зав.
кафедрой________________ подпись
ФИО подпись
ФИО «_____»________________________20___г.
«_____»______________________20___г.
ОБЩИЕ СВЕДЕНИЯ О ТЕСТОВЫХ ЗАДАНИЯХ
1 Направление (я), специальность(и), курс(ы)
_______________________________________
2 Название цикла дисциплин учебного плана
______________________________________
3
Дисциплина (или дисциплины комплексного задания)
_____________________________
4 Цель
контроля ______________________________________________________________
5 Общее
количество тестовых заданий ____________________________________________
6 Рекомендуемое
количество заданий в тесте ______________________________________
7 Форма (ы)
заданий
—
открытая____________________________________________________________________
— закрытая
( с выбором одного или нескольких заключений)__________________________
— на
установление правильной последовательности__________________________________
— на
установление соответствия___________________________________________________
— на
конструирование и др.______________________________________________________
8 Время, на
которое рассчитан тест_______________________________________________
9 Уровень
сложности:
—
легкие______________________________________________________________________
— средней
трудности____________________________________________________________
—
трудные_____________________________________________________________________
10 Критерии
оценки:
оценка
3 (удовлетворительно) 25-49 баллов ______% правильных ответов
оценка
4 (хорошо) 50-74 баллов ______% правильных ответов
оценка
5 (отлично) 75-100 баллов ______% правильных ответов
11
Кафедра(ы)- разработчик (и) контролирующих материалов ________________________
Тестовые задания и ключи к ним прилагаются
QA-процесс не сводится лишь к взаимодействию инженера с программным решением, не обойтись без создания тестовой документации. Она делает процессы на проекте более прозрачными, ведь позволяет отслеживать выполнение и планирование задач, следить за требованиями к ПО и дедлайнами. К тому же, грамотно составленные артефакты помогают новым сотрудникам быстрее вливаться в работу.
Чек-лист и тест-кейс – документы, с которыми чаще всего приходится работать инженерам по качеству. Но даже опытные специалисты могут допускать ошибки при составлении этих артефактов. В этой статье мы расскажем, как избежать неточностей в работе над тестовой документацией.
Что такое чек-лист в тестировании?
Чек-лист (checklist) представляет собой список проверок, которые планируется провести для оценки качества цифрового продукта. Хотя нет единых жёстких правил по оформлению документа, любой хороший артефакт структурирован и разбит на смысловые блоки и секции. Каждый инженер составляет чек-лист в комфортном для себя формате или согласно требованиям компании.
Документ может быть универсальным или специализированным. В первом случае список можно использовать при проверке однотипных программных продуктов, например сайтов.Так оценивается общий уровень качества ПО. Во втором случае инженеры составляют специальный артефакт, который позволит оценить конкретное программное решение.
Что важно при составлении чек-листа?
Создание качественногоартефакта – это уже половина успеха. При написании этого документа важно следовать нескольким рекомендациям:
- Придерживайтесь коротких, но прозрачных и понятных формулировок.
- Помните, один пункт списка – это один конкретный шаг.
- Не забывайте о принятых в команде формулировках. Это предотвратит искажённое толкование написанного.
- Убедитесь, что результаты оценки программного продукта по каждому из пунктов можно измерить или предельно точно оценить. Это очень важно при составлении чек-листа.
Специалистам (в особенности начинающим) при составлении артефакта очень поможетумение правильно задавать вопросы.
Чек-лист: как избежать ошибок?
Это один из наиболее острых вопросов для тестировщиков. Чаще всего недочёты и недоработки этого документа связаны счеловеческим фактором. Чтобы не допустить ошибок при создании данных артефактов, следует опираться на три принципа.
- Чек-лист – это не развёрнутая и досконально проработанная инструкция
Это только лаконичное напоминание, черновик для QA-процесса. Пункты списка касаются только основных этапов тестирования.
- Чек-лист стоит рассматривать не как план работы, а как эффективнейший инструмент экономии времени
Данный артефакт служит отличной подсказкой, которая направит процесс оценки качество в верное русло.
- Пункты чек-листа могут и должны корректироваться
Составленный документ должен сохранять гибкость и видоизменяться уже в процессе работы над ПО.
Что такое тест-кейс?
Тест-кейс (test case) – это детальное описание проверки работоспособности программного решения. Совокупность подобных документов называется тестовым набором (test suite).
Эти артефакты могут быть двух типов: позитивные или негативные. Для проведения позитивных проверок применяются корректные данные и оценивается ожидаемое поведение ПО. Негативный сценарий используется, когда нужно посмотреть на программу в нестандартных условиях.
Какие ошибки допускаются тестировщиками при составлении чек-листов?
К типичным недочётам и недоработкам тест-кейсов можно отнести следующее:
- Чрезмерное упрощение документа. Иногда тестировщик настолько сильно увлекается сокращением излагаемой информации, что артефакт начинает походить на конспект. А ведь документ должен содержать исчерпывающий объём информации для инженеров, которые не работали над его составлением.
- Ссылки или копирование пунктов. Недопустимо на каком-либо шаге ссылаться на другой шаг(например, «повторить пункты под номерами 5 и 6 для реализации шага 10»). Такую проверку нужно либо исключить, либо скорректировать.
- Введение подразделов внутри одного пункта. Помните, каждый пункт – это одно конкретное действие.
К слову, не менее важно для тестировщика знать и о том, как правильно составить баг-репорт – стандартный отчёт о найденных ошибках.
Почему чек-лист и тест-кейс являются очень важными инструментами в руках тестировщика?
Целью создания данных артефактов является доскональная структуризация и систематизация процесса работы. Они делают проведение самого тестирования гораздо проще. Ключевое отличие этих тестовых документов заключается в степени детализации описанной в них информации. Чек-лист – это «вектор», направление всего процесса. Тест-кейс же – подробнейшее описание того, как и что нужно делать.
Продемонстрировать разницу между двумя документами можно на практике. Предположим, нам необходимо переместить книгу со страницы онлайн-магазина в корзину. Составление тест-кейсовв этом случае будет подразумевать описание всех совершаемых шагов:
- Зайти на сайт.
- Открыть раздел «Книги: новинки».
- Выбрать книгу.
- Поместить книгу в корзину.
- Перейти в корзину.
Чек-лист в аналогичной ситуации будет содержать один-единственный пункт – «Поместить книгу в корзину». Здесь уже не нужно пошагово описывать последовательность переходов, нажатий кнопок.
Заключение
Чек-лист легче составить, но сложнее использовать. И если продвинутому тестировщику будет несложно применять в работе составленный список, начинающие QA-специалисты могут столкнуться с трудностями.
Как не допустить ошибок при создании артефактов, какие пункты они должны содержать, как эффективно использовать инструмент в работе – всё это объяснят преподаватели на курсах по тестированию программного обеспечения.
Слайд 1
РЕКОМЕНДАЦИИ ПО СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ
MCQ
Типичные дефекты при
составлении тестовых заданий.
Баскакова И.В.
Центр образовательных технологий
КазНМУ им. С.Д.
Асфендиярова
13.02.2015г.
Слайд 2
*
Вопросы множественного выбора
MCQ — Multiply Choice Questions)
Сопоставление
вариантов
(вопросы А- типа)
Тестовые вопросы с одним НАИБОЛЕЕ правильным ответом
Расширенное
сопоставление вариантов
(вопросы R-типа)
Слайд 3
MCQ – вопросы множественного выбора
Это тестовые вопросы, в
которых условие задания представлено с вводным вопросом и
несколькими вариантами ответов
Среди всех вариантов ответов только один является
НАИБОЛЕЕ правильным
Закрытые вопросы – с одним НАИБОЛЕЕ точным ответом, отражающим суть явления, ведущий признак и т.д.
Эти вопросы используют преимущественно для итогового контроля знаний по дисциплине.
Слайд 4
Терминология
Опции – варианты ответов
Дистракторы – отвлекающие, неправильные варианты
ответов.
Их функция — привлечь студентов, которые не уверены
в ответе.
Существенные операции – число правильных (эталонных) ответов.
Слайд 5
Friedman et al., 1987; Norcini et al., 1985;
Scriven, 1991; Zelezkik et al., 1990
Вопросы
множественного выбора
MCQ
— с одним НАИБОЛЕЕ правильным ответом (А-тип)
Условие задания – вводный
вопрос – варианты ответов
EMQ – Extended Matching Questions (R-тип)
тема — варианты ответов — вводный вопрос – условия заданий
Слайд 6
Мужчина 38 лет, инженер, госпитализирован в многопрофильную больницу.
Предъявляет жалобы на коликообразную боль внизу живота, слабость, полужидкий
стул до 10 раз в сутки. Иногда обнаруживает примесь крови
в стуле. Результат проведенной колоноскопии представлен на фото.
Какой из перечисленных ниже предварительных диагнозов НАИБОЛЕЕ вероятен?
1) болезнь Крона
2 ) язвенный колит
3 ) дизентерия
4) рак кишечника
5) синдром раздраженной кишки
Слайд 7
Схема
тестового вопроса с одним НАИБОЛЕЕ правильным ответом
(основа
– клинический случай)
Условие задание — относительно длинное
(максимум 7-8 строк)
Вводный
вопрос ( со словом НАИБОЛЕЕ ) – пишется с новой
строки
Дитстрактор 1
Дистрактор 2
Дистрактор 3
НАИБОЛЕЕ правильный ответ
Дистрактор 4
5 опций
(вариантов ответов)
Слайд 8
Выборка вопросов должна быть репрезентативной в отношении учебных
целей
Слайд 9
Конструирование
базы тестовых заданий
Матрица теста
Слайд 10
1. Каждое тестовое задание должно быть посвящено важной
теме, т.е. распространенной или потенциально опасной клинической проблеме
не тратьте
время на вопросы, оценивающие знание тривиальных фактов;
ориентируйтесь на клинические ситуации
или проблемы, с которыми можно встретиться в профессиональной деятельности (реальной жизни);
избегайте запутанных или излишне сложных формулировок и вопросов .
Слайд 11
2. Каждое тестовое задание должно максимально оценивать способность
применить знания, а не вспомнить изолированный факт.
Условия тестовых заданий
могут быть относительно длинными.
Варианты ответов (опции) должны быть максимально короткими.
В
опциях НЕ должно быть информации, дополняющей условия задания.
?
Слайд 12
Хорошая основа для вопроса – клиническая ситуация.
Мужчина, женщина,
ребенок возраст
профессия
предъявляет
жалобы данные анамнеза
объективные данные
результаты диагностических исследований …
ВВОДНЫЙ ВОПРОС
Слайд 13
Формулировка вопроса
Вопрос должен быть сформулирован корректно.
Вместо «Поставьте диагноз»
Какой
из перечисленных ниже предварительных диагнозов НАИБОЛЕЕ вероятен?
Слайд 14
Формулировка вопроса
Вместо «Назначьте лечение, обследование и т.д.»
Какое мероприятие
из перечисленных является НАИБОЛЕЕ целесообразным?
Назначение какого лекарственного препарата
из перечисленных НАИБОЛЕЕ целесообразно?
Какой из перечисленных методов обследования является НАИБОЛЕЕ
важным (первоочередным, необходимым с т.з. дифференциальной диагностики и т.д.)?
Слайд 15
Формулировка вопроса
Какая тактика ведения больного является НАИБОЛЕЕ целесообразной?
Слайд 16
Пример неудачного задания:
Назовите жалобы больного при среднем кариесе:
1)
наличие множественных меловидных симметричных пятен на вестибулярной поверхности фронтальных
зубов;
2) постоянные ноющие боли при накусывании на зуб;
3) кратковременные боли
от химических, температурных раздражителей, наличие кариозной полости;
4) продолжительные боли ноющего характера от температурных раздражителей;
5) острые, приступообразные, ночные боли, иррадиирующие по ходу ветвей тройничного нерва.
Как оценить представленный вопрос?
Дефекты при составлении задания?
Как поднять когнитивный уровень вопроса?
Слайд 17
Вопросы типа «сверху вниз»
Вопросы типа «сверху — вниз»
обычно проверяют знание или запоминание!
Стандартный шаблон:
Ссылка на заболевание
вопрос о
том,
какие признаки обнаружены у больного (как его обследовать, чем лечить и т.д.).
НО!!!
В клиническом отношении вопросы имеют дефект, поскольку больные редко называют врачу свое заболевание, а потом спрашивают, каковы у них жалобы и симптомы!!!
Слайд 18
Вопросы типа «снизу — вверх»
Вопросы типа «снизу —
вверх» классифицируются как вопросы на понимание либо применение знаний,
поскольку построены в более клинически реалистичной манере.
Стандартный шаблон:
Жалобы, симптомы определение
результаты обследования заболевания,
диф. диагноз,
тактика лечения.
Слайд 19
Как вариант:
Юноша 18 лет, обратился с жалобами
на кратковременные боли от химических раздражителей в зубе нижней
челюсти справа. Объективно: на жевательной поверхности зуба 46 кариозная полость
в пределах плащевого дентина. Зондирование болезненное по эмалево-дентинному соединению.
Какой из перечисленных диагнозов НАИБОЛЕЕ вероятен?
Эрозия эмали
Некроз эмали
Средний кариес
Глубокий кариес
Клиновидный дефект
Слайд 20
Формулировка вопроса
Вопрос должен быть хорошо сфокусирован!
Достаточно ли сфокусирован
вопрос?
Условие тестового задания должно ставить ясный вопрос, на который
можно ответить, не видя вариантов ответа.
Слайд 21
Алгоритм составления задания в тестовой форме:
Сформулируйте вопрос и
варианты ответов (опции).
Закройте варианты ответа листком бумаги.
Попросите опытного коллегу
ответить на вопрос, основываясь только на условии задания.
Перепишите условия задания
или варианты ответа (опции), если он не смог сделать этого.
Слайд 22
Рекомендации:
Не рекомендуется разрабатывать задания в тестовой форме в
одиночку.
Необходимо коллегиальное обсуждение каждого задания!
Прежде, чем включить
задание в БТЗ, его необходимо апробировать, оценить и подкорректировать.
Слайд 23
Дистракторы ( отвлекающие варианты ответов )
должны быть…
гомогенны, т.е. относиться к той же категории,
что и правильный ответ (например, все дистракторы – диагнозы, анализы,
методы лечения, прогнозы и т.д.);
правдоподобны;
грамматически последовательны;
логически совместимы;
приблизительно той же длины, что и правильный ответ.
Слайд 24
НЕ РЕКОМЕНДУЕТСЯ:
Использовать А-тип тестовых заданий, содержащие формулировки типа:
1)
Какое из следующих утверждений
НЕ верно?
2) Что из следующего
верно, КРОМЕ?
Как вариант:
Все перечисленное ниже верно, КРОМЕ:
Слайд 25
5. ИЗБЕГАЙТЕ!
ВОЗНИКНОВЕНИЯ В ЗАДАНИЯХ ТЕХНИЧЕСКИХ ДЕФЕКТОВ,
КОТОРЫЕ ДАЮТ ПРЕИМУЩЕСТВА ОПЫТНЫМ В ТЕСТИРОВАНИИ СТУДЕНТАМ, ИЛИ
ПРИВОДЯТ К ЧРЕЗМЕРНОЙ СЛОЖНОСТИ ТЕСТОВЫХ ЗАДАНИЙ.
Слайд 26
ТЕХНИЧЕСКИЕ ДЕФЕКТЫ ТЕСТОВЫХ ЗАДАНИЙ
Дефекты, относящиеся к опытности в
тестировании.
Дефекты, относящиеся к чрезмерной сложности.
Вероятность правильного ответа на вопрос
должна зависеть от уровня знаний, а не от опыта студента
в тестировании!
Слайд 27
Слишком длинная формулировка задания
В апреле месяце в поликлинику
к окулисту обратился пациент 14 лет с жалобами на
светобоязнь в обоих глазах, сильный зуд и ощущение инородного тела
за веками. Данные жалобы беспокоят ежегодно в течение 3-х лет, последнее обострение около недели. Травмы и переохлаждения отрицает. Объективно: visusОU=1,0 Глазные щели слегка сужены, симметричные. Умеренно выражены блефароспазм, светобоязнь, легкое слезотечение. Кожа век не изменена. Поверхностная инъекция конъюнктивы глазного яблока, патологического отделяемого нет. Конъюнктива хряща верхнего века бледная с молочным оттенком, покрыта крупными уплощенными плотными сосочковыми разрастаниями, напоминающими «булыжную мостовую», в области лимба единичные серовато-бледные возвышающиеся уплотнения. Роговица прозрачная. Какой из предлагаемых диагнозов наиболее вероятен?
А) Острый бактериальный конъюнктивит
+В) Весенний катар
С) Эпидемический кератоконъюнктивит
D) Поллинозный конъюнктивит
Е) Аденовирусный конъюнктивит
Слайд 28
Короткий вопрос
и длинные ответы
Укажите правильное определение
обмена веществ:
1. Это преобладание процессов ассимиляции над
процессами диссимиляции
2.+Комплекс биохимических и энергетических процессов, обеспечивающих использование пищевых веществ
для нужд организма и удовлетворения его потребностей в пластических и энергетических веществах
3. Повышение интенсивности энергетических процессов
4. Синтез необходимых веществ, их усвоение и использование для роста, развития и жизнедеятельности организма
5. Реакция, связанная с распадом веществ, их окислением и выведением из организма продуктов распада
Слайд 29
Логические подсказки
Задачи гигиены:
1. Реабилитация больных
2. Изучение клинического течения болезни
3. Лечение болезни
4. Изучение функционального состояния репродуктивной системы женщин
5. +Изучение природных и антропогенных факторов, влияющих на здоровье человека
Слайд 30
Неравнозначные по длине
дистракторы
Параноидная форма патологического опьянения характеризуется:
*
Наличием аффекта страха, иллюзорно – бредовым восприятием окружающего, целенеправленной
деятельностью, частичной амнезией
* Депрессивными проявлениями с суицидальными мыслями
* Ощущение психического
комфорта, эйфорией
*Наличием фантастических сценоподобных галлюцинаций
* Ощущение физического комфорта, благодушием
Слайд 31
Правильный ответ – самый длинный
Какая наиболее вероятная причина
развития полиорганной недостаточности и нарушения системной гемодинамики при панкреонекрозе?
+A)
Активация калликреин-кининовой системы и цитокинов;
B) Активация функции желез внутренней
секреции;
C) Активация протеолитических ферментов;
D) Активация липолитических ферментов;
E) Нарастающая эндогенная интоксикация
Слайд 32
АБСОЛЮТНЫЕ ТЕРМИНЫ
Использование терминов «всегда» или «никогда» в некоторых
вариантах ответов.
Опытные в тестировании студенты исключают такие варианты ответов,
так как они менее вероятны из-за абсолютности утверждений.
Слайд 33
Применение отрицания в вопросе
При каких состояниях не сохраняется
ориентировка во времени и месте пребывания:
* Истерия
* Делирий
*
Астения
* Онейроид
* Кататония
Слайд 34
С учетом каких факторов разработаны величины потребностей в
пищевых веществах и энергии?
1.+Пола, возраста и характера трудовой деятельности
2.
Профессиональной патологии
3. Влияния факторов внешней среды
4. Интенсивности обменных процессов
5. Только
характера трудовой деятельности
Слайд 35
Для профилактики опрелостей складки кожи новорожденного обрабатывают:
*+ Стерильным
растительным маслом
* Физраствором
* Раствором фурацилина
* Раствором
полиглюкина
* Спиртовым раствором
Пример логической подсказки
Слайд 36
Пример:
Определите тактику при узловых не верифицированных опухолевидных образованиях
в молочной железе:
динамическое наблюдение
гомеопатическая терапия
интрамаммарные тауфоновые блокады
секторальная резекция молочной
железы со срочным гистологическим исследованием+
Слайд 37
ПОВТОРЕНИЕ СЛОВ
Слово или фраза из условия задания повторяется
в правильном варианте ответа.
58-летний мужчина, госпитализированный в
психиатрическую клинику,
растерян, возбужден,
воспринимает окружающий мир, как нереальный.
Это симптом …
Дереализации.
Деперсонализации.
Дезориентации.
Частичной
потери памяти.
Сигнального возбуждения.
Слайд 38
Пример задания
Врач при осмотре больного в приемном покое
выявил боли по правому боковому каналу и в правой
поясничной области. При каком расположении червеобразного отростка характерна данная локализация
болей?
А) Тазовом расположении червеобразного отростка;
В) Типичном расположении червеобразного отростка;
С) Медиальном расположении червеобразного отростка;
D) Подпеченочном расположении червеобразного отростка;
+Е) Ретроцекальном расположении червеобразного отростка;
Для какого расположения червеобразного отростка НАИБОЛЕЕ характерна данная локализация боли?
Слайд 39
Какая пища вызывает в организме наименьший расход энергии
при своем специфически-динамическом действии?
1. Богатая белками
2.+Богатая углеводами
3. Богатая жирами
4.
Богатая витаминами
5. Богатая минеральными веществами
Слайд 40
Дисфория это:
Расстройство восприятия
Расстройство самосознания
Расстройство познавательной деятельности
Расстройство эмоций
Расстройство ощущений
Слайд 41
Тенденция к конвергенции
Правильный ответ имеет наибольшее сходство с
элементами других вариантов ответа.
В вариантах ответа, проставленных цифрами, правильным,
скорее, будет среднее значение, а не крайние величины.
В двойных вариантах
правильным будет, скорее всего, тот, который имеет наибольшее сходство с дистракторами.
Слайд 42
Словесная «мишура»
Лицевая артерия выходит из-под края нижней челюсти
у переднего края жевательной мышцы и направляется к медиальному
углу глазницы. Артерия имеет, как правило, извитой ход и на
своем пути отдает веточки к нижней и верхней губам (aa. Labiales inferiores et superiores) заканчивается:
1) +угловой артерией (a.angularis)
2) поверхностной височной артерией
3) верхнечелюстной артерией
4) нижнечелюстной артерией
5) надглазничной артерией
Слайд 43
Словесная «мишура»
Околоушная слюнная железа расположена в основном в
занижнечелюстной ямке. Небольшая ее часть распространяется кпереди от наружного
слухового прохода на латеральной поверхности жевательной мышцы. Паренхима околоушной слюнной
железы содержит:
1) переднюю яремную вену
2) блуждающий нерв
3) +позадинижнечелюстную вену
4) лицевую вену
5) верхнюю щитовидную вену
Слайд 44
Больной 18 лет. Недавно перенесший тяжелую форму пневмонии
с последующей астенией. На свадьбе друга выпил 200 мл
водки, быстро опьянел, речь стала дизартричной, походка шаткой. Потом как
будто бы отрезвел, встал из-за стола и уверенным шагом вышел из комнаты на кухню. Не ответив на вопрос хозяйки, что ему нужно, схватил нож и быстро вернулся к столу, где начал кричать, размахивать ножом. Нападал на гостей, угрожал убийством, оказывал резкое сопротивление удерживающим его. Лицо было бледным, зрачки расширены. Через 20 минут успокоился и заснул на диване в соседней комнате. На следующее утро ничего не помнил о случившемся.
Определите форму опьянения:
* средняя степень простого опьянения
* патологическое опьянение
* дисфорическая форма простого опьянения
* параноидная форма простого опьянения
*истерическая форма простого опьянения
Слайд 45
ТЕНДЕНЦИЯ К КОНВЕРГЕНЦИИ
Чем чаще любят рисовать дети?
1) Карандашом
и ручкой.
2) Карандашом и фломастером.
3) Карандашом и кисточкой.
4) Ручкой
и маркером.
Авторы тестовых заданий, как правило, начинают с правильного
ответа, а остальные используют в качестве дистракторов!
Слайд 46
Пример
337. Типы артерий в зависимости от строения стенки:
А)+эластический,
мышечный и смешанный
B) эластический, серозный и смешанный
C) эластический, ретикулярный
и смешанный
D) эластический, гиалинованный и смешанный
E) эластический, смешанный и серозный
Слайд 47
Какие отделения можно располагать в одном здании при
централизованной системе стройтельства:
1. +Терапевтические, кардиологические, неврологические отделения
2. Психиатрические+детские
3. Туберекулезные+родильные
4.
Инфекционные+хирургические
5. Кожно-венерологические+детские
Слайд 48
.
В каком случае чаще развивается гемолитическая болезнь
плода:
А) мать резус-отрицательная, плод резус-положительный
Б) мать резус-положительная, плод резус-отрицательный
В)
мать резус-отрицательная, плод резус-отрицательный
Г) мать резус-положительная, плод резус-положительный
Д) мать резус-отрицательная,
отец резус-положительный
Слайд 49
Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
Варианты ответов
являются длинными, сложными или двойными.
Нелогичный порядок вариантов ответа.
Условия задания
слишком сложны или запутанны.
Слайд 50
Пример задания:
Для госпитального штамма сальмонеллы характерно:
1) Чувствительность к
антибиотикам.
2) Чувствительность к антибиотикам, резистентным к типовым бактериофагам.
3) Резистентность
к антибиотикам, чувствительность к типовым бактериофагам, дезинфицирующим средствам.
4) Резистентность
к антибиотикам, типовым бактериофагам, дезинфицирующим средствам.
Чувствительность к антибиотикам, резистентность к типовым бактериофагам, дезинфицирующим средствам.
Что делать??? Изменить формат ?
Слайд 51
Антибиотикам какого ряда отдадите предпочтение при лечении абсцесса
легкого?
А. антибиотики пенициллинового ряда
Б. полусинтетические пенициллины
В. аминогликозиды
+Г. цефалоспорины
Д. антибиотики тетрациклинового ряда
Слайд 52
Пример
У мужчины 52 лет в течении 1 года
отмечается желтуха, анемия, периодический подъем температуры тела с ознобом,
снижение массы тела. Какое наиболее информативное обследование вы порекомендуете?
а) МРТ
с контрастированием +
б) УЗИ брюшной полости
в) рентгенография брюшной полости
г ) компьютерная томография
д ) онкомаркеры
Слайд 53
Пример тестового вопроса
Что из нижеперечисленного является наименее грозным
осложнением острого аппендицита?
А) Внутрибрюшное кровотечение;
+В) Аппендикулярный инфильтрат;
С)
Периаппендикулярный абсцесс;
D) Разлитой перитонит;
Е) Пилефлебит
Слайд 54
Какой признак септического шока наиболее соответсвующий?
а) температура
выше 38ºС
б) температура ниже 36ºС+
в) гиповолемия
г) нарушения сознании
д) метаболический
алкалоз
Слайд 55
Формат «Все перечисленное верно, кроме …»
Для госпитального штамма
сальмонеллы верны все перечисленные ниже признаки, КРОМЕ:
1) резистентности к
антибиотикам;
2) чувствительности к типовым бактериофагам;
3) резистентности к дезинфицирующим средствам;
4) резистентности
к типовым бактериофагам.
Как оценить новый вариант задания?
А может быть, не стоит его использовать?
Слайд 56
Формат «Все перечисленное верно, кроме …»
Для …….. синдрома
характерны все перечисленные ниже симптомы,
КРОМЕ: …
Для (заболевание
1) и (заболевание 2) характерно сходство всех перечисленных ниже
клинических признаков, КРОМЕ: …
Для (название лекарственного препарата) характерны все перечисленные ниже побочные эффекты, КРОМЕ: …
Слайд 57
Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
Цифровые данные
выражены бессистемно.
Таранно-пяточный угол в норме составляет:
A) 10-20˚
B) 20-30˚
+C)
20-40˚
D) 20-50˚
E) 40-60˚
Слайд 58
Чему равен расход энергии, связанный со специфически-динамическим действием
пищи?
1. 5-8% от суточной калорийности
2. 10-15% от суточной калорийности
3.+10-15%
от основного обмена
4. 15-20% от суточной калорийности
5. 15-20% от основного
обмена
Слайд 59
Какой процент суточных энергозатрат должен компенсироваться за счет
жира для взрослого трудоспособного населения?
1. 6-10%
2. 18-20%
3.+28-30%
4. 40-45%
5. 55-60%
Слайд 60
Пример
Аппендикулярный инфильтрат обычно образуется на:
А) 1-2 сутки
В) 2-3
сутки
+С) 3-5 сутки
D) 7-9 сутки
Е) 10-12 сутки
Слайд 61
Дефекты тестовых заданий, относящиеся к чрезмерной сложности:
Использование неопределенных
терминов в вариантах ответа:
«редко»
«часто»
«обычно»
«иногда»
«как правило» и т.д.
Слайд 62
Пример задания в тестовой форме:
Чаще всего острый аппендицит
приходится дифференцировать с:
+А) Почечной коликой;
В) Плевропневмонией;
С) Инфарктом миокарда;
D) Геморрагическим васкулитом;
Е) Пищевой токсикоинфекцией
Слайд 63
Необходимо избегать использования фраз:
«Ничего из перечисленного»;
«Все из перечисленного»;
«Все ответы правильные»;
«Все варианты верны»;
«Нет правильного ответа»;
«Лечения не требуется»;
«Наблюдения не требуется» и т.д.
в
вариантах ответов.
Слайд 64
НЕ рекомендуется использовать слова и фразы в вопросах:
Как
Вы думаете…
Как, по Вашему мнению…
На Ваш взгляд…
Ваш диагноз…
Как
Вы считаете…
Укажите…
Назовите…
Определите… и т.д.
Слайд 65
Ваша тактика при выявлении случаев изготовления продуктов питания
с применением допущенных пищевых добавок по рецептурам, несогласованным с
органами санитарного надзора.
1. Нет причин что-либо предпринимать
2. Запретить выпуск такой
продукции
3. Разрешить реализацию продукции для взрослого населения
4. Разрешить реализацию продукции лишь порционно в системе общепита
5.+Разрешить реализацию продукции после лабораторного исследования концентрации пищевых добавок в изделии
Слайд 66
Пример вопроса
В какой ситуации аппендэктомия не проводится, а
операцию заканчивают только лишь дренированием?
А) При абдоминальном сепсисе;
В)
При распространенном перитоните;
С) При периаппендикулярном абсцессе;
D) При крайне тяжелом состоянии
больного;
+Е) При плотном аппендикулярном инфильтрате;
Слайд 67
Пример неудачного задания:
Ребенку 4-х лет, проживающему
в хороших бытовых условиях, на основании клинико-эпидемиологических и бактериологических
данных выставлен диагноз «Сальмонеллез, желудочно-кишечная легкая форма». Ребенок может лечиться
на дому.
Сколько дней необходимо наблюдать за очагом сальмонеллезной инфекции, если больной госпитализирован?
А) 5 дней.
Б) 7 дней.
В) 14 дней.
Г) 21 день.
Д) Наблюдения не требуется.
Слайд 68
Вопрос, сложный для восприятия
Какова основная причина формирования абсцесса
Дугласова пространства после операции аппендэктомии, выполненной по поводу флегмонозной
формы острого аппендицита?
А) Отсутствие антибиотикотерапии;
В) Назначение малых доз антибиотиков;
С) Не
подведение марлевого тампона;
+D) Неадекватная санация малого таза;
Е) Ушивание операционной раны наглухо
Слайд 69
Укажите не деструктивную форму острого аппендицита у детей?
*
Флегмонозная
* Гангренозная
* + Катаральная
* Гангенозно-перфоративная
*
Некротическая
Слайд 70
Укажите характерный признак для атрезии пищевода:
*
рвота с рождения
* + пенистые выделения изо рта при
рождении
* кровотечение из пищевода
* запавший
ладьевидный живот
* срыгивания створоженным молоком
Слайд 71
! Качество медицинской помощи –
*уровень соответствия оказываемой
медицинской помощи стандартам и протоколам диагностики и лечения
*уровень
соответствия оказываемой медицинской помощи потребностям пациентов;
*+уровень соответствия оказываемой медицинской помощи
стандартам, утвержденным уполномоченным органом и установленным на основе современного уровня развития медицинской науки и технологии;
*интегральный показатель соответствия оказываемой медицинской помощи стандартам и протоколам;
*уровень соответствия оказываемой медицинской помощи индикаторам качества
Слайд 72
Здравоохранение – это
*+система мер политического, экономического, правового,
социального,
культурного, медицинского характера, направленных на предупреждение
и лечение
болезней, поддержание общественной гигиены и санитарии, сохранение и
укрепление физического
и психического здоровья каждого человека, поддержание
его активной долголетней жизни, предоставление ему медицинской помощи в случае
утраты здоровья;
*совокупность государственных органов и субъектов здравоохранения, деятельность которых направлена на обеспечение прав граждан на охрану здоровья;
*деятельность медицинских организаций, направленная на сохранение и укрепление здоровья населения;
*совокупность медицинских организаций и система мер политического, экономического, медицинского характера, направленных на предупреждение и лечение болезней
Слайд 73
Охлаждение новорожденных во время операции вызывается всеми
названными причинами, за исключением:
* незрелостью центров терморегуляции
* инфузией и
трансфузией холодных сред
* полуоткрытым контуром и наружным охлаждением
*+ дыханием по
системе Мэджилл — Мейплсона
* перспирацией
Слайд 74
Как вариант:
Охлаждение новорожденных во время операции вызывается всеми
перечисленными ниже причинами, КРОМЕ:
* незрелости центров терморегуляции
* инфузии и
трансфузии холодных сред
* полуоткрытого контура и наружного охлаждения
*+ дыхания по
системе Мэджилл — Мейплсона
* перспирацией
Форматом «Все…КРОМЕ» нельзя злоупотреблять!
Слайд 75
У новорожденных и грудных детей
*повышена чувствительность к
деполяризующим и резистентность к
недеполяризующим релаксантам
*+повышена чувствительность к недеполяризующим,
*повышена чувствительность
к недеполяризующим и деполяризующим релаксантам
*отмечается резистентность к недеполяризующим и деполяризующим
релаксантам
*+имеется резистентность к деполяризующим релаксантам
Слайд 76
Основная часть больных с атрезией пищевода оперируется:
*+в срочно-
плановом порядке после завершения всего комплекса обследования и тщательной
предоперационной подготовки в течение одних или нескольких суток
* по жизненным
показаниям.
* обязательно в первые сутки после рождения.
* в экстренном порядке после предоперационной подготовки
часа) с момента поступления.
*на вторые сутки после госпитализации.
Слайд 77
Пример
Если у 2-х дневного новорожденного ребенка на обзорной
рентгенограмме брюшной полости определяются два больших газовых пузыря с
горизонтальным уровнем жидкости, то Ваш предварительный диагноз
* пилоростеноз
*+высокая врожденная
кишечная непроходимость на уровне 12-перстной кишки
*низкая врожденная кишечная непроходимость
*заворот средней кишки
*высокая врожденная кишечная непроходимость на уровне пилорического отдела
Слайд 78
Мальчик 7 лет доставлен в экстренном порядке с
жалобами на резкие боли внизу живота, отсутствие самостоятельного мочеиспускания.
Мочеиспускание отсутствует в течение 10 часов. При осмотре отмечается увеличенный
и болезненный мочевой пузырь. Предварительный диагноз?
*фимоз
*парафимоз
*+камень уретры
*опухоль мочевого пузыря
*острый цистит
Какой из перечисленных ниже предварительных диагнозов НАИБОЛЕЕ вероятен?
Слайд 79
Шаблон «сверху вниз»
Мальчику 5 недель с весом 4.1
кг с истощающей рвотой планируется выполнить пилоромиотомию.
*+ у ребенка
вероятно имеется гипокалиемия и алкалоз
*+ при интубации нежелательно применять сукцинилхолин
*+
интубация должна проводиться с использованием приема Селлика (давления на перстневидный хрящ)
* у ребенка вероятно имеется гиперкалиемия
* для этой патологии характерно развитие ацидоза
Слайд 80
Какое первоочередное мероприятие, которое должен сделать врач –
терапевт при подозрения на инфекционное заболевание?
A) вызвать инфекциониста
B)
вызвать зам. главного врача
C) +передать экстренное извещение
D) провести дезинфекцию
в кабинете
E) направить в инфекционный стационар
Слайд 81
В приёмный покой инфекционного стационара одновременно обратились больные
с диагнозами: ОРВИ, ОКИ, вирусный гепатит.
Как должен проводиться
приём этих больных?
A) первоочередно принимается больной с ОРВИ
B) больной
ОРВИ принимается в последнюю очередь
C) все больные принимаются по очереди в одном боксе
D) больные принимаются в машине скорой медицинской помощи — ?
E) +больные принимаются в разных боксах по механизму передачи
Слайд 82
У женщины, устраивающейся на работу в молокозавод, при
посеве кала обнаружена Sh. Flexneri. Клинически здорова.
Выберите наиболее правильную
тактику врача?
A) в лечении не нуждается
B) диспансерное наблюдение
C)
назначить амбулаторное лечение
D) *госпитализировать в инфекционное отделение
E) контрольное бактериологическое обследование
Слайд 83
Мужчина 24 года доставлен с бригадой СМП в
приемный покой ЦРБ с диагнозом: острая кишечная инфекция. Заболел
остро, 2 дня назад. Жалобы на тошноту, рвоту 2 раза,
ослабление стула 1 раз, постоянная усиливающаяся боль в нижнем правом квадранте живота. При осмотре определяется резкая болезненность и напряжение в правой подвздошной области без симптомов раздражения брюшины, выслушиваются кишечные шумы. Количество лейкоцитов 18 х 109/л. Активность амилазы сыворотки в пределах нормы. Анализ кала на скрытую кровь отрицателен.
С каким заболеванием наиболее (НАИБОЛЕЕ)целесообразно провести дифференциальную диагностику?
A) перитонитом
B) острым панкреатитом
C) +острым аппендицитом
D) острым холециститом
E) ущемление паховой грыжи
Слайд 84
На профилактическом осмотре в одном из университетов врач
заметил у студента на коже лица, волосистой части головы,
туловища, конечностей пятнисто-папулезную, везикулезную сыпь, местами покрытую корочками.
Какова длительность срока
наблюдения за контактными в очаге?
A) 5 дней
B) 10 дней
C) 14 дней
D)+ 21 день
E) 30 дней
Слайд 85
Женщина 22 года, со сроком беременности 18-19 недель
доставлена с бригадой СМП в приемный покой ЦРБ. Заболела
остро, 7 дней назад, жалобы на тошноту, рвоту 1-2 раза,
тяжесть в эпигастрии, потемнение мочи. Эпид. анамнез: живет в частном доме, употребляет сырую воду из колонки. Объективно: кожные покровы умеренный желтушной окраски, склеры субиктеричные, печень под краю реберной дуги +2,0 см. Моча на желчные пигменты резко положительная, билирубин 120 ммоль/л, прямой 98 ммоль/л, АЛТ 463 ед/л(при нормы 44 ед/л), тимоловая проба 15 ед.
Куда госпитализируется беременная женщина?
A) в обсервационное отделение роддома
B) + в инфекционное отделение
C) в терапевтическое отделение
D) гастроэнтерологическое отделение
E) в общую палату родильного отделения
Слайд 86
Мужчина, 32 лет, поступил в стационар 10 октября
на 4-й день болезни. Жалобы: на повышение температуры до
38,8ºС, озноб, слабость, головную боль, боли в горле при глотании,
насморк, жидкий стул до 3-х раз. В анамнезе: не работает, живет в частном доме. При осмотре: состояние средней тяжести. На коже туловища необильная пятнисто-папулезная сыпь. Легкая субиктеричность склер. Зев: гиперемия слизистой оболочки, миндалины увеличены, налетов нет. Увеличены шейные, подчелюстные, подмышечные, локтевые лимфоузлы. Нижний край печени выступает из-под реберной дуги на 1,5 см.
Какой предварительный диагноз из перечисленных ниже наиболее НАИБОЛЕЕ вероятен?
A) + иерсиниоз
B) лептоспироз
C) сальмонеллез
D) вирусный гепатит
E) острый тонзиллит
Слайд 87
При патронаже мать новорожденного ребенка жалуется на шумное
дыхание, отмечаемое с рождения и усиливающееся при кормлении и
беспокойстве. При осмотре ребенка отклонений от нормы со стороны внутренних
органов не выявлено. Какое заключение было сделано врачом? — ???????????????
* Стеноз гортани
* Бронхит
* Трахеит
* Ларингоспазм
*+ Врожденный стридор
Слайд 88
Как сфокусирован вопрос?
При появлении на коже гнойных элементов
и изменения общего состояния новорожденные из группы риска по
возникновению гнойно-воспалительных заболеваний:
*+ Госпитализируются в стационар
* Лечатся на дому
* Лечатся в дневном стационаре
* Консультируются зав. отделением
* Лечатся амбулаторно у хирурга
Слайд 89
На данном рисунке изображены кривые распределения недельной учебной
нагрузки школьников. Какой из вариантов неверный?
Слайд 90
Варианты ответов
На данном рисунке изображены кривые распределения недельной
учебной нагрузки школьников. Какой из вариантов неверный?
1. На левом
рисунке
2 +На правом рисунке
3. На обоих рисунках — ?
4. Ни
на одном из рисунков -?
5. Зависит от возраста учеников -?
Слайд 91
Стартовым раствором для выведения больного из кетоацидотической комы
является
А) 2 % раствор глюкозы
Б) 5 % раствор глюкозы
В)
0,45 % раствор хлорида натрия
Г) 0,9 % раствор хлорида натрия
Д)
4,0 % раствор хлорида калия
Слайд 92
Больной с сахарным диабетом 2 типа доставлен каретой
скорой помощи в бессознательном состоянии. Накануне отмечалась 3 кратная
рвота, принимает мочегонные средства для лечения сердечной недостаточности. Гликемия 30
ммоль/л. Кетонурии нет. С чего следует начать лечение?
А) С введения изотонических растворов
Б) С введения гипотонических растворов
Г) С введения раствора Рингера
Д) Оральной регидратации
Д) С введения гемодеза
Введение какого лекарственного препарата из перечисленных НАИБОЛЕЕ целесообразно в первую очередь?
Слайд 93
На глазном дне описаны следующие изменения: множество микроаневризм
в парамакулярной области, неравномерное расширение вен с
перетяжками, новообразованные сосуды в плоскости сетчатки, начальный фиброз без тракции
сетчатки. Поставьте диагноз.
А) Непролиферативная диабетическая ретинопатия
Б) Препролиферативная диабетическая ретитнопатия
В) +Пролиферативная диабетическая ретинопатия
Г) Гипертоническая ретинопатия
Д) Диабетическая макулопатия
Слайд 94
Хороший пример клинической ситуации
Ребенок на 8-й день жизни
выписан из роддома. Матери 28 лет, по профессии инженер-химик,
курит. При сроке беременности 12 недель перенесла грипп. Роды произошли
в 37-38 недель. Слабость родовой деятельности, безводный период 5 часов. Родился в асфиксии, 6-7 баллов, с массой 2800,0, рост 48 см. К груди приложен через 12 часов, сосет вяло, быстро засыпает. Физиологическая убыль 250,0. На 4-е сутки появился интенсивный систолический шум во 2 межреберье слева у грудины и на спине. Тахикардия.
Определите группу здоровья: — нужно переформулировать вопрос
* І
* ІІ
*+ ІІІ
* ІV
* V
Слайд 95
Пациентка 35 лет предъявляет жалобы на головные боли,
периодические головокружения, мелькание «мушек» перед глазами. При осмотре выявлена
бледность кожи и слизистых оболочек. При проведении общеклинического анализа крови
на гематологическом анализаторе были получены следующие результаты: RBC – 2,8х10 12 / л, HB — 60 г/л, MCH – 21pg, MCV – 71fl, RET – 2%, LEU – 5,2 х109/л PLT -180х109.
НЕТ ВОПРОСА
Железодефицитная анемия
Острая постгеморрагическая анемия
В12, фолиево-дефицитная анемия
Гемолитическая анемия
Апластическая анемия
Слайд 96
Пациентка 35 лет предъявляет жалобы на головные боли,
периодические головокружения, мелькание «мушек» перед глазами. При осмотре выявлена
бледность кожи и слизистых оболочек. Было назначено проведение общеклинического анализа
крови на гематологическом анализаторе. Какие результаты, наиболее вероятно, следует ожидать?
RBC – 2,9*10 12 / л, HB — 70 г/л, MCH -23 pg , RET – 3%, MCV — 72fl
RBC – 8,5*10 12 / л, HB — 180 г/л, MCH -21 pg, RET – 2%, MCV — 80 fl
RBC – 5,5*10 12 / л, HB — 130 г/л, MCH -80 pg , RET – 1%, MCV -90fl
RBC – 3,5*10 12 / л, HB — 90 г/л, MCH -21 pg, RET – 1%, MCV — 120 fl
RBC – 1,5*10 12 / л, HB — 50 г/л, MCH — 30 pg, RET – 0,4%, MCV -70 fl
Слайд 97
Больной 28 лет поступил с жалобами на резкую
слабость, отек лица, голеней, головную боль, одышку. Эти жалобы
появились внезапно через неделю после перенесенной ангины, одновременно резко уменьшилось
количество выделяемой мочи, которая имеет красновато-бурый цвет.
Анализ мочи: Микроскопия мочи:
Суточное количество мочи – 300 мл. Почечный эпителий – 5-6 в поле зрения,
Цвет — красно-бурый. Лейкоциты – 4-6 в поле зрения,
Прозрачность — мутная. Эритроциты более 100 в поле зрения,
Относительная плотность – 1030. Цилиндры гиалиновые — 1-2-3 в поле зрения,
Цилиндры зернистые –1-2-3 в поле зрения.
Белок – 4 г/л.
Какой из перечисленных диагнозов наиболее вероятен?
Острый пиелонфрит
Мочекаменная болезнь
Диабетическая нефропатия
Острый гломерулонефрит
Острый цистит
Слайд 98
Назначение инсулина является абсолютным показанием для одного из
нижеперечисленных состояний
А) Сахарный диабет 1 типа
Б) Сахарный диабет 2типа
В)
Нарушенная гликемия натощак
Г) Гестационный сахарный диабет
Д)Нарушенная толерантность к глюкозе
Слайд 99
Укажите средство, ослабляющее гипогликемизирующее действие сахароснижающих пероральных препаратов
А)
иАПФ
Б) нейролептики
В) глюкокортикоиды
Г) производные салициловой кислоты
Д) антикоагулянты непрямого действия
Слайд 100
Один из нижеперечисленных критериев нарушений углеводного обмена соответствует
нарушенной толерантности к глюкозе:
А) натощак –
часа –
– ≥7,8
В) натощак –≥6,1, через 2 часа – ≥7,8 и <11,1
Г) натощак – <6,1, через 2 часа – ≥7,8 и <11,1
Д) натощак – ≥5,6 и <6,1ммоль/л, через 2 часа – <7,8
Слайд 101
Методология разработки заданий в тестовой форме
Б. Блюм
или В.С.Аванесов?)))
Слайд 102
Когнитивные уровни
по Аванесову В.С.
Знание названий, имен и смысла
названий и имен
Знание определений
Фактуальные знания
Классификационные знания
Ассоциативные знания
Сравнительные сопоставительные знания
Знание противоположностей, противоречий
Причинные знания,
причинно-следственных отношений, знание оснований, принципов классификации
Алгоритмические знания
Процедурные знания
Технологические знания
Структурные знания
Обобщенные, системные знания
Оценочные знания
Вероятностные знания
Процессуальные знания
Абстрактные знания
Запоминание
Понимание
Применение
Анализ
Синтез
Оценка
Слайд 103
ЭТАПЫ РАЗРАБОТКИ ТЕСТА
По Аванесову В.С.
1. Теоретический этап:
цели тестирования, выбор подхода к созданию теста, изучение учебного
материала
2. Практический этап -1:
•Определение структуры теста (спецификация теста)
•Разработка тестовых заданий
•Экспертиза тестовых заданий
•Корректировка тестовых заданий
•Конструирование теста для апробации: (определение трудности ТЗ, количества, темпа выполнения и создание композиции ТЗ в дидактическом тесте)
•Разработка инструктивно-методического обеспечения теста: подготовка процедуры проведения теста, в том числе: бланка заданий, бланка ответов, инструкции для студента, инструкции для преподавателя, ключей тестов, сценарий проведения тестирования.
•Экспертиза теста
3. Экспериментальный этап
•Предварительное тестирование
•Анализ и интерпретация результатов тестирования (определение качественных характеристик тестов)
4. Практический этап -2
•Переработка теста на основе результатов предварительного тестирования
•Составление окончательного варианта теста
•Стандартизация теста (при необходимости)
National Board of Medical Examiners (NBME)
1. Анализ работы
2. Разработка матрицы
•Определить контингент
•Определить цели тестирования
• Определить спецификацию теста (продолжительность, количество ТЗ, формат ТЗ)
•Экспертиза матрицы и спецификации экспертной комиссией
•Совершенствование матрицы и спецификации теста
3. Написание тестовых заданий
•Экспертная оценка содержания ТЗ
•Экспертная оценка формата ТЗ
•Претест
•Анализ статистических параметров претеста
•Коррекция тестовых заданий
•Решение о соответствии тестовых заданий матрице, формату и др.
4. Формирование банка тестовых заданий
Слайд 104
Формат тестовых заданий
по В.С.Аванесову
1. Задания закрытой формы
— с выбором одного правильного ответа (количество вариантов не
менее 6)
— с выбором нескольких правильных ответов (количество вариантов
ответов от 5 до 12)
2. Задания открытой формы
— на дополнение
— на соответствие
— на правильную последовательность
National Board of Medical Examiners (NBME)
1. Задания закрытой формы
множественного выбора (верно/неверно, А-, K-, R-, N-, B- E – типов)
2. Задания открытой формы
Эссе
Сочинения
Открытые вопросы
Слайд 105
ТРЕБОВАНИЯ К СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ
По Аванесову В.С.
•Краткость
•технологичность
•правильность формы
•правильность содержания
•логическая форма высказывания
•одинаковость правил оценки ответов
•наличие определенного места для ответов
•одинаковость
инструкции для всех испытуемых
•правильность расположения элементов задания
•адекватность инструкции форме и содержанию задания
Аванесов В.С. Основы педагогической теории измерений // Педагогические Измерения, 1, 2004г. С. 17.
National Board of Medical Examiners (NBME)
•Соответствие матрице теста
•Соответствие формату ТЗ
•Правильность содержания и формулировки определений, симптом и т.д.
•Соответствие правилу «закрытых ответов»
•Шаблон «снизу вверх»
•Относительно длинное условие и относительно короткие варианты ответов
•Логическая последовательность
•Грамматическая правильность
•Содержательная и грамматическая гомогенность дистракторов
«Guide to good practices
for the development of test
Items» U.S. Department of Energy FSC 6910
Washington, D.C. 20585
Слайд 106
Экспертиза заданий в тестовой форме
Рассмотрение на заседании тестового
Комитета (кафедра, профильный КОП)
Повторная экспертиза по итогам апробации заданий
в тестовой форме
Дистракторный анализ по итогам
проведения
экзамена
Слайд 107
Обратная связь по итогам
1 этапа экзамена
Программное обеспечение -?
Статистическая обработка -?
Дистракторный анализ -?
Уровень сложности
Надежность
Валидность
Слайд 108
Статистические параметры уровня тестового задания
Два основных понятия:
Уровень
сложности – степень «тяжести» задания (Р)
Дискриминационная способность (индекс
ID) – на сколько «хорош» вопрос (тестовое задание)
0,35 –
предпочтительно
Отрицательное значение не допустимо
Высокое «+» значение свидетельствует об эффективности деления испытуемых.
Является параметром критериальной валидности.
Кто лучше ответил на вопрос?
Сильные студенты?
Слабые студенты?
Все отвечают правильно?
Никто не отвечает правильно?
Слайд 109
Для чего делается анализ задания?
Контроль качества: дефектные
компоненты (задания, вопросы, дистракторы)
Определение неудачных заданий:
пересмотр, замена, удаление
По международным стандартам, из прошлогодней базы должно остаться не более
15-20% ЛУЧШИХ заданий в тестовой форме
Слайд 110
От разработчика тестов и эксперта требуется:
некоторая математико-статистическая подготовка
знание
основных тестовых теорий и методов многомерного статистического анализа
опыт правильной
интерпретации тестовых результатов
умение тактично обсуждать с авторами явные и
скрытые дефекты их заданий в тестовой форме
психологическая готовность к совместному поиску аргументов
и…бесконечное терпение….