[ЗВУК] В этом видео мы поговорим о том, из чего состоит действительно хороший, качественный тест. Это очень важно знать для того, чтобы понять, когда к вам в школу приходят какие-то разработчики тестов и предлагают вам принять участие в исследовании или принять участие в апробации, вы должны понимать, что конкретно вам предлагается, хороший ли это тест, действительно ли можно доверять его результатам. Именно поэтому нужно знать, из чего состоит хороший тест. Итак, обязательные составляющие хорошего теста. Первое — это спецификация. Спецификация управляет абсолютно всем тестом. Она описывает и то содержание, которое будет измеряться в тесте, и то, в какой таксономии, например, это содержание измеряется, и то, какие задания, сколько этих заданий будет предъявлено вашим ученикам, и то, каким образом обрабатываются результаты этого теста, каким образом начисляются баллы, и всё-всё-всё остальное. В этом видео чуть дальше я более подробно остановлюсь на спецификации. Кроме спецификации в комплект тестовых документов входит непосредственная компьютерная программа или бланк теста — это то, что видят ваши ученики, когда они проходят тестирование. Но это только та видимая верхушка айсберга, из которой на самом деле состоит тест, потому что, помимо тестового буклета, который мы все как бы видим и считаем тестом, есть ещё и очень важные пункты — например, опубликованные валидизационные исследования. Эти исследования показывают, насколько хорошо этот тест измеряет то, что он должен измерять. И, соответственно, из этих валидизационных исследований вы можете сделать вывод, можете ли вы доверять результатам этого теста. Помимо этого, в тестовый комплект входят руководства всех участников тестирования — это могут быть и сами ученики, и администраторы из числа школьных учителей, педагогов, директоров, завучей, психологов и координаторы. Например, если вам предлагают участие в каком-то массовом тестировании, например, национальном, как ЕГЭ, поскольку он делается для очень большой широкой территории, то система администрирования этого теста очень сложная, и для каждого участника этого процесса должно быть подготовлено отдельное руководство, чтобы соблюсти процедуру тестирования и не получить плохих результатов из-за того, что, например, в одной аудитории был яркий свет, а в другой тусклый, и в том месте, где был тусклый свет, ученики, соответственно, хуже выполнили тест. Чтобы всего этого не было, создаётся большой пакет документов с руководством и объяснением, кто и что в этом тестировании делает. Итак, давайте посмотрим подробнее на то, что такое спецификация. Как я сказала только что, спецификация — это абсолютно полное, исчерпывающее описание теста. Для любого человека, который держит в руках спецификацию, должно быть понятно, что это за тест, для какой цели он разработан, какие выводы будут делаться о тестируемых по результатам этого теста, какие задания, сколько их, какую обратную связь получают тестируемые — вся эта информация должна быть отражена в спецификации. И спецификация начинается с постановки цели. Цель тестирования бывает абсолютно разной. Некоторые тесты создаются для того, чтобы оценить, например, индивидуальный прогресс учеников в процессе освоения какой-то дисциплины или в процессе развития какого-то навыка. Другие тесты создаются для того, чтобы отфильтровать тех, кто получит какую-то определённую квалификацию, от тех, кто её не получит. Всё это разные тесты с абсолютно разными целями. Поэтому если к вам в школу приходят разработчики теста и предлагают вам участвовать в тестировании, самое первое, что вам нужно сделать — это посмотреть на то, а какая цель у этого тестирования. И, соответственно, вы сможете понять, какие выводы для себя как сотрудник школы вы сможете сделать из этого теста и как использовать его результаты для улучшения вашего образовательного процесса. Помимо цели, в спецификации указывается то, в какой теории, в каком подходе, в каком русле и течении лежит этот тест. Какая таксономия образовательных целей используется — например, используется ли таксономия Блума или таксономия Web — это всё сказывается на том, какие задания будут в итоге разработаны в тесте, какая обратная связь, и какие выводы можно сделать о тестируемых в результате прохождения этого теста. Следующий пункт: в спецификации должно быть отражено, что конкретно измеряется в тесте. Причём это должно быть описано не общими словами, например, «в тесте измеряются знания арифметики», а этот конструкт, это знание арифметики должно быть декомпозировано и разложено на более мелкие детали. Смысл этого состоит в том, что мы можем делать выводы об учениках, только глядя на их поведение — мы не можем залезть им в голову. Именно поэтому проводится то, что называется в тестологии «операционализация», то есть разложение вот этого абстрактного теоретически нагруженного понятия «знания арифметики» или «критическое мышление» на более понятные маленькие дробные действия. В примере со знанием арифметики это может быть так: например, знание арифметики — это умение складывать двузначные числа, трёхзначные числа и умение вычитать: двузначные числа и трёхзначные числа. Декомпозируем дальше. Умение вычитать можно декомпозировать на вычитание с переходом через десяток или без перехода через десяток — и вот эти единички уже являются наблюдаемым поведением, которое мы реально можем видеть у тестируемых, у учеников; и именно на основе вот этих маленьких-маленьких кусочков разрабатываются задания теста. Идём дальше. Какой из элементов измеряется каждым конкретным заданием в тесте? Вот я только что про это сказала: после того, как декомпозировано то содержание, которое измеряется в тесте, в спецификацию закладываются на каждый вот этот маленький дробный элементик закладывается одно или два задания в зависимости от важности этой темы, которая покрывается этими заданиями. И в спецификации критически важно, чтобы было прописано каждое конкретное задание теста, оно какой элемент содержания проверяет, потому что без этого знания невозможно делать вывод о том, что умеет, а чего не умеет ученик. Если он ошибся в каком-то задании теста, что нам это говорит о его способностях, компетенции, умении, если мы не знаем, какое конкретно содержание проверяется этим заданием? Поэтому если к вам пришли разработчики теста, и вы попросили у них спецификацию, и они дали вам посмотреть свою спецификацию, обратите внимание на то, есть ли там какая-то матрица (обычно это делается в форме матрицы), которая связывает каждое конкретное содержание прямо по номеру с конкретным элементом содержания, которое оно проверяет. Также в спецификации указываются все организационные аспекты проведения тестирования. Например, время тестирования: в какое время можно и нельзя тестировать учеников? Если вам предлагается, вашей школе предлагается тест когнитивных способностей, тогда разработчики, скорее всего, в спецификации указывают, что этот тест нужно проходить в первой половине дня — тогда, когда дети максимально собраны, максимально готовы и замотивированы отвечать на какие-то задания теста. И такой тест категорически нельзя проходить во второй половине для или вечером, когда дети уже уставшие, когда они уже отзанимались в школе, и им не хочется показывать свои знания и умения. Помимо этого, все условия по аудитории, по освещению, по температуре, по количеству учеников, которое можно тестировать в одной аудитории — всё это должно быть также отражено в спецификации. Необходимые материалы, которые нужны для того, чтобы провести тестирование. Например, бланки или, если компьютерный тест, компьютеры или ноутбуки, нужна ли клавиатура, мышка, наушники — всё это указывается в спецификации. Особенно, если у вас компьютерное тестирование, обратите внимание на требование к программному обеспечению — оно тоже должно быть отражено в спецификации. И в следующем видео я вам более подробно расскажу про тестовый буклет и всю остальную сопроводительную информацию к тесту, которую вам как сотруднику школы нужно знать, чтобы понять, качественный вам предлагается инструмент или нет. [ЗВУК] [ЗВУК]
