Итак, еще один блок элементов конструктора, который нам нужно с вами рассмотреть. И здесь мы тоже начнем с вами выходить на такие прикладные примеры, на примеры того, как это работает при создании методики — это вопрос о форматах, инструментах и источниках данных для исследований. И если источники данных (в общем-то, это тема, которую с вами уже обсуждал Александр Александрович на предыдущих неделях наших занятий, здесь, в общем-то, уже некоторые конструкции у вас должны были сложиться и я не буду этому вопросу много времени уделять), то с форматами и инструментами все-таки, на мой взгляд, нужно немножко поработать, тем более, что это вещи, которые определяют то, как в итоге будет выглядеть наше с вами исследование. Итак, что такое формат? Если напрямую переводить, то это "внешний вид". Если в отношении бумажных каких-то публикаций — это размер книги, размер листа. Если в отношении процессов или документов, то это структура, это способ построения. Это форма проведения, это совокупность правил. То есть это некое описание того, как будет внешне выглядеть какой-то объект, какой-то продукт. В нашем случае — вопрос о том, как будет выглядеть наше исследование в образовании. И вот здесь на этом слайде вы можете увидеть, опять-таки, не закрытый перечень, какие могут быть исследования и, в общем-то, уже в привычном нам формате они дихотомическими парами здесь прописаны: могут быть обзорные исследования или которые посвящены обзору системы или систем в целом, всех элементов, захватывая все элементы, то есть про все на свете, что только есть в этой системе, а могут быть тематические, когда я буду описывать не просто всю региональную систему образования, а только, например, тему кадрового обеспечения деятельности этой системы. Могут быть количественные и качественные исследования, это, в общем-то, понятные вещи. Они могут быть разовые и мониторинговые, то, что мы с вами обсуждали. Универсальные и пользовательские: чем они будут отличаться. Пользовательские — это те, которые ориентированы под конкретного пользователя, под конкретного заказчика. Универсальные исследования, результаты которых могут оказаться полезными и важными широкому кругу интересантов, широкому кругу заинтересованных лиц. Могут быть линейные и кластерные: линейные — это, когда все объекты, которые я исследовала и оценила, я их выстраиваю в одну линейку и сравниваю между собой; а кластерные — когда я все эти объекты, например, все школы региона я делю на сельские и городские. Это уже кластеры и сравнивать я буду только сельские с сельскими, а городские с городскими. Я могу поделить их на другие кластеры, на более сложные кластеры и так далее, и тому подобное. И точно также с другими форматами. Количество форматов исследований в образовании очень большое. И то, какое исследование в каком формате вы будете проводить, это определяется все на том же уровне: в чем ваша проблема и какую задачу, какую цель вы собираетесь в процессе этого исследования решать. Вот на примере, который мы с вами рассматривали с проблемой неиспользования учителями межпредметных связей. Если наша цель — понять причину низкого использования, то какое это будет исследование? Явно оно будет тематическое. Скорее всего оно будет качественное, потому что нам нужно увидеть причины и вероятнее всего оно должно быть мониторинговое и так далее. Мы будем выбирать из набора вот этих вот предложенных форматов, мы будем выбирать те, которые в большей степени помогут нам ответить на конкретную управленческую задачу, на конкретную цель, реализовать конкретную цель, которую мы ставим перед исследованием. И точно так же мы будем подбирать инструменты. И инструмент в исследовании, как вы понимаете, как это обсуждалось на предыдущих неделях, — это одно из ключевых условий, обеспечивающих качество исследований. Инструмент — это то, с помощью чего мы будем исследовать. И использование статистических данных, аналитика на основе статистических данных. Ну, есть открытые источники и мы получаем сведения и заполняем технологические карты, как инструмент, собирая их из открытых источников. Но для реализации этого метода нам могут понадобится такой инструмент, как официальный запрос к официальным лицам, официальным органам, которые являются держателями той или иной информации. Например, статистические данные об образовательных школах в Российской Федерации — они не находятся в открытом доступе, в открытом доступе только сводные данные по регионам. Об этом вам тоже уже рассказывали. А для того, чтобы получить данные по школам, для решения ваших управленческих задач, вы должны сформулировать официальный запрос в государственный информационно-вычислительный центр при Министерстве просвещения Российской Федерации. Инструмент — это вещь очень тонкая и инструмент это. Существуют правила в разных историях. Вот, например, про социологические опросы правила подробно описаны и, я думаю, что можно найти большое количество различных курсов по социологии, где подробно вам расскажут, как правильно строить социологические инструменты. Вот, например, когда вы работаете с экспертизой, то правильно построенный инструмент тоже может помочь сделать вам экспертизу более точной. Давайте попробуем посмотреть на примере. Вот задача для эксперта, опять таки, на простом примере — оценить наличие на официальном сайте образовательной организации в сети интернет сведений о педагогических работниках. Мы предлагаем экспертам шкалу от нуля до 10, где ноль — это совсем нет информации, 10 — это информации много и достаточно для любых групп пользователей. Как на основе вот так сформулированной задачи эксперт будет проводить оценку? И здесь начинает работать тот самый субъективный фактор — мнение — я считаю, что достаточно, чтобы на сайте школы (я, как эксперт), достаточно только фамилии и в каких классах он работает. Я нашел эти две позиции, считаю, что 10 баллов и все, это заслуженные 10 баллов данного сайта. А другой считает, нет, там должно быть и про образование и про то, какой у него предыдущий опыт работы, и какие результаты образования у его учеников, и сколько у него собственных детей, и как они учились. И тогда он посмотрит на эти два пункта и скажет: "Нет, здесь больше одного балла поставить нельзя ". И за один и тот же сайт два разных эксперта поставят, ну, кардинально противоположные оценки. Для того, чтобы такие вещи не происходили, для того, чтобы максимально можно было объективировать оценку экспертов, создаются технологические карты с инструкциями, в которых подробно и детально прописывается, из чего будут складываться эти 10 баллов. Вот вы видите на слайде пример фрагмента такой технологической карты для конкретной задачи оценки наличия сведений о педагогических работниках. Перечислены 10 позиций, за каждую из которых эксперт ставит по одному баллу. Хотя и такая карта все равно оставляет пространство для экспертной позиции, для экспертной субъективности. Подробнее мы об этом будем говорить, когда будем обсуждать экспертизу, как особый вид исследований в рамках умной аналитики. Классические требования к качеству социологических опросов, как я уже говорила, можно найти в разных учебных курсах, на сайтах этих, в учебниках, которые в открытом информационном пространстве, в интернете можно найти сколько угодно, я бы выделила вот эти пять, на мой взгляд, ключевых, среди которых обязательно: это защита самих анкет от недобросовестных ответов, то есть "шкалы лжи" так называемые; это точность и понятность формулировок, то есть, что вы формулируете, что вы хотите услышать, ответ на какой вопрос вы хотите услышать от вашего респондента. Это качество формирования выборки, она должна быть пропорциональной и репрезентативной. Это независимость операторов и интервьюеров, которые проводят интервью или инициируют анкетирование. И здесь такой банальный хрестоматийный уже пример: сам учитель не может инициировать анкетирование родителей, потому что даже то, что он просит их заполнить эти анкеты, уже приводит к тому, что родители начинают социально ожидаемые ответы давать на эту анкету в пользу учителя, если они к нему хорошо относятся или, наоборот, против него, если они к нему по каким-то причинам, совершенно другим, относятся не очень хорошо. Ну и, безусловно, единые условия для всех опрашиваемых, то есть, если мы всех опрашиваем по одному в закрытом помещении, то мы должны все 3500 респондентов опрашивать по одному в закрытом помещении. Или всем в электронном виде, или все в классах по 30 человек. То есть вот эти вещи — ключевые для обеспечения качества опросов. Но вот, возвращаясь к формулировке вопросов, к точности формулировки вопросов, в последнее время стало очень, с одной стороны, модным, с другой стороны, это вроде, в общем-то, полезная информация — исследовать уровень удовлетворенности потребителей образовательных услуг, в основном родителей или студентов, если речь о более взрослой категории обучающихся идет, выяснить, насколько они удовлетворены или не удовлетворены образовательным процессом. И вот это пример, вопрос про "Удовлетворены ли вы тем, как учитель преподает урок?" или "Удовлетворены ли вы чистотой помещений в детском саду?", нужно понимать, что удовлетворенность — это совершенно не нормируемый показатель. Удовлетворенность — это очень субъективное ощущение, причем оно складывается из разных вещей, начиная с того, что оно складывается из настроений здесь и теперь. Вчера на моего ребенка накричали, уровень моей удовлетворенности по любому поводу в отношении данной школы, по любому, даже если меня начнут сейчас спрашивать про чистоту туалетов — на моего ребенка вчера накричали, я буду не очень удовлетворена этой школой, неважно, про что меня спросили. Но при этом есть еще факторы, которые так очень глобально влияют на удовлетворение, ведь из чего удовлетворенность родительская складывается. Из запроса. Да? Вот в центре слайда вы видите это. Что такое запрос? Мы хотим больше, мы хотим лучше, мы хотим разнообразнее. Но этот запрос, он тоже возникает не сам по себе. Есть личный опыт, на основании которого, у меня высшее образование, я училась в крутой школе, я много читала про крутые школы и мой запрос от этого будет расти. А еще и от предложения — чем больше мне школа предлагает, тем больше я хочу. Есть, кстати, исследования, которые подтверждают эту историю. На диаграмме вы видите исследование запроса родительского к учреждениям дополнительного образования детей в разных регионах, проведенного в разных регионах по инициативе общероссийского народного фронта в 15-м году И вы видите условно названные нами сильная система образования региона и слабая система образования региона. И практически по всем характеристикам, представленным на диаграмме, родители из сильной системы образования запрашивают больше, их запрос выше. Это очень важная история, которую в обязательном порядке нужно помнить при формулировании вопросов связанных с удовлетворенностью.
