Давайте, немножко подробнее рассмотрим основные элементы, фактически которыми пользуется любой исследователь, любой аналитик, особенно, если речь идет об аналитике в сфере образования. И здесь на слайде вы видите четыре термина. Каждый из этих терминов у нас на слуху: мониторинги, экспертиза, оценка, рейтинги. Каждый из них мы практически постоянно в последние годы слышим, когда речь идет об оценке качества образования, о развитии образования, о принятии каких-то управленческих решений. Вот я предлагаю вам сейчас провести небольшой такой учебный процесс, который позволит нам чуть подробнее, чуть глубже понять ключевые смыслы каждого из этих терминов, они же, в общем-то, все нам знакомы. И я предлагаю вам сейчас попробовать вычленить ключевую отличительную характеристику: чем, например, мониторинг отличается от любых других исследований, в чем специфика мониторинга? Почему мониторинг? Чем отличается экспертиза? В чем особенность оценки? Что такое рейтинг? И придумать для них, выделив вот эту вот ключевую характеристику для себя, придумать для них такие пары дихотомические, альтернативные варианты, если не мониторинг, то что? Если не экспертиза, то что? Если не оценка, то что? Вот сейчас поставьте, пожалуйста, на паузу нашу видеозапись и попробуйте для себя заполнить правый столбик этого списка. Ваши версии у вас есть. Теперь, давайте, попробуем посмотреть, обсудить, а что кроется за этими смыслами в классической литературе, в деятельности экспертов и, смотрите, какая интересная вещь происходит. Многие термины, которые мы используем при работе с доказательной аналитикой, — они пришли к нам из других наук, из естественных, в основном наук. И термин "мониторинг", который очень часто мы используем в работе в системе образования (это вообще очень модное стало слово в системе образования, в управлении образованием) — это как раз термин из естественных наук, и появился он в свое время в экологии, такой экологический мониторинг. Но если мы посмотрим на определение из экологического словаря (и здесь бледным цветом выделены специфические экологические термины, слова), если убрать эти слова, вы их видите, они более бледные на слайде, то все, что написано, оно в чистом виде подходит для наших с вами задач, для наших с вами исследовательских задач в социальной сфере. И ключевыми характеристиками мониторинга, как мы видим, становятся выделенные в тексте регулярность и длительность наблюдений, срезов, оценок. Мы можем посмотреть дальше термины в других, как этот термин трактуется в других источниках, в том числе, в таких более профессиональных словарях или в специфических словарях социальных наук. И мы всегда будем сталкиваться с вот этими фиксациями: это постоянное систематическое изучение для принятия решений и предотвращения проблем, предупреждения опасностей, это постоянное наблюдение для того, чтобы установить какие-то оценки. А что тогда могло бы стать альтернативой мониторингу? Итак, мониторинг в своей базовой сущности — это многократное систематическое исследование. Альтернативой его может быть разовое исследование, разовая диагностика и термин "Диагностика", он тоже не из социальных наук, он тоже пришел к нам из естественных наук, в частности, из медицины. В свое время он достаточно активно использовался в образовании, в педагогике был даже термин "Педагогическая диагностика", но последние годы он как-то ушел из употребления и мы перестали его использовать. Но, тем не менее, что такое диагностика? Это распознавание ситуации, описание ситуации через использование каких-то оценочных процедур и составление диагноза, то есть того, как выглядит сейчас система, что для нее характерно, где у нее болевые точки, где у нее все хорошо и к чему она может двигаться дальше. Разовая диагностика это альтернатива мониторингу, который должен проводиться длительно во времени либо много срезовых процедур. И отсюда мы с вами получаем два типа мониторингов, возможных в наших исследованиях: с одной стороны это может быть периодическое систематическое наблюдение, когда мы наблюдаем за ситуацией, смотрим, как что меняется, как меняется процесс, как меняются дети в этом процессе; с другой стороны мы можем осуществлять через определенные промежутки времени отдельные диагностические срезы, там раз в год, раз в полгода, раз в три года, разные периоды могут быть. Но это срезы, которые осуществляются по одной системе методов и инструментов, которые по одной системе критериев работают, которые используют одни и те же результаты. Разовая диагностика или систематический мониторинг — это один из важнейших вопросов, который нам нужно понять. Может ли для управления использоваться разовая диагностика, то есть один срез сделали и все, и дальше мы никуда не двигаемся? Пожалуйста, попробуйте ответить на этот вопрос сделав паузу: при каких условиях, по вашему мнению, для управленческих задач может потребоваться разовая диагностика? Действительно, в управлении может использоваться разовая диагностика, но это редкая ситуация, потому что управление ориентировано на изменение ситуации, на развитие ситуации, на поддержание движения, поддержание работы. Поэтому в управлении чаще используется мониторинг и мы будем говорить очень много именно об этой форме проведения исследований. Следующий термин — это "экспертиза". Это очень понятный термин, мы часто им пользуемся, но, к сожалению, я периодически работаю с аудиториями в режиме онлайн, сталкиваюсь с тем, что мне коллеги, в общем-то, профессионалы, не могут точно определить, в чем специфика экспертизы. Но ведь это тоже, в общем-то, термин, который из других сфер деятельности к нам пришел. Чаще всего экспертиза используется в юриспруденции, и смысл экспертизы заключается в том, что это исследование оценки, диагностика, которое проводится специалистом, экспертом по поручению каких-то заинтересованных лиц, то есть вы, как управленец, можете заказать экспертизу, пригласить для этого экспертов, владеющих специальными познаниями. Экспертизе у нас с вами будет посвящена отдельная неделя, поэтому не будем сегодня подробно ее обсуждать. Что может быть альтернативой экспертизе? Все что угодно. Социологические опросы, когда мы собираем общественное мнение, использование статистических данных и так далее. Следующий, третий термин из этого нашего набора — "оценка". И здесь, казалось бы, специалисты в сфере образования (а мы с вами говорим про образование, в основном) не должны испытывать никаких затруднений. Что такое оценка? Но я понимаю, что не скажу вам ничего нового, но мне хотелось бы систематизировать и напомнить вам, что оценка — это термин, который используется и как процесс, и как результат. Это процесс установления значимости, установления ценности какого-либо объекта, который может отражать мнение преподавателя, например, если речь идет про образование, про уроки в школе. Что такое школьная оценка? Это мнение учителя, мнение преподавателя о том, соответствуют ли знания ученика каким-либо требованиям. Оценка как результат — это некая фиксация в виде каких-то знаков, отметок, символов, которые описывают результаты оценки. И вы видите на слайде картинки, на которых можно увидеть разные виды, разные формы выражения результатов оценки, разные виды отметок: и пятерки, и смайлики, и лайки и все что угодно. И здесь ключевой вопрос для управления так же, как и с мониторингами, у нас возникает в том, можно ли в управлении обойтись без оценки? Вот есть у нас, например, данные о том, что доля педагогов пенсионного возраста в какой-то школе или в каком-то муниципалитете составляет 24 процента. Управленческий вопрос — это много или мало? Это хорошо или плохо? И что с этим делать? Без ответа на этот вопрос скорее всего очень трудно выстраивать дальнейшие действия, и образ со стаканом, — это известный афоризм о том, что для оптимиста стакан наполовину полон, а для пессимиста он наполовину пуст, — это демонстрация того, что без точного понимания, как оценить ситуацию, мы будем не понимать, что с этим делать дальше, мы не сможем принимать, выходить на управленческие решения. А что могло бы стать альтернативой оценки, оценочного исследования? Это просто фиксация. Да, мы можем вернуться к тому, к той ситуации, когда мы просто говорим: "Да, у нас педагогов пенсионного возраста 24 процента, и никак к этому не относимся, и никак это мы не оцениваем". Ну, для определенных ситуаций, для определенных случаев, мы с вами будем говорить об этом дальше, это тоже важная история. И последний термин из нашего набора — это понятие рейтинга. На самом деле рейтинг в этом списке, наверное, недостаточно уместен, поскольку рейтинг — и это очень важно — это всего лишь одна из форм представления результатов проводимого исследования. Причем исследование для того, чтобы его представить в форме рейтинга, должно иметь большое количество оценок, вот эти вот большое количество полученных нами оценок разных объектов и при сравнении, в процессе сравнения мы можем сформировать из них рейтинг. Итак, рейтинг — это только одна из форм. Есть множество других форм представления результатов исследований и этой проблематике у нас тоже будет посвящена отдельная неделя, когда мы будем говорить о других форматах. Но вот сейчас для того, чтобы подвести итог вот этого вот формирования элементов конструктора для эффективных исследований, давайте, заполним альтернативный столбец. И, смотрите, мониторинг, альтернатива — разовая диагностика, экспертиза — социологические опросы, анализ статистических данных и так далее, список не закрыт. Оценка, альтернатива — фиксация. Рейтинг, альтернатива — аналитические продукты, базы данных, инфографические продукты, о которых мы также будем с вами говорить отдельно. Но эти термины не рядоположены. И смотрите: если мониторинги и разовая диагностика — это тип исследований, типы измерителей; экспертиза, соцопрос и так далее — это методы исследований; оценка, фиксация — это аналитические приемы, которые мы будем использовать при обработке результатов; а рейтинг и альтернативные ему формы — это формы представления результатов. Вот из всего этого складывается наш конструктор для эффективных измерений.
