Материал: Процедуры отбора экспертов

Базовые критерии. Наличие у эксперта действующего свидетельства об аккредитации по виду деятельности (1 балл); отсутствие конфликта интересов у эксперта при проведении проверки конкретного образовательного учреждения (1 балл); владение экспертом информационно-коммуникационными технологиями (1 балл); наличие согласия эксперта на привлечение к проведению проверки (0,5 баллов)); образование (среднее профессиональное - 1 балл, высшее профессиональное - 2 балла, высшее педагогическое или юридическое - 3 балла).

Вариативные критерии. Наличие опыта экспертной деятельности (от 1 до 3 лет - 1 балл, от 3 до 10 лет - 2 балла, более 10 лет - 3 балла); успешное прохождение экспертом добровольной аттестации профессиональных компетенций; прохождение курсов повышения квалификации и (или) профессиональной переподготовки (2 балла); дополнительное образование (0,5 балла); ученая степень (кандидат наук - 1 балл, доктор наук - 2 балла); признание профессиональным сообществом (2 балла); наличие рекомендации по основному месту работы эксперта (2 балла)); наличие опыта работы в сфере образования (от 5 до 7 лет - 1 балл, от 7 до 10 лет - 2 балла, более 10 лет - 3 балла).

Таким образом, в субъектах РФ применяются различные критерии и методы отбора экспертов, учитывающие общий порядок привлечения экспертов, который установлен постановлением Правительства РФ от 20 августа 2009 г. № 689 «Об утверждении Правил аккредитации граждан и организаций, привлекаемых органами государственного контроля (надзора) и органами муниципального контроля к проведению мероприятий по контролю».

Однако следует отметить, что во всех субъектах оценка квалификации эксперта проводится в два этапа. На первом этапе оценки квалификации рассматриваются документы, представленные претендентом, и принимает решение по вопросу о допуске претендента (эксперта) ко второму этапу оценки квалификации. Претендент допускается ко второму этапу оценки квалификации, если комиссией установлено его соответствие предъявляемым требованиям. На втором этапе оценки квалификации проводится квалификационный экзамен в форме устного экзамена, собеседования или письменного тестирования.

Подводя итоги рассмотрения различных подходов к требованиям экспертов можно сделать следующие выводы:

• 1. «Рейтинг экспертов», который обеспечит сбор данных можно построить по следующим двум блокам критерии:
  • - параметры оценки компетенции деятельности экспертов (образование; стаж работы; ученая степень/звание; должность; количество публикаций; количество сертификатов; количество экспертных заключений);
  • - индивидуальные характеристики экспертов, отражающие их мотивации и потребности (уровень независимости (административной и экономической); адаптивность к внешней среде; характеристика эмоционального и интеллектуального потенциала эксперта).
• 2. Практически во всех рассмотренных в ходе работы документах субъектов РФ по вопросу отбора экспертов установлены лишь требования, однако процедура проверки соответствия им экспертов и отбора, как правило, отсутствует.

Следует отметить, что установить требования - это только полдела, поскольку также необходимо оценить соответствует эксперт предъявляемым требованиям или нет. Данная задача предполагает, что должны быть определены источники информации, характеризующие эксперта с той или иной стороны, а также разработан механизм оценки. Кроме этого, органам государственной власти, осуществляющим функции по контролю и надзору в сфере образования, следует вести мониторинг профессиональных компетенций привлекаемых экспертов для определения эффективности их работы.

3. Перечень основных критериев отбора экспертов для проведения экспертизы и диапазон их измерения представлен в таблице 1. Оценка критериев построена на основе работ [6,10,30,43].

Таблица 1. Перечень критериев отбора экспертов для проведения экспертизы и диапазон их измерения

Следует отметить, что все параметры - документальные и должны быть заверены копией документов.

Подводя итог первой главы можно сделать следующие выводы:

• 1. Достаточно обосновано, приемлемо и полезно как на практике, так и в теории определение эксперта, как носителя специальных знаний и/или практического опыта, который:
  • - имеет объективные и полные сведения об особенностях и свойствах внешнего объекта и/или рекомендации относительно предпочтительных вариантов управленческих решений, касающих данного объекта;
  • - независимо от внешних влияний и собственной выгоды высказывает суждения из области его специальных знаний и/или практического опыта по поставленным перед ним вопросам;
  • - несет ответственность за свое экспертное заключение, обладает правами и обязанностями, которые определены соответствующими нормативными документами.
• 2. Следует выделить следующие основные принципы эффективной деятельности экспертов:
• 1) Принцип добровольного участия эксперта.
• 2) Принцип вознаграждения.
• 3) Принцип персональной ответственности.
• 4) Принцип соответствия утвержденным стандартам.
• 3. С учетом специфики проводимых экспертиз в сфере образования целесообразно ввести следующие основные критерии отбора экспертов:
  • - соответствие профильного образования и должностное положение;
  • - ученая степень;
  • - стаж научной или практической работы в определенной сфере;
  • - количество публикаций по данному направлению;
  • - количество сформулированных экспертных заключений;
  • - компетентностный уровень экспертной оценки.
• 4. Целесообразно к основным критериям отбора экспертов установить еще и такие требования, которые напрямую не могут быть измерены, но косвенно оцениваются в основных критериях:
  • - наличие опыта в оцениваемой области знаний;
  • - высокий уровень общей эрудиции;
  • - способность творчески мыслить;
  • - принципиальность и объективность.

Процедуры и механизмы отбора экспертов в сфере образования

Существующие процедуры и механизмы отбора экспертов и экспертных организаций

Выбор экспертов представляет собой весьма непростую проблему. В определенном смысле экспертный способ решения того или иного вопроса опирается не на наиболее распространенные суждения, а на более компетентные. Есть носитель информации, а есть - компетентный специалист. Именно последний может обладать качеством экспертности - способности выполнять функции эксперта. При этом, чтобы претендовать на статус эксперта, специалисту, кроме собственно профессиональной компетентности, необходимы также и другие качества: авторитетность, практический опыт по обсуждаемым вопросам, способность и готовность давать содержательную экспертную информацию и т.д. [18]

Вообще оценка качества эксперта - очень тонкий и сложный вопрос, не имеющий однозначного ответа. Если ответ на вопрос, как подобрать эксперта для проведения той или иной экспертизы, кроется в списке экспертных задач и квалификационных требований к эксперту, то вопрос о качестве выполнения экспертом работ остается на данный момент без ответа. В ситуации квалификационной экспертизы, осуществляемой на основе стандартизированных норм, критерием может являться количественное отношение правильных суждений и ошибок [29].

Поскольку результат экспертизы напрямую зависит от уровня компетентности специалистов, задействованных в ней, необходимо правильно организовать отбор. Таким образом, для проведения экспертизы должны быть отобраны высокопрофессиональные специалисты, хорошо знакомые с соответствующей предметной областью, обладающие достаточным опытом, способные выносить обоснованные объективные суждения и адекватно оценивать значимость множества критериев и показателей используемых оценочных систем [31].

Многие задачи, связанные с поиском экспертов, предполагают нахождение ответов на следующие вопросы [32]:

• - кто обладает требуемыми компетенциями для решения данной задачи?
• - кто обладает смежными и дополнительными компетенциями по отношению к решению задачи?
• - какими компетенциями обладает данный эксперт?
• - какой у эксперта эмоциональный и креативный потенциал? и т.д.

Таким образом, поиск экспертов можно рассматривать как комплексную задачу, состоящую из нескольких этапов [45]:

• 1. формирование запроса (определяется, какие компетенции нужны для решения задачи и стратегия поиска);
• 2. выявление экспертов, в процессе которого происходит выделение экспертов, ранжирование экспертов;
• 3. подбор экспертов, в процессе которого определяются те эксперты, которые наилучшим образом отвечают потребностям. Т.е. из списка потенциальных экспертов выбираются с высоким рейтингом, учитывается доступность эксперта, решаемые им текущие задачи.

Например, в работах [22,40] выделены следующие подходы к привлечению экспертов к участию в экспертизе:

• 1. Метод назначения: минимальные затраты на подбор экспертов, однако нарушается принцип добровольного участия.
• 2. Социометрический метод: обеспечение потенциальной возможности участия в экспертизе всех по социометрическому критерию отбора, связанному с проблематикой экспертизы.
• 3. Метод анализа «следов деятельности»: публикации, цитирование, участие в экспертизе.
• 4. Подбор экспертов для проекта в единой базе данных. Принципы наполнения базы данных: анализ профессионального опыта в рамках биографии; социальный статус; уровень развития компетенций; опыт участия в экспертизе.

Следует отметить, что процедуры отбора экспертов должны основываться на комбинации различных методов.

В зарубежных документах [48,56,57] отмечено, что при проведении процедур отбора экспертов необходимо учитывать следующие условия:

Members must be independent and in a position to make unbiased judgments. Any possible conflict of interest must be disclosed.

The selection criteria for experts must be established and published.

The selection should be made by the relevant authority and not by the group of experts themselves.

Members must be committed to treat all material and findings as strictly confidential.

Таким образом, при отборе экспертов следует обратить внимание на следующее:

• 1. Критерии отбора экспертов должны быть понятны и доступны;
• 2. Отбор экспертов должен проводиться не самой группой экспертов, а компетентными людьми, имеющих независимость;
• 3. Отбор экспертов должен проходит конфиденциально.

Вся процедура отбора экспертов для привлечения к процедурам контроля (надзора) в рамках исполнения переданных полномочий Российской Федерации в области образования состоит из двух этапов [35].

На первом этапе происходит получение и обработка информации об эксперте, позволяющей определить его соответствии критериям отбора: прохождение аттестации экспертом, включение сведений об эксперте в реестр свидетельств.

На втором этапе происходит непосредственный отбор экспертов: принимается решение о необходимости привлечения экспертов к проведению конкретной проверки данного определенного образовательного учреждения; проводится отбор экспертов, соответствующих установленным критериям отбора, с использованием реестра свидетельств об аккредитации путем случайной выборки; уточняется согласие экспертов на привлечение к проверке, наличие/отсутствие обстоятельств, препятствующих привлечению к проверке; заключается с экспертом гражданско-правовой договор; готовится проект приказа о проведении проверки.