Оценивание результатов деятельности организаций в государственном секторе науки

Содержание
Тенденции развития российской науки
Ресурсы VS результаты
Потребность в системе оценивания
Новые вызовы
Недостатки и ограничения существующих инструментов
Международная практика
Распространенность и применение методов оценивания
Внедрение единой системы оценивания в России
Основные принципы
Методология
Пилотное обследование

Результативность науки и технологий: динамика государственного финансирования
Ассигнования на гражданскую науку из средств федерального бюджета
(в постоянных ценах 1991 г.)

Результативность науки и технологий: утрата конкурентных позиций

Потребность в системе оценивания
Рост затрат государства на НИОКР – больший акцент на результативность
Поиск более эффективных механизмов финансирования: бюджетирование по результатам
Оценивание результатов деятельности государственных научных организаций
Инструмент обратной связи между результатами и ресурсами
Фактор гибкого перераспределения ресурсов между государственными научными организациями

Цели и ограничения системы оценивания в госсекторе науки
Цель – повышение эффективности государственного финансирования научных исследований и разработок
Ограниченность сферы оценивания
ФЦП
Научные фонды
Опыт РАН, аккредитация образовательных программ вузов
Конкурс инновационных образовательных программ
Несбалансированность существующих методов и процедур оценивания
Преобладание субъективного экспертного оценивания при недостатке объективных количественных методов
Проблема доступа к первичным данным
Закрытость внутренней системы отчетности ведомственных научных организаций
Финансовая отчетность государственных научных организаций не содержит индикаторов результативности

Практика оценивания научных организаций в развитых странах
США: Национальные лаборатории, Национальный институт здоровья, Научно-исследовательские центры в сфере обороны, здравоохранения, энергетики…
Германия: Научные сообщества Макса Планка, Лейбница, Гельмгольца, Фраунгофера…
Франция: CNRS, Национальные институты научных исследований -сельского хозяйства (INRA), -здравоохранения (INSERM), -рака (INCA), IFRIMER…
Великобритания: Советы по финансированию высшего образования, б. Департамент науки и технологий…
Япония Институт академических степеней и оценивания университетов
Финляндия SITRA, TEKES, Академия Финляндии
Нидерланды Комиссии по оценке научных исследований при Министерстве образования, культуры и науки
Италия: CNR
Норвегия, Дания, Корея, Испания, Швеция, Австрия,…

Практика оценивания научных организаций в развитых странах:
Последствия
Примеры решений
по отношению к неэффективным научным организациям

Внедрение единой системы оценивания:
Основные требования
Сферы применения
Формирование планов НИР и определение объемов финансирования
Оптимизация сети научных организаций госсектора
Инструмент бенчмаркинга для негосударственных научных организаций
Порядок проведения оценивания
Разработка методики (типовой и ведомственных)
Организация регулярных статистических обследований и экспертиз
Формирование оценочных комиссий
Получение содержательных отчетов о результативности деятельности каждой научной организации,
включая рекомендации по дальнейшей организации работы и финансированию
Формирование единой базы данных по результатам оценивания научных организаций

Внедрение единой системы оценивания:
Формирование оценочных комиссий
Принципы работы комиссии
Независимость
Открытость критериев и методик оценивания
Вовлечение заинтересованных сторон
Минимальная дополнительная нагрузка на оцениваемые организации
Состав комиссии
Представительство заинтересованных сторон (органы исполнительной власти, бизнес, научное сообщество, некоммерческие организации)
Формирование групп экспертов на основе принципов
компетентности
авторитета
независимости (отсутствия личной заинтересованности в результатах оценивания)

Внедрение единой системы оценивания:
Форма результатов оценивания
Заключение комиссии
Характеристика результативности организации по основным критериям
Рекомендации по дальнейшему развитию научной организации
Категории научных организаций по результатам оценивания
Организации, утратившие научный профиль и перспективы развития
? преобразование или ликвидация
Организации, нуждающиеся в реорганизации
? реорганизация с целью улучшения деятельности
Организации, демонстрирующие стабильность и удовлетворительную результативность
? поддержка развития
Организации-лидеры
? поддержка развития (возможно: присвоение особого статуса)

Пилотное обследование результатов деятельности государственных научных организаций
Выборка – 119 государственных научных организаций (ГНЦ, государственные отраслевые академии и т.д.)
Пилотный проект по экспертному оцениванию (ФТИ им. А.Ф. Иоффе)
Структура показателей:

Методология
Ранжирование:
по группам индикаторов
общее
Национальные: среднее, максимум
Международные

Основные критерии оценивания
Критерии И н д и к а т о р ы
Качество и результаты НИР
Связи с реальным сектором экономики
Базовые ресурсы
Финансовая устойчивость
Структурный потенциал

Дифференциация организаций по уровню конкурсного финансирования НИР

Дифференциация организаций по уровню научной специализации

Дифференциация организаций по уровню публикационной активности

Пример ранжирования по группам индикаторов
Результативность НИР

Пример сводного ранжирования

Макроуровень: выделение типичных кластеров государственных научных организаций
Кластер 2 («Фундаментальный профиль»)
Высокое качество и результативность НИР
Высокий организационный потенциал
Низкая финансовая устойчивость
Низкая продуктивность
Кластер 3 («Ведомственный профиль»)
Низкое качество и результативность НИР
Высокая ресурсообеспеченность
Низкий организационный потенциал
Низкая финансовая устойчивость
Высокая продуктивность
Кластер 1 («Национальные лидеры»)
Высокое качество и результативность НИР
Высокая ресурсообеспеченность
Высокий организационный потенциал
Высокая финансовая устойчивость
Высокая продуктивность
Кластер 4 («Аутсайдеры»)
Низкое качество и результативность НИР
Низкая ресурсообеспеченность
Низкий организационный потенциал
Низкая финансовая устойчивость
Низкая продуктивность

Применение результатов: индивидуальные отчеты