Масштабное исследование в рамках магистерской диссертации выполненное в 2010-2011 годах под научным руководством д.т.н., профессора Деревниной А.Ю. Данная работа была защищена на отлично, а также признана лучшей работой на кафедре.
Шрифт для регистрационных номерных знаков (автомобильных номеров)
Модель системы оценки эффективности реализации программ развития национальных исследовательских университетов
1. www.ibs.ru
МОДЕЛЬ СИСТЕМЫ ОЦЕНКИ
ЭФФЕКТИВНОСТИ РЕАЛИЗАЦИИ
ПРОГРАММ РАЗВИТИЯ НАЦИОНАЛЬНЫХ
ИССЛЕДОВАТЕЛЬСКИХ УНИВЕРСИТЕТОВ
Симкин Анатолий Владимирович
Магистрант кафедры управленческого
консалтинга ФИБС МФТИ
17.06.2011
Научный руководитель:
д.т.н., профессор
Деревнина Анна Юрьевна
Консультанты:
директор ОКиПУ, ДРО ИБС зам. директора ДРО ИБС
Есин Сергей Владиславович Слышкин Василий Витальевич
2. Актуальность темы работы
7-8 млрд. рублей в год
НИУ НИУНИУ
…
+14 НИУ в 2009
+15 НИУ в 2010
Эффективны ли существующие
механизмы оценки реализации программ
развития НИУ?
• Указ Президента России от 7 октября 2008 г.
• Постановление Правительства России от 13 июля 2009 г. N 550
• Существующие механизмы учитывают только достижения отдельных
вузов
• Необходим анализ и поддержка принятия решений при оценке
деятельности вузов 2
3. Постановка задачи
Совершенствование оценки эффективности реализации
программ развития Национальных исследовательских
университетов
Цель
1. Анализ данных структуры показателей оценки
эффективности реализации программы развития НИУ
2. Построение модели оценки деятельности НИУ
3. Верификация разработанной модели
4. Проектирование модели архитектуры средств мониторинга
деятельности НИУ
5. Разработка рекомендаций по регламенту сбора отчетности
по показателям программы развития НИУ
3
4. 4
Положения, выносимые на защиту
Информационно-аналитическая система мониторинга
деятельности вуза, позволяющая обеспечить анализ
данных и поддержку принятия решений
Математическая модель оценки эффективности
деятельности НИУ, позволяющая визуализировать
достигнутые показатели
Методические рекомендации по мониторингу
деятельности вуза включающие модель структуры
показателей, регламент сбора отчетности, паспорта
индикаторов и показателей
3
2
1
5. Постановка задачи
● 29 вузов (2 группы)
● Пространство показателей
● Из них: 21 показатель НИУ
5
3
2
Вход:
1
Необходимо визуализировать данные по выполненным
и установленным показателям и достигнутым результатам в сети
ведущих вузов
Сужение размерности:
1. Двухмерная модель визуализации показателей
деятельности вузов
2. Балльно-рейтинговая модель оценки
эффективности НИУ
● Для плана и факта показателей имеем:
Задача:
Выход:
6. Математическая модель
1. Вычисляется отклонение от среднего значения по группе
6
, где
2. Нормировкав 10 бальную шкалу [-5;5]
3. Итоговый рейтинг по пространству показателей для плана и факта
как нормированная функция отклонения от среднего по группе
3
2
1
SPkl
1,2 = Spikl
1,2 =
σpikl
1,2
max
i=m,n
σpikl
1,2 ∙5, σPkl
1,2 <0
-
min
i=m,n
σpikl
1,2
σpikl
1,2 ∙5, σPkl
1,2 ≥0
11. Архитектура информационно-аналитической
системы (ИАС)
11
Прототип #1 Прототип #2
Функциональные
требования
Регламенты, нормативные документы,
приказы
Модель показателей
Уровень
реализации
Уровень
функционала
Уровень
правил
Уровень
реализации
модели
в
и
ь
анные
ы
Логическая модель
3
2
1
Результат:
● Модель структуры показателей
программы реализации НИУ
● Паспорта показателей
● Регламент сбора отчетности
● Модель процесса сбора
отчетности в нотации CFFC
● Описание функциональных
требований (ARIS F-tree)
● Информационная модель потоков
данных
● Типовая иерархическая структура
работ разработки ИАС для вуза
● Прототип системы мониторинга
основных процессов
деятельности вузаMicrosoft СПО
14. Методические рекомендации по мониторингу
деятельности вуза
14
• Индекс / Номер показателя
• Индикатор / Показатель реализации
• Описание / формуларасчета /ед. изм.
• Форма сбора
• Отчитывающийся субъект(Подразделение)
• Ответственное лицо
• Источник данных
• Параметрысбора (периодичность,регламент)
• Аналитические разрезы
1. Модель структуры
показателей
программы
реализации НИУ
2. Шаблон Регламента сбора
отчетности о показателях
реализации программы
СОДЕРЖАНИЕ:
1. Организация мониторинга реализации программы
2. Состав форм сбораотчетности
3. Зоны ответственности
4. Ответственные за предоставление информации
5. Процедурапроведенияотчетной кампании
Приложение 1. Шаблоны форм сбораотчетности
3
2
1
3. Шаблон Паспорта показателя
15. Карта показателей деятельности вуза
15
Ректор
Правовое
управление
Управление
информационной
политики и
общественных связей
Отдел имиджевой
политики и
общественных связей
Информационный
центр
Первый проректор
(проректор по
учебной работе)
Проректор по
безопасности и
кадрам
Проректор по учебно-
методической работе
Институты,
колледжи,
филиалы
Издательство
Библиотека
Инновационный
центр
профессиональной
ориентации
Региональный центр
содействия
трудоустройству
выпускников
Центр менеджмента
качества
Отдел
стратегического
планирования и
обеспечения СК
Экспертно-
аналитический
отдел
Институты,
колледжи
Учебно-
методическое
управление
Институт
повышения квалиф.
и переподготовки
кадров
Управление
заочного обучения
Проректор по
инновационному
развитию
Проректор по
научной работе
Научно-
исследовательское
управление
Отдел научных
исследований
Научно-
организационный
отдел
Отдел аспирантуры
и докторантуры
Проректор по
экономическим и
финансовым
вопросам
Первый отдел
Второй отдел
Управление кадров
Управление
безопасности
Служба внутренней
безопасности
КИО по
использованию
материального
потенциала
Отдел по
комплексной
защите
информации
Управление
безопасности
жизнедеятельности
Отдел ГО и ЧС
Служба охраны
труда и
экологической
безопасности
Дежурно-
диспетчерская
служба
Региональный
базовый центр
безопасности ТиЖ
Отдел экспертизы
инновационных
проектов
Отдел привлечения
заказов НИОКР
Управление
экономики
Плановый отдел
Отдел труда и
заработной платы
Финансовое
управление
Финансовый отдел
Казначейство
Отдел
бюджетрирования
Управление
бухгалтерского
учета
Отдел учета
основных средств и
ТМЦ
Отдел учета
расчетов с
контрагентами
Отдел
бухгалтерской и
налоговой
отчетности
Проректор по
инфраструктурном
у развитию
Хозяйственная
служба
Транспортная
служба
Студгородок
Емцовский учебно-
опытный лесхоз
Учебно-научная
база «Двинские
зори»
Отдел материально-
технического
обеспечения
Проректор по
социальным вопросам
и воспитательной
работе
Детский сад
Студгородок
(вопросы
заселения)
Музей университета
Управление
социальной и
воспитательной
работы
Университетский
творческий центр
Центр поддержки
студенческих
инициатив
Социально-
психологический
центр
Штаб студенческих
отрядов
Проректор по
международному
сотрудничеству
Управление
международного
сотрудничества
Отдел
фандрайзинга
Отдел
академической
мобильности
Офис Университета
Арктики
Отдел визовой
поддержки и
регистрации
Проректор по
строительству
Международный
образовательный
центр
Отдел подготовки
проектов
Технический отдела
Проектно-сметный
отдел
Ремонтно-
строительный отдел
Учебно-
производственные
мастерские
Помощник ректора,
руководитель
секретариата
Управление
делопроизводства и
контроля
Архив
Организационное
управление
Отдел протокола
Отдел
организационной
работы
Отдел маркетинга и
рекламы
Помощник ректора
Физкультурно-
спортивный центр
«Арктика»
Чуркина Ю.В.
Дундин Николай
Иванович
В.И.Синицкий
Боголицын
Константин
Григорьевич
А.В. Гурьев
К.С. Болотова
М.Б.Карпова
Варфоломеев
Юрий
Александрович
Топчий
Александр
Анатольевич
Шестаков
Леонид
Николаевич
И.В.Лукашонок
Т.С.Новикова
Коняев Сергей
Витальевич
Управление
информационных
технологий
Информационно-
вычислительный
центр ПГУ
М.Ю.Веретнов
А.И.Гильдебрант
Центр коллективного
пользования научным
оборудованием
33
14.1
34
15.1
35
16.1
107
55.2
108
56.1
109
56.2
57
32.1
105
54.2
106
55.1
17
4.9
26
9.4
27
10.1
104
54.1
42
20.2
50
26.
18
4.10
7
3.3
15
3.7
77
39.1
43
21.1
51
27.
19
6.1
8
3.4
16
4.5
29
11.2
30
12.1
31
13.1
32
13.2
53
29.1
54
29.2
55
30.1
56
31.1
80
40.2
81
41.1
102
52.
103
53.
100
51.1
101
51.2
63
33.1
65
33.3
78
39.2
44
21.2
36
16.3
20
6.2
9
4.1
1
1.1
58
32.2
45
22.
37
17.1
21
7.1
10
4.2
2
1.2
59
32.3
46
23.1
38
17.2
11
3.5
3
2.1
60
32.5
47
23.2
39
18.
23
9.1
12
4.3
4
2.2
86
43.1
92
46.2
64
33.2
66
33.4
87
44.1
93
47.1
70
35.2
75
37.
88
44.2
82
41.2
71
35.3
76
38.
89
45.1
83
41.3
72
35.4
67
34.1
61
32.6
48
24.
40
19.
24
9.2
13
3.6
5
3.1
62
32.7
49
25.
41
20.1
25
9.3
14
4.4
6
3.2
84
41.4
73
36.а
68
34.2
91
46.1
85
42.
74
36.б
90
45.2
69
35.1
28
11.1
52
28.
79
40.194
48.1
95
48.2
98
49.
99
50.1
Отдел
международных
образовательных
программ
Н.Т.Подражанская
22
8.
43
21.1
44
21.2
41
20.1
Л.В. Гусаков
40
19.
85
42.
43
21.1
44
21.2
41
20.1
56
31.1
108
56.1
61
32.6
62
32.7
90
45.2
99
50.1
31
13.1
32
13.2
55
30.1
М.Р.Калинина
А.Ю. Кожевников
Л.А.Нейман
Т.В.Касимова
21
7.1
27
10.1
28
11.1
4
2.2
7
3.3
18
4.10
8
3.4
16
4.5
10
4.2
23
9.1
25
9.3
12
4.3
2
1.2
3
2.1
6
3.2
9
4.1
58
32.2
11
3.5
83
41.3
13
3.6
К.В.Бобнева
Ректор
ей
вой
вязей
ный
Первый проректор
(проректор по
учебной работе)
Проректор по учебно-
методической работе
Институты,
колледжи,
филиалы
Издательство
Библиотека
Институты,
колледжи
Институт
повышения квалиф.
и переподготовки
кадров
Управление
Проректор по
инновационному
развитию
Проректор по
научной работе
Научно-
исследовательское
управление
Отдел научных
исследований
Научно-
организационный
отдел
Отдел экспертизы
инновационных
проектов
Отдел привлечения
заказов НИОКР
Пр
инфр
у
Х
Т
Проректор по
социальным вопросам
и воспитательной
работе
Управление
социальной и
воспитательной
работы
Университетский
творческий центр
Центр поддержки
студенческих
инициатив
по
ному
ству
ение
родного
ичества
дел
айзинга
Проректор по
строительству
родный
тельный
тр
Отдел подготовки
проектов
Технический отдела
Проектно-сметный
отдел
Помощник ректора
Физкультурно-
спортивный центр
«Арктика»
Дундин Николай
Иванович
В.И.Синицкий
Боголицын
Константин
Григорьевич
А.В. Гурьев
К.С. Болотова
М.Б.Карпова
Варфоломеев
Юрий
Александрович
Шестаков
Леонид
Николаевич
Коняев Сергей
Витальевич
35
16.1
107
55.2
105
54.2
104
54.1
50
26.
51
27.
56
31.1
100
51.1
101
51.2
86
43.1
88
44.2
67
34.1
48
24.
49
25.
73
36.а
68
34.2
74
36.б
90
45.2
52
28.
95
48
98
49.
99
50.1
41
20.1
Л.В. Гусаков
85
42.
43
21.1
44
21.2
41
20.1
90
45
99
50.1
55
30.1
.Р.Калинина
.В.Касимова
3
2
1
16. 16
Результаты магистерской диссертации
1. Математическая модель оценки эффективности
деятельности национальных исследовательских
университетов
3. Архитектура информационно-аналитической
системы для мониторинга деятельности вуза
и поддержки принятия решений
2. Методические рекомендации по мониторингу
деятельности вуза3
2
1
17. Апробация работы
Симкин А.В. Информационно-аналитическая система мониторинга основных показателей
деятельности вузов // Труды53-й Научной конференцииМФТИ«Современные проблемы
фундаментальных и прикладных наук»:Часть 00. Информационные бизнес-системы.–
М.: МФТИ,2010.– С. 11-13
17
Симкин А.В., Слышкин В.В. Математическая модель системыоценки эффективности
реализациипрограмм развития НИУ // Материалы3-ей всероссийскойнаучно-
практическойконференции«Информационные бизнес системы»- М.: Академия IBS, 2011
г. - 3 с. (депонирована)
Симкин А.В., Слышкин В.В. Анализ чувствительности вариаций модели оценки
эффективности // Материалы3-ей всероссийской научно-практической конференции
«Информационные бизнес системы» - М.: Академия IBS, 2011 г. - 3 с. (депонирована)
1. Отзыв по математической модели рейтинга и анкете эксперта (НФПК)
2. Отзыв по предложенным показателям (ИБС)
3. Справка по разработанным прототипам по результатам магистерской
работы (ИБС)
4. Акт о разработке информационной системы (ИБС)
5. Акт о внедрении результатов магистерской работы (ИБС)
Результаты работы подтверждаются отзывами и актами:
Публикации:
18. Научная новизна,
практическая и теоретическая значимость
Разработка модели системы оценки эффективности реализации
программ развития национальных исследовательских университетов
Научная новизна
Развитие современных методов поддержки принятия решений и
управления по ключевым показателям деятельности
организационной системы
Теоретическая значимость
● Рекомендации по оптимизации модели показателей оценки
эффективности реализации программ развития вузов
● Прототип системы мониторингаосновных процессов деятельности
● Методика сбора данных и организации мониторингаструктурных
подразделений в ходе сбора отчетности по программе развития НИУ
Практическая значимость
18
19. Задачи исследования предметной области
19
Управление
организационной
системой
ИАС для
поддержки
принятия решений
и представления
отчетности
ВУЗ как социально-
экономическая
система
1. Анализ методов
мониторинга и оценки
эффективности программ
3.1.Сравнительный анализ
существующих систем
мониторинга
(конкурентов)
3.2.Сравнение
технологических
характеристик
Исследование предметной области управления по показателям
в вузе посредством информационных систем
2. Анализ методов
построения
структуры
показателей
• Нормативный метод
• Программно-целевой метод
• БОР
• Benchmarking
• Program evaluation
• Таксономия
• Дихотомия
• BSC
• KPI
• IBS
• ПАРУС
• Doxcell
• БАРС
• KAI BI
20. www.ibs.ru
Спасибо за внимание!
Симкин Анатолий
Департамент по работе со сферой
образования
тел. раб. +7 (495) 9678080
e-mail: ASimkin@ibs.ru
17.06.2011