Информационно-образовательный портал СОДРУЖЕСТВА НЕЗАВИСИМЫХ ГОСУДАРСТВ
ИНФОРМАТИЗАЦИЯ ОБРАЗОВАНИЯ
И ДИСТАНЦИОННОЕ ОБУЧЕНИЕ В СНГ
Информационно-образовательный портал СОДРУЖЕСТВА НЕЗАВИСИМЫХ ГОСУДАРСТВ  

Страны
Азербайджанская Республика
Республика Армения
Республика Беларусь
Республика Казахстан
Кыргызская Республика
Республика Молдова
Российская Федерация
Республика Таджикистан
Туркменистан
Республика Узбекистан
Украина

Типы материала
Информационно-коммуникационные технологии
Дополнительные информационные материалы
Нормативно-правовое обеспечение
Организация и методики обучения
Экономика образования
Межгосударственное сотрудничество
Образовательные центры
Методики обучения
Межвузовское сотрудничество
Повышение квалификации
Международные проекты и гранты, конкурсы
Конференции, симпозиумы, семинары и др.
Библиотека
 
Журнал «Вестник РУДН» серия «Информатизация образования»
 
2014, №4
2014, №3
2014, №2
2014, №1
2013, №4
2013, №3
2013, №2
2013, №1
2012, №4
2012, №3
2012, №2
2012, №1
2011, №4
2011, №3
2011, №2
2011, №1
2010, №4
2010, №3
2010, №2
2010, №1
2009, №4
2009, №3
2009, №2
2009, №1
2008, №4
2008, №3
2008, №2
2008, №1
2007, №4
2007, №3
2007, №2-3
2007, №1
2006, №1(3)
2005, №1(2)
2004, №1
Научные и специальные электронные ресурсы
Учебная, научная и специальная литература
Комиссия по дистанционному обучению совета по сотрудничеству в области образования государств-участников СНГ
Новости

Информационная система индексно-рейтинговой оценки деятельности студентов вуза и результаты её внедрения


Аннотация
В статье описывается информационная система индексно-рейтинговой оценки и материального стимулирования студентов вуза, приведён перечень показателей оценки студенческой деятельности, описаны некоторые особенности расчёта и представлен анализ данных, полученных по итогам внедрения системы в Ухтинском государственном техническом университете.

Текст документа

Информационная система индексно-рейтинговой оценки деятельности студентов вуза и результаты её внедрения

 

К.В. Рочев

 

Лаборатория информационных систем в экономике
Ухтинский государственный технический универ??итет

Ул. Первомайская, 13, Ухта, Республика Коми, Россия, 169300  

 

Ключевые слова: рейтинг, индексная система, индексно-рейтинговая система, ИРС, учёт активности студентов, оценка результатов деятельности.

 

 

В последние годы в сфере образования наблюдается тенденция к либерализации. Она выражается, например, в изменении подхода к выставлению оценок – в переходе к балльно-рейтинговой системе (БРС) [1], при которой студент может набирать баллы за активность в течение семестра, при этом оценка становится значительно гибче – на смену традиционной пяти-балльной системе приходит сто-балльная шкала. При распределении стипендий всё больше учитываются заслуги студентов во всех областях их деятельности [2]. Однако на данный момент в большинстве вузов стипендии и поощрительные выплаты студентам назначаются «дискретно». И если с традиционными стипендиями всё понятно: успел сдать все экзамены к концу сессии без троек – стипендия есть, не успел – нет (эта дискретность мотивирует к своевременности сдачи экзаменов), то с распределением стипендий за внеучебные достижения всё несколько субъективнее, так как выбор стипендиатов обычно ложится на плечи деканатов.

В Ухтинском государственном техническом университете разработана и внедрена в экспериментальную эксплуатацию Система индексно-рейтинговой оценки и материального стимулирования студентов вуза – Индексно-рейтинговая система (ИРС) [3]. ИРС – это информационная система, которая, с одной стороны, позволяет облегчить выбор кандидатов на повышенные стипендии, с другой стороны даёт инструмент для гибкого («аналогового») распределения части стипендиального фонда пропорционально достижениям студентов за семестр, а также обеспечивающая накопление портфолио студентов для представления на корпоративные стипендии, стажировки и трудоустройство.

На рис. 1 представлен просмотр Индекс-листа – основной отчётной формы, демонстрирующей список студентов, ранжированный по результатам деятельности: индексы по разделам – совокупный результат по каждому направлению деятельности. Показатели системы оценки деятельности студентов (учёба, наука, культура, спорт и другие разделы системы) представлены в табл. 1. Индекс лидерства демонстрирует результат по самому успешному направлению, Индекс гармонии – степень сбалансированности деятельности студента, Итоговый индекс – интегральный показатель результатов деятельности [4].

 

 

Рис. 1. Интерфейс системы

 

 

Таблица 1

Перечень показателей системы оценки деятельности студентов

Показатели

Веса

1.     УЧЕБНАЯ ДЕЯТЕЛЬНОСТЬ

0,200

Посещаемость

1

Результат БРС

5

Результат экзаменов и курсовых (для тех, у кого нет БРС)

5

2.     ДОПОЛНИТЕЛЬНАЯ УЧЕБНАЯ ДЕЯТЕЛЬНОСТЬ

0,170

Участие в олимпиаде

1

Работа (проект, экспонат), представленная на конкурс (выставку)

2

Прохожде??ие дополнительного обучения

3

Призовое место на олимпиаде

3

Работа (проект, экспонат), отмеченная на конкурсе (выставке) медалью/дипломом

3*2

Учебная работа (проект), внедрённая на производстве

5*2

3.     НАУЧНО-ИССЛЕДОВАТЕЛЬСКАЯ И ИННОВАЦИОННАЯ ДЕЯТЕЛЬНОСТЬ

0,250

Участие в НИРС (исследовательских кружках, группах)

1

Доклад на научном семинаре/научной конференции

2

Материалы, поданные в Федеральный институт промышленной собственности

3

Заявки на объекты промышленной собственности

3

Тезисы доклада, опубликованные по материалам научной конференции (семинара, симпозиума, …)

4

Статья научного характера

6

Призовое место в конференции

7

Индекс цитирования

7

Научные публикации, изданные за рубежом

7*2

Премия/стипендия/грант, полученные от фондов/организаций за успехи в науке

7*2

Материалы, зарегистрированные в Федеральном институте пром. собственности

8*2

Монография научного характера

10*2

Патент

10*2

4.     КУЛЬТУРНО-ТВОРЧЕСКАЯ ДЕЯТЕЛЬНОСТЬ

0,125

Посещение созвездия "умных" клубов

1

Участие в культурно-массовом мероприятии, в творческих мастерских

2

Публикация художественной литературы (стихи, проза)

3

Призовое место, занятое в культурно-массовом мероприятии

3

Выставка собственных достижений (художественных, литературных и т.д.)

3*2

5.     СПОРТИВНАЯ ДЕЯТЕЛЬНОСТЬ

0,125

Посещение спортивных секций

1

Участие в спортивно-массовом мероприятии

1

Высокий результат, показанный в спортивном соревновании

2*2

Рекорд, показанный в спортивном соревновании

4*2

Присуждение спортивной квалификации

5*2

6.     ОБЩЕСТВЕННАЯ ДЕЯТЕЛЬНОСТЬ

0,125

Участие в работе комиссий и т. п.

1

Участие в УВК (со стороны администрации вуза)

2

Участие в организации массового мероприятия

2

Статья (интервью, выступление и другие публикации) в СМИ

4

Участие в профориентационном мероприятии

5

Оценка работы профорга группы председателем профсоюза

5

Оценка работы заместителя старосты по ИРС заведующим кафедрой

5

Оценка работы старосты группы заместителем декана по УВР

8

Создание студенческого кружка, клуба, группы

8*2

Статья (интервью, выступление и другие публикации) в зарубежных СМИ

10*2

7.     ТРУДОВАЯ И ПРОЧАЯ ДЕЯТЕЛЬНОСТЬ

0,005

Работа

1

 

ИРС сейчас содержит 7 разделов (Табл. 1), каждый из которых имеет свой вес, сумма весов всех разделов равна 1 (раздел 7 – «Трудовая и прочая деятельность» введён в Систему для возможности составления более полного портфолио студентов и находится на обсуждении). Все показатели внутри разделов имеют свои относительные веса, для некоторых показателей около веса стоит «*2» – это означает, что показатель учитывается в двух семестрах при расчёте индексов и вдвое весомее при построении рейтинга за весь период обучения. Кроме того, у многих показателей есть градации, например, количество страниц и уровень публикации статьи. Каждый семестр по всем студентам собираются и вносятся данные. Внесённые данные подтверждаются отсканированными документами и проверяются ответственными отделами вуза, заведующими кафедр, наблюдательным советом и специальным ответственным лицом – Супервайзером. В феврале и июле по результатам расчётов в ИРС за семестр студентам устанавливаются дополнительные поощрительные выплаты.

Краткое описание алгоритма. Каждому студенту по каждому показателю ставится в соответствие его, так называемый, частный индекс, представляющий собой количественное значение (объем) показателя (с учетом градаций и их весов, например для статей учитывается уровень публикации и количество страниц), нормированное его максимальным среди всех студентов значением. Частный индекс по каждому разделу вычисляется как линейная свертка его частных индексов по всем показателям данного раздела, нормированная максимумом среди всех студентов. И, наконец, итоговый индекс студента есть линейная свертка его частных индексов по всем разделам, нормированная максимальным итоговым индексом среди всех студентов. Получаемые таким образом числа (все они меньше или равны 1) умножаются на 1000, так что лидер по какому-то показателю, разделу или по всей системе всегда получает частный индекс, равный 1000 по соответствующему показателю (разделу) или итоговый индекс, равный 1000, по всей системе. Таким образом, все результаты по показателям и разделам в ИРС подлежат нормированию.

Плюсы и минусы нормирования максимумом. Положительные стороны нормирования:

1)        возможность распределения фиксированного поощрительного фонда;

2)        облегчение задачи назначения весов показателям, их независимость от показателей из других разделов и, как следствие, гибкость и расширяемость системы;

3)        создание соревновательной среды;

4)        получение положения студента относительно всех остальных в вузе (на факультете, в группе);

5)        автоматическое поощрение участия в наименее «заселённых» разделах и показателях – привлечение к гармоничному развитию.

Отрицательные стороны нормирования максимумом:

1)        возможность сговора;

2)        возможность «подавления» одним членом коллектива всех остальных по определённому показателю или разделу.

При этом возможность сговора минимальна, так как студенты разделены на достаточно мало взаимодействующие между собой группы, потоки и т. п., а нормирование производится по всему вузу. С подавлением несколько сложнее – например, если кто-то напишет 10 статей за семестр, для всех остальных весомость одной статьи будет в 10 раз меньше (пример упрощённый, так, с учётом весов градаций, ваковская статья «весит» в 3 раза больше публикации в материалах конференции, а ещё учитывается и количество страниц). Однозначного решения здесь нет, так как нормирование средним (суммой), как и отсутствие нормирования, имеют свои минусы. К тому же нельзя считать этот недостаток очень крупным, так как, если кто-то вырвался вперёд по одному из показателей, его всегда можно обойти по другому показателю или разделу.

Алгоритм ИРС предусматривает возможность любой корректировки и модификации набора разделов, показателей и их весов, которые могут потребоваться в ходе эксплуатации.

Пример особого расчёта по одному из показателей ИРС. Некоторые показатели системы требуют особого расчёта, что реализуется с помощью специального шаблона стратегий [5].

Например, при расчёте индекса по такому показателю как «Результат экзаменов» в ходе исследования был рассмотрен ряд альтернативных вариантов:

1)        сумма всех оценок нормируется максимумом по всем группам – при этом, чем больше экзаменов и курсовых проектов на определённом курсе, тем больше индекс можно получить; плюсы: учитывается дополнительная нагрузка при большом количестве экзаменов, минусы: максимальный индекс по данному показателю может получить только студент в группе, ??дающей в текущем семестре большое число экзаменов;

2)        вычисляется средний балл по студенту и нормируется максимумом; плюсы: понятность, минусы: не учитывается количество сданных экзаменов – достаточно сдать один экзамен на оценку «пять» (не сдав остальные) для получения максимального балла;

3)        сумма всех оценок, делится на количество экзаменов и курсовых для каждой группы, а уже после этого нормируются максимумом среди всех; плюсы: максимум получает студент, сдавший вовремя на отлично все курсовые и экзамены вне зависимости от их количества – этот вариант выбран, как наиболее адекватный.

Во всех вариантах рассматривается взвешенная сумма оценок, то есть вместо оценки при расчёте подставляется её вес (веса сейчас следующие: «5» = 15, «4» = 5, «3» = 1). Можно было, конечно, учитывать только отличников или отличников и хорошистов (то есть установить веса «5» = 1, «4» = 0, «3» = 0), но для полноты сведений было решено учитывать все сданные экзамены.

Анализ результатов расчёта индексов ИРС. Кроме всего прочего система позволяет производить анализ результатов деятельности студентов и, следовательно, предоставляет статистику для повышения эффективности учебной работы вуза в целом. Далее приведены некоторые результаты анализа студенческой активности за осенний семестр 2012 года. На данный момент ИРС внедрена на кафедре информационных систем и технологий (ИСТ) Ухтинского государственного технического университета. Всего на экспериментальном этапе в расчёте индексов участвовало 83 студента специальности ИСТ (Табл. 2), при этом не учитывались студенты, имеющие нулевой индекс за семестр.

Таблица 1

Количество участников расчётов по группам и их средний итоговый индекс

Курс

Группа

Количество

участников ИРС

Средний

итоговый индекс

5

ИСТ-08

19

316

4

ИСТ-09

17

227

3

ИСТ-10

14

174

2

ИСТ-11

18

148

1

ИСТ-12

15

158

Итого

83

209

 

Очевидный вывод, что представители старших 4–5 курсов (рис. 2) показывают большие результаты причём, не только по итоговому индексу, но и по индексам лидерства и гармонии, поскольку у них есть уже некоторая база умений и проектов, больше осведомлённость и уверенность в своих силах.

 

Рис. 2. Распределение агрегированных индексов по курсам

 

Если посмотреть более детально – по отдельным разделам (рис. 3), то становится видно, что с увеличением курса растёт участие в дополнительной учебной (Р2) и научной (Р3), деятельности, а также количество трудоустроенных студентов (Р7). При этом активность участия в спортивной (Р5) и общественной (Р6) деятельности практически не изменяется.

 

Рис. 3. Распределение частных индексов по курсам

 

Результаты учебной деятельности зависят больше от сложности сдачи экзаменов (2 и 3 курс), а культурная деятельность, в рассмотренном случае, – от группы в целом, а не от её пребывания на том или ином курсе, поэтому по данным разделам заметных трендов нет.

Общее распределение итогового индекса имеет картину, близкую к экспоненциальной, характерной для индексов профессорско-преподавательского состава (см. например, [6]. При этом, по первому разделу (учебной деятельности), имеющему наибольший средний индекс, распределение близко к равномерному. Именно эта компонента делает распределение итогового индекса столь «пологим» (рис. 4).

 

 

Рис. 4. Распределение агрегированных индексов

 

Более интересную информацию может дать анализ взаимозависимостей частных индексов по разделам (табл. 3).

Таблица 3

Корреляции между частными индексами по разделам, %

Раздел: сфера деятельности

Р1

Р2

Р3

Р4

Р5

Р6

Р7

Р1: Учебная                                    

 

21

29

15

13

12

33

Р2: Доп. учебная

 

 

53

46

-11

15

36

Р3: Научная

 

 

 

38

-8

23

48

Р4: Культурно-творческая

 

 

 

 

0

37

35

Р5: Спортивная

 

 

 

 

 

-2

3

Р6: Общественная

 

 

 

 

 

 

10

Р7: Трудовая

 

 

 

 

 

 

 

Индекс гармонии

32

56

64

58

21

42

65

Индекс лидерства

90

37

30

27

27

33

34

Итоговый индекс

77

61

69

53

19

44

60

 

Здесь были получены некоторые довольно неожиданные результаты.

1) Студенты, работавшие в течение семестра, имеют, в среднем, большие индексы по многим разделам ИРС (в том числе по результатам экзаменов). Это, конечно, можно объяснить тем, что совмещают работу с учёбой старшекурсники, а у них достижений больше. Но, если учесть тот факт, что для старшекурсников, взятых отдельно от всех остальных, картина сохраняется, объяснением тут, скорее, служит зависимость, как наличия трудоустройства, так и успехов по всем разделам ИРС от активности жизненной позиции.

2) Никак не связанными с успехами в остальных сферах оказались результаты по разделу 5: «Спортивная деятельность» (единственный раздел, для которого выявлены отрицательные, хотя и незначительные взаимосвязи с остальными). Тут можно привести несколько предположений, наиболее логичное из них, что спортивная деятельность требует много времени, сил, а также применения другого «ресурса» (в большей степени физического, в то время как для всех остальных сфер деятельности требуется интеллектуальный ресурс).

3) Самая значительная взаимосвязь наблюдается у разделов 2 и 3 – дополнительная учебная и научная деятельности, что скорее свидетельствует о схожести самих разделов, необходимости пересмотра их показателей или, возможно, объединения их в один раздел. Также эти разделы довольно сильно коррелированы с культурной деятельностью (Р4).

Значимость оценок составляет 95% по критерию Стьюдента при корреляции больше 22% (см. Таблица 3), однако, испытание проводилось в рамках одной кафедры и, следовательно, отражает специфику именно её функционирования.

При внедрении ИРС в рамках всего вуза она позволит любому доверенному лицу охватить «единым взглядом» результаты деятельности всех студентов, кафедр, факультетов и вуза в целом.

 

Исследование выполнено при поддержке Министерства образования и науки Российской Федерации, соглашение 14.132.21.1031 «Система индексно-рейтинговой оценки и материального стимулирования студентов вуза».

 

ЛИТЕРАТУРА

 

[1] Каточков В.М., Сафронова М.А. Внедрение Кредитно-модульной и Балльно-рейтинговой систем в образовательный процесс университета // Вестник Южно-Уральского государственного университета. Серия: Образование. Педагогические науки. – 2009. – № 24 (157). – С. 37–42.

[2] Постановление Правительства Российской Федерации от 18.11.2011 № 945 «О порядке совершенствования стипендиального обеспечения обучающихся в федеральных государственных образовательных учреждениях профессионального образования».

[3] Рочев К.В. Индексно-рейтинговая система сравнительной оценки деятельности и стимулирования студентов вуза // Управление экономическими системами: электронный научный журнал. – 2013. – № 01.

[4] Данилов Г.В. Применение обобщенных характеристик деятельности преподавателя для формирования конкурентной среды в университете // Университетское управление: практика и анализ». – 2007. – № 1. – С. 22–25.

[5] Рочев К.В. Расширение области применения информационной системы материального стимулирования – общий и программный аспекты // Всероссийский конкурс научно-исследовательских работ студентов и аспирантов «Инновационные технологии в образовательном процессе» (или «Технологии электронного обучения в образовательном процессе»): сб. научн. работ. – Белгород, 2011. – Том 1. – С. 455-457.

[6] Рочев К.В. Анализ результатов работы профессорско-преподавательского состава // Социологические исследования. – 2012. – № 11. – С. 134–140.

 

LITERATURA

 

[1] Katochkov V.M., Safronova M.A. Vnedrenie Kreditno-modul\'noj i Ball\'no-rejtingovoj sistem v obrazovatel\'nyj process universiteta // Vestnik Juzhno-Ural\'skogo gosudarstvennogo universiteta. Serija: Obrazovanie. Pedagogicheskie nauki. – 2009. – № 24 (157). – S. 37–42.

[2] Postanovlenie Pravitel\'stva Rossijskoj Federacii ot 18.11.2011 № 945 «O porjadke sovershenstvovanija stipendial\'nogo obespechenija obuchajushhihsja v federal\'nyh gosudarstvennyh obrazovatel\'nyh uchrezhdenijah professional\'nogo obrazovanija».

[3] Rochev K.V. Indeksno-rejtingovaja sistema sravnitel\'noj ocenki dejatel\'nosti i stimulirovanija studentov vuza // Upravlenie jekonomicheskimi sistemami: jelektronnyj nauchnyj zhurnal. – 2013. – № 01.

[4] Danilov G.V. Primenenie obobshhennyh harakteristik dejatel\'nosti prepodavatelja dlja formirovanija konkurentnoj sredy v universitete // Universitetskoe upravlenie: praktika i analiz». – 2007. – № 1. – S. 22–25.

[5] Rochev K.V. Rasshirenie oblasti primenenija informacionnoj sistemy material\'nogo stimulirovanija – obshhij i programmnyj aspekty // Vserossijskij konkurs nauchno-issledovatel\'skih rabot studentov i aspirantov «Innovacionnye tehnologii v obrazovatel\'nom processe» (ili «Tehnologii jelektronnogo obuchenija v obrazovatel\'nom processe»): sb. nauchn. rabot. – Belgorod, 2011. – Tom 1. – S. 455-457.

[6] Rochev K.V. Analiz rezul\'tatov raboty professorsko-prepodavatel\'skogo sostava // Sociologicheskie issledovanija. – 2012. – № 11. – S. 134–140.

 

Information system of index-rating
EVALUATION OF HIGHER SCHOOL STUDENTS
And the result in its implementation

 

 

K.V. Rochev

 

Laboratory of information systems in economy

Ukhta state technical university

Pervomayskaya Str., 13, Ukhta, Komi Republic, Russia, 169300

 

This paper describes the information system of index-rating evaluation and financial incentives of university students, a list of indicators to measure the student\'s activities, features of the calculation and analysis of data on the results of implementing the system in Ukhta State Technical University.

Key words: rating, index system, index-rating system, IRS, students activity, performance evaluation.

 

 


Автор оригинала: К.В. Рочев
Источник оригинала: Вестник РУДН Серия "Информатизация образования" №2, 2013

Новости
16.06.2017

Российский университет дружбы народов объявляет о проведение первой волны вступительных испытаний среди иностранных граждан для обучения на программах магистратуры на контрактной основе. Первая ...

13.10.2016

26 октября-27 октября 2016 года Российский университет дружбы народов проводит Международную конференцию «Сетевые университеты и международный рынок труда (пространства БРИКС, СНГ, ШОС)».

19.05.2016

The Peoples’ Friendship University of Russia (PFUR) announces the beginning of admission of foreign citizens who graduated from Bachelor and Specialist Degree programs of PFUR and other Russian and ...

19.05.2016

Российский университет дружбы народов (РУДН) объявляет о наборе иностранных граждан -выпускников бакалавриата и специалитета РУДН и других российских и зарубежных ВУЗов на программы магистратуры на ...

11.12.2015

Проект рекомендаций Семинара-совещания научной общественности по проблемам международного научно-технического и образовательного сотрудничества