Поэтому выражения (5) и (6), использующиеся для вычисления Р51 накапливаемых за полугодие данных, следует преобразовать в (3) и (4):
0 1 10 0,1 XV
N ,=1
иссл ,5
(7)
где Унир, i - объем НИР, выполненных за /-е полугодие в рамках рассматриваемого пятилетия,
0 1 10 0,1 -ЪУ
~ (8)
,-,. внутр НИР ,1
исся, 5
Величину Ыиссл, 5 наиболее просто можно оценить на основе среднесписочных значений за /-е полугодие (Йиссл,):
Nиссл 5 = 0,1£ Ыш
N..
■ 0,5(М + N ).
(9)
(10)
где Nиссл^.и, Nиссл^.к - количество сотрудников, отнесенных к категории исследователей, на начало и окончание /-го полугодия.
Для повышения оперативности получения данных о результатах НИР в качестве периодов
накопления и промежуточной обработки можно использовать квартал или месяц. В этом случае следует внести соответствующие изменения в (7) и (8) для вычисления значений показателей за пятилетку.
Использование рассмотренной технологии моделирования показателей НД позволит обеспечить создание корректных компонентов информационного, программного, методического обеспечения ИАС вуза.
Литература
1. Новиков Д.А., Суханов А.Л. Модели и механизмы управления научными проектами в вузах М.: Ин-т управления образованием РАО, 2005. 80 с.
2. Говорков А.С. Автоматизация организационно-управленческих аспектов научной деятельности вуза // Университетское управление. 2009. № 6. С. 13-18.
3. Котляров И.Д. Управление продуктивностью научной работы профессорско-преподавательского состава // Университетское управление. 2009. № 5. С. 41-48.
4. Мелехин В.А., Хеннер Е.К. Структурно-информационная модель научной деятельности классического университета // Университетское управление. 2008. № 6. С. 85-95.
5,1
I =1
УДК 681.518.2
ОБРАБОТКА ПОКАЗАТЕЛЕЙ В КОМПЬЮТЕРНЫХ МЕТОДИКАХ ОЦЕНКИ ОБРАЗОВАТЕЛЬНОГО ПРОЦЕССА
А.И. Долгов, д.т.н.; А.Ф. Мартыненко; В.В. Преснухин, к.т.н.
(Ростовский военный институт Ракетных войск, [email protected])
Рассматриваются методы обработки в компьютерных коэффициентных методиках исходных (входных) и промежуточных показателей для получения выходных показателей рейтинговой оценки образовательного процесса (оцениваемого объекта) с учетом нормативных логических условий оценивания.
Ключевые слова: компьютерная коэффициентная методика, образовательный процесс, изменяемый весовой коэффициент, сумматор, умножитель.
В практике оценивания образовательного процесса наиболее востребованы программно реализованные коэффициентные методики благодаря их простоте и приемлемой точности получаемых результатов.
Под коэффициентной методикой понимается методика вычисления значения интегрального выходного показателя (или некоторого множества выходных показателей) оцениваемого объекта (процесса) путем суммирования значений вполне определенного множества входных показателей, учитываемых при этом с соответствующими весовыми коэффициентами [1].
Разработка компьютерной коэффициентной методики оценки образовательного процесса (далее - коэффициентной методики), предшествующая ее программной реализации, включает два
этапа - математическое описание методов обработки показателей и синтез структурной схемы коэффициентной методики.
Математическое описание методов, необходимых для получения рейтинговой оценки образовательного процесса с учетом нормативных логических условий оценивания, включает:
- выделение предварительного значения рейтинговой оценки в виде среднего балла, соответствующего комбинациям частных оценок, определяемой логическими условиями оценивания для данного рейтингового интервала;
- определение наличия оценок, снижающих значение предварительной рейтинговой оценки;
- получение итогового (окончательного) значения рейтинговой оценки путем коррекции ее предварительного значения.
Приведем определения основных используемых понятий. Оценка - процесс определения (оценивания) значения показателя, характеризующего результат образовательного процесса. Показатель - качественная и (или) количественная характеристика, вводимая для оценивания отдельного свойства либо совокупности свойств объекта (процесса). В отличие от оценки показатель обычно имеет наименование, обозначение и значение, а при количественной оценке во многих случаях и размерность. Шкала - инструмент для разделения оцениваемых значений рассматриваемых однородных показателей на различимые между собой группы, где отношения между значениями показателей выражены свойствами числового ряда либо ряда наименований [2].
В образовательном процессе в зависимости от вида используемой шкалы различают балльные, качественные (шкала наименований), а иногда и балльно-качественные оценки.
Значениями балльной оценки являются целые числа - количество баллов (например, 5, 4, 3, 2).
Значения качественной оценки выражаются наименованиями («отлично», «хорошо», «удовлетворительно», «неудовлетворительно»).
В последнее время в оценивании образовательного процесса все чаще применяются рейтинговые оценки - числовые оценки, задаваемые с некоторой точностью в (рейтинговых) интервалах численных значений рейтинговой шкалы.
Наиболее часто используемая 5-балльная система оценки, а также иногда применяемые системы оценок с несколько большим количеством баллов (например 12-балльная) имеют существенный недостаток - используют ограниченное количество значений (градаций) оценивания, внутри которых объекты оказываются неразличимыми.
В связи с этим рассмотрим методы обработки показателей образовательного процесса с использованием как 5-балльных оценок, так и рейтинговых оценок с градацией чисел в рейтинговых интервалах:
4,5<«отлично»<5; (1)
3,5<«хорошо»<4,5; (2)
2,5<«удовлетворительно»<3,5; (3)
2,0<«неудовлетворительно»<2,5.
В традиционно используемых коэффициентных методиках значения весовых коэффициентов постоянны по величине. Вместе с тем при вычислении значения того или иного показателя могут учитываться вполне определенные логические условия оценивания, учитываемые только с помощью изменяемых весовых коэффициентов [3].
Выделение предварительного значения рейтинговой оценки
Рассмотрим данный метод на примере оценивания подготовленности специалиста в рейтинго-
вом интервале «хорошо» при нормативном требовании, задающем логические условия получения итогового значения Яхор рейтинговой оценки «хорошо» лишь в случае следующих комбинаций частных оценок: оценка за практические навыки должна быть не ниже «хорошо», а оценка за теоретические знания не ниже «удовлетворительно».
Предварительное значение Я'хор рейтинговой оценки Яхор выделяется в виде среднего балла частных оценок практических навыков (Хп) и теоретических знаний (Хт) лишь в случае выполнения нормативного требования, при этом Г Хп + Хт
К'хор -
2
если Хп > 3,5 и Хт > 2,5,
0 в ином случае.
Конкретный пример иллюстрируется данными, представленными в таблице.
Результаты оценивания
Оценка Подго-
Практика Теория подготовлен- товлен-
Оцени- (П) (Т) ности ность
ваемым специалиста специа-
объект оценка Пр1,2 оценка Пр1,2 интег- Х2,1 листа с
Хп Хт ральная учетом
оценка vi, r
(№хор)
1-й спе- 3,4 - 100 5,0 0 4,2 < 0 0
циалист (уд) (отл) (хор)
2-й спе- 4,0 0 4,4 0 4,2 > 0 4,2
циалист (хоР) (хоР) (хоР) (хоР)
Первый специалист получил за практику рейтинговую оценку Хп=3,4 («удовлетворительно»), а за теорию Хт=5 («отлично»), средняя оценка его
3,4 + 5,0
подготовленности составила-=4,2 балла.
2
Второй специалист получил оценку за практику Хп=4,0 («хорошо»), за теорию Хт=4,4 («хорошо»), и средний балл за его подготовленность та-4,0 + 4,4
кой же:
2
=4,2.
В этой ситуации в соответствии с соотношением 3,5<«хорошо»<4,5 для среднего балла оба специалиста претендуют на оценку «хорошо».
Однако (при несоблюдении условий получения итоговой рейтинговой оценки «отлично») по логическим условиям оценивания итоговая рейтинговая оценка Я 'хор первого специалиста (ввиду наличия оценки «удовлетворительно» за практику) должна быть исключена из рейтингового интервала «хорошо», что соответствует Я'хор=0.
Таким образом, надо определить наличие комбинации Хп>3,5 и Хт>2,5, соответствующей рейтинговой оценке «хорошо», что в коэффициентной методике нереализуемо с использованием одного весового коэффициента, но осуществимо с применением трех изменяемых весовых коэффициентов.
Сформируем признак Пр1,2 принадлежности оценки специалиста к рейтинговому интервалу «хорошо» в соответствии с соотношением
Пр1,2=ХпУп2+ХтУт2,
10, еслиХп > 3,5, где Уп2 = \
[1 в ином случае
10, еслиХт > 2,5, и Ут2 = •{
[1 в ином случае.
Условием наличия комбинации Хп>3,5 и Хт>2,5, соответствующей рейтинговой оценке «хорошо» (см. табл.), является значение показателя Пр 1,2=0, а признаком отсутствия этой комбинации - значение показателя Пр1,2>0
Я'хор=Х2,1-У1Д (4)
где Х2,1=(Хп+Хт)-0,5+Пр1,2;
Г1, если Х2,1 > 0, VI, Я = •{
[0 в ином случае.
Таким образом, весовой коэффициент У1,Я совместно с признаком принадлежности (Пр1,2) на основании соотношения (4) при наличии комбинации, соответствующей рейтинговой оценке «хорошо» (Пр 1,2=0, Х2,1>0), обеспечивает формирование значений У1,Я=1 и как результат - Я 'хор= =(Хп+Хт)-0,5, а при отсутствии комбинации (Пр 1,2=1, Х2,1<0) - значений У1,Я=0 и Я'хор=0.
Фрагмент синтезированной в соответствии с математическим соотношением (4) структурной схемы коэффициентной методики приведен на рисунке 1. Внутри прямоугольников, обозначающих сумматоры входных показателей нижестоящего уровня, указываются обозначения показателей, значения которых равны результату суммирования входных показателей, умноженному на соответствующий весовой коэффициент.
Хп Хт
Рис. 1. Выделение значения
В овалах, обозначающих для неизменяемых весовых коэффициентов умножители, а для изме-
няемых весовых коэффициентов умножители с аддитивной поправкой, для неизменяемых весовых коэффициентов приводятся их значения, а для изменяемых - символические обозначения. Связи между сумматорами и умножителями указаны стрелками.
Аналогично строятся и фрагменты структурных схем для других итоговых интегральных рейтинговых оценок подготовленности специалиста.
Определение наличия снижающих оценок
При определении предварительных рейтинговых оценок могут встречаться комбинации частных оценок, приводящие к одинаковым предварительным значениям рейтинговой оценки, однако комбинации по своему составу могут быть настолько неравноценными, что в соответствие им следует поставить разные рейтинговые значения предварительной оценки.
Так, например, в интервалах оценки «хорошо» при двух результатах оценки подготовленности специалиста - в первом случае оценка за практику 4,4 («хорошо»), за теорию 4,0 («хорошо»), а во втором случае оценка за практику 5,0 («отлично»), а за теорию 3,4 («удовлетворительно») - полученные предварительные рейтинговые оценки, средний балл которых равен 4,2, оказываются одинаковыми и по нормативным условиям оценивания соответствуют рейтинговому интервалу 3,5<«хо-рошо»<4,5. Однако рейтинговую оценку, соответствующую комбинации частных оценок, включающей оценку «удовлетворительно», вполне справедливо и необходимо откорректировать таким образом, чтобы сделать ее ниже рейтинговой оценки комбинации без частной оценки «удовлетворительно».
Коррекцию предварительных рейтинговых оценок можно осуществить следующим образом. Рейтинговый интервал 3,5<«хорошо»<4,5 разделяется на два диапазона:
4,0<«хорошо»<4,5 (верхний диапазон), (5)
3,5<«хорошо»<4,0 (нижний диапазон), (6) при этом полученное значение предварительной рейтинговой оценки Я 'хор преобразуется так, чтобы в случае возникновения комбинации частных оценок за теорию и практику, не включающей оценку «удовлетворительно», выделить значение Я"хор 1, принадлежащее верхнему диапазону, а в случае комбинации, включающей такую оценку, выделить значение Я"хор2, принадлежащее нижнему диапазону.
Выполнение подобного преобразования для оценок, принадлежащих рейтинговому интервалу «хорошо», осуществимо с использованием признака Пр1,3 наличия снижающей оценки (в данном случае «удовлетворительно»):
Пр1,3=Хп^п,3+ХтУт,3,
[0, если Хп > 3,5, где Кп,3 = \
[1 в ином случае;
,0, если Хт >3,5,
Иг,3 =
[1 в ином случае.
Наличие среди частных оценок Хп, Хт хотя бы одной оценки «удовлетворительно» приводит к положительному значению признака наличия снижающей оценки (Цр1,3) за счет умножения хотя бы на один изменяемый весовой коэффициент ^л,3 или ^г,3, равный в этом случае единице, либо к нулю при отсутствии снижающих оценок «удовлетворительно» за счет умножения на изменяемые весовые коэффициенты ^л,3 и ^г,3, равные в этом случае нулю.
С помощью изменяемых весовых коэффициентов У3,1 и У3,2 и признака наличия снижающей оценки (Цр1,3) предварительное значение оценки подготовленности специалиста может быть получено как Я"хор1 или Я"хор2, причем в зависимости от значений изменяемых весовых коэффициентов У3,1 и У3,2 либо в виде доминирующего отрицательного числа, либо в виде значения Я 'хор.
Математическими соотношениями, описывающими метод определения снижающих оценок, являются следующие: Я"хор1=Яхор+Пр1,3У3,1 и Я"хор2=Яхор+Пр1,3У3,2, где
[-100, если Пр1,3 > 0, 10 в ином случае; [0, если Пр1,3 > 0, [-100 в ином случае.
Реализация соотношений Я"хор1 и Я"хор2 представлена на рисунке 2.
V 3,1 =
V 3,2 =
R"хор1
R"хор2
Хп
Хт
Рис. 2. Определение признака наличия снижающих оценок
Аналогично может быть реализован метод определения признака наличия снижающих оценок и в интервале «удовлетворительно».
Получение итогового значения рейтинговой оценки
Как при отсутствии, так и при наличии снижающих оценок формируется только одно предварительное значение рейтинговой оценки для соответствующего диапазона рейтингового интервала оценки (для рассматриваемого примера - интервал 3,5<«хорошо»<4,5).
Однако зачастую предварительное значение Я"хор1 или Я"хор2, хотя и попадает в нужный диапазон соответствующего рейтингового интервала, из-за логического условия оценивания (при разных сочетаниях входных оценок) по абсолютной величине может выйти за границы установленного рейтингового интервала.
Для приведения полученного промежуточного значения рейтинговой оценки к установленным границам интервалов (диапазонов) воспользуемся методом линейных преобразований получаемых промежуточных значений рейтинговой оценки.
Для интервала «хорошо» максимальные оценки за теорию и практику могут быть равными соответственно «отлично» и «хорошо», а минимальные - «удовлетворительно» и «хорошо». Исходя из устанавливаемых рейтинговых интервалов (1) и (2) получения оценки «хорошо», возможные достигаемые максимальное и минимальное значения среднего балла оценок специалиста соответственно определяются как
5 + 4,49(9)
2
2,5 + 3,5 2
4,749(9),
3,0.
(7)
(8)
Таким образом, реально вычисляемые в виде среднего балла возможные значения итоговой рейтинговой оценки «хорошо» могут оказаться в интервале 3,0< «хорошо» < 4,749(9), в то время как установленный рейтинговый интервал (2) «хорошо» должен быть равен 3,5< «хорошо» < 4,5.
Линейные преобразования получаемых предварительных значений рейтинговых оценок должны обеспечить такую коррекцию их значений, чтобы они не выходили за границы установленных рейтинговых интервалов. При этом, если оценки за теорию и практику окажутся не ниже 4,0 (чему соответствует Я"хор 1^0 и Я"хор2=0), в соответствии с (5) итоговая рейтинговая оценка специалиста должна быть в верхнем диапазоне рейтингового интервала «хорошо», а если хотя бы одна из оценок окажется ниже 4,0 (чему соответствует Я"хор 1=0 и Я"хор2ф0), рейтинговая оценка специалиста должна быть в нижнем диапазоне рейтингового интервала (6) «хорошо».
Коррекция обозначаемых через х полученных предварительных значений рейтинговых оценок Я"хор1 и Я"хор2 выполнима с помощью линейного преобразования, описываемого функцией (у) одной переменной (х) вида:
у=кх+Ь. (9)
Учитывая, что из логических условий оценивания достигаемые максимально возможные значения у и х в случае верхнего диапазона (5) равны соответственно 4,499(9) и 4,749(9), а минимально возможные равны 4,0 и 4,0, составим систему двух линейных уравнений вида
(4,499(9) = £1-4,749(9) + Ы, 14,0 = £1-4,0 + Ь1. (10)
Результаты решения системы уравнений -к1-0,665342204 и Ь 1-1,338631184. На основании этого соотношение (9) для верхнего диапазона рейтингового интервала «хорошо» принимает вид >>=0,665342204х+1,338631184. (11)
Значения к2 и Ь2 для нижнего диапазона рейтингового интервала «хорошо» определяются аналогично.
Убедимся на конкретном примере, что с использованием линейного преобразования (11) реализуется логическое условие получения оценки «хорошо».
Пусть частная оценка практических навыков специалиста Хп=4,49 («хорошо»), а теории -Хт=5,0 («отлично»). Средний балл его подготовленности Я'хор=Я"хор1=4,745, что, согласно (1), соответствует рейтинговому интервалу 4,5<«от-лично»<5.
Однако по нормативным условиям получения оценки требуется, чтобы интегральная итоговая оценка Яхор специалиста была не выше оценки за практику, в данном примере равной «хорошо».
Подставив полученную промежуточную рейтинговую оценку Я"хо^1=4,745 в (11), получим Яхор=4,745*0,665342204+1,338631184-4,496, то есть итоговая рейтинговая оценка специалиста на-
ходится в требуемом верхнем диапазоне рейтингового интервала «хорошо», что соответствует заданным нормативным условиям оценивания.
Реализация коррекции выполнима с помощью весовых коэффициентов: 1 к Г(к1 X3,1+Ь1), если Я"хор2 > 0, [ 0 в ином случае;
10, если Я"хор1 > 0,
V 2, Я = \
[(к2 X3,1+ Ь2) в ином случае.
Учитывая, что промежуточное значение оценки находится в одном из диапазонов рассматриваемого рейтингового интервала, математическое соотношение, описывающее метод получения итоговой рейтинговой оценки «хорошо» (Яхор), будет иметь вид
Яхор = V1, Я- Я "хор! + V 2, Я- Я" хор2 . (12)
Математическое соотношение (12) может быть представлено фрагментом структурной схемы, отображенной на рисунке 3.
Аналогично могут быть построены и реализованы соотношения для вычисления рейтинговых оценок Я(отл), Я(уд) и Я(неуд).
Литература
1. Долгов А.И., Мартыненко А.Ф., Преснухин В.В. Научные основы построения коэффициентных методик оценки объектов // Системы управления и информационные технологии. 2008. № 4 (34). С. 61-66.
2. Государственная система обеспечения единства измерений. Шкалы измерений. М.: Стандартинформ, 2008.
3. Долгов А.И., Мартыненко А.Ф., Преснухин В.В. Коэффициентная методика с изменяемыми весовыми коэффициентами // Искусственный интеллект. 2008. Т. 4.
Rxop
R"xopl > /
Схема
рис. 2
Рис. 3. Получение итоговой
рейтинговой оценки
УДК 007:519.816
РАCПРЕДЕЛЕННАЯ ИНФОРМАЦИОННАЯ СИСТЕМА ПОИСКА ЛИТЕРАТУРЫ
М.М. Маран, к.т.н.; Лвин Маунг Со
(Национальный исследовательский университет «Московский энергетический институт»,
[email protected], [email protected])
Рассматриваются возможности построения и реализация распределенной информационной системы поиска литературы. Реализация выполнена согласно концепции сервис-ориентированной архитектуры на платформах Windows Communication Foundation, Microsoft SQL Server 2008 и Visual Studio 2010.
Ключевые слова: информационная система, поиск литературы, SOA, WCF, ADO NETMVC.
Предлагаемая информационная система обеспечивает удобный доступ через веб-интерфейс к
каталогу полнотекстовых документов и мультимедийных ресурсов, а также полнотекстовый поиск и