CC BY
117
УДК 353.233 (075.8)
КРИТЕРИИ И ПОКАЗАТЕЛИ ЭФФЕКТИВНОСТИ ВОЕННО-ПРОФЕССИОНАЛЬНОЙ ПОДГОТОВКИ ОФИЦЕРСКИХ КАДРОВ
Канд. воен. наук, доц. ТАМЕЛО В. Ф., КОСТКО Ю. В.
Белорусский национальный технический университет
Отсутствие в настоящее время научно обоснованных критериев эффективности военного образования приводит к серьезным расхождениям в результатах обучения, разбросу между ними в различных учебных заведениях. Наблюдаются также серьезные расхождения в оценке преподавателей, работающих в аналогичных условиях, даже тогда, когда их преподавание базируется на идентичной дидактической инфраструктуре.
Под эффективностью понимается отношение достигнутого эффекта (результаты труда) к затратам труда. Основу результатов военно-профессиональной подготовки составляют дидактический эффект, объем и качество усвоения знаний, умений и навыков. Затраты живого и общественного труда складываются из затрат труда преподавателей, обучаемых, управленческого и обслуживающего персонала, затрат на эксплуатацию технического и информационного обеспечения. Очевидно, что в таком случае повышение эффективности достигается либо путем увеличения дидактического эффекта, либо путем уменьшения затрат труда.
При нормативном подходе к организации учебного процесса (например, при строго определенном критерии достижения цели обучения и ограниченном времени обучения) задача повышения эффективности сводится к поиску системы с минимальной стоимостью, т. е. требуется решить задачу:
XC(Z0,T1,Zn) ^ min;
i
Zi (Z0,Ti) >Zn (i = 1,n);
T < Tg (i = 1, n),
где X Ci - стоимость (обобщенная) системы обучения; Zi0, Zi, Zn- начальные и необходи-
мые знания обучаемого; Т, Т8 - затраченное и допустимое время обучения; п - число обучаемых.
В приведенной формулировке задачи содержится величина, выражающая объем или степень усвоения знаний, которая в настоящее время не имеет точной меры. Таким образом, задача оптимизации процесса обучения содержит в своих условиях неопределенность. В связи с этим в формулировку вводятся случайные величины, принимающие значения «1» (знает) и «0» (не знает) с некоторой вероятностью. Тогда указанная задача принимает, например, вид:
Xci (Zi0,T-) ^ max; i
°i = X P (Z0,T j;
j=1,m
°i j;
X Pj (Z j (Z0, T) = 1;
Т < Т •
X ^,
г
где а, Т) - степень знаний обучаемого достигнутая за время Ti; Р^ Т) - вероятность того, что ,-й обучаемый в момент Т может иметь оценку о.
Для изыскания методов (приемов) оценки эффективности военно-профессиональной подготовки представляется целесообразным определить (сформулировать) систему локальных критериев и показателей оценки эффективности военно-профессиональной подготовки, которая на данном этапе развития высшей воен-
ной школы должна включать их максимально возможный перечень. При оценке же эффективности обучения берутся не все, а необходимые критерии и показатели в зависимости от конкретных условий и необходимой степени оценки.
Научная организация и рациональная оценка результатов процесса обучения свидетельствуют о дополняющем характере количественных и качественных критериев эффективности учебных занятий. В качестве общего критерия оценки эффективности учебно-воспитательной работы в военно-учебном заведении выступают цели высшего военного образования. В случае полной определенности целей обучения и информация, связанная с оценкой эффективности обучения, тоже детерминирована. В случае неполной определенности целей обучения объективное значение эффективности можно определить только с определенной (установленной) степенью вероятности.
Рассматривая современное положение дел в отношении оценки качества военного обучения вообще и военно-профессиональной подготовки в частности, приходится делать выводы о том, что эта оценка базируется главным образом на информации средней или низкой степени правдоподобности. Следовательно, выносимой оценке эффективности сопутствуют неуверенность и невысокая достоверность.
В целях обеспечения целостного подхода при оценке эффективности военно-профессиональной подготовки мы считаем целесообразным определить единые, общие критерии.
Под понятием «критерий эффективности обучения», очевидно, следует понимать объективную меру познавательного явления. Критерий - это такая переменная у (величина функции - критерий, эталон, зависимая переменная), с помощью которой осуществляются прогнозы, оценки качества переменной х (аргумент функции - определитель, предикат, независимая переменная). Следовательно, можно записать
>- = Лх).
Критерий возможно также отожествлять с измерительным устройством, с помощью которого осуществляется объективное измерение результатов процесса обучения.
Критерии, очевидно, должны соответствовать требованиям точности, объективности, отсутствию помех.
Источниками помех могут выступить:
• неразвитость самого критерия или недоучет его важных компонентов;
• контаминация или включение в его состав чуждых ему элементов;
• дисторция или неверный учет значения различных элементов критерия.
Выделяют четыре метода построения критериев эффективности обучения и соответствующие им четыре группы критериев. Первую образуют критерии, возникающие в ходе логического анализа признаков, характерных для определенного класса явлений. Определяемые таким образом критерии можно назвать дедуктивными.
Вторая группа критериев возникает в процессе сбора информации об интересующем нас классе явлений от экспертов. Определяемые таким образом критерии называются оценками экспертов.
В третьей группе локализуются критерии, учитывающие род, число и качество результатов труда курсантов (выпускников). В отличие от двух предыдущих групп критериев, которые базируются на субъективной основе, третью группу образуют критерии объективные.
Четвертую группу образуют критерии, возникающие в ходе сложного статистического анализа итогов дидактического тестирования, результатов анкетирования и интервьюирования, анализа учебной документации и т. п. Критерии данного типа называются статистическими, они позволяют измерить определенные стороны исследуемого класса явлений.
Выделяемые критерии эффективности характеризуют результаты или итоги обучения. Однако представление эффективности обучения в военно-учебном заведении в категориях конечных результатов охватывает только одну сторону исследуемого процесса. Вторая сторона определяется критериями оценки качества обучения, которые обусловлены субъективными и организационно-техническими компонентами учебно-воспитательного процесса.
К наиболее часто используемым субъективным критериям относятся: уровень мотивации к учебе и отношение к ней курсантов, а также
уровень интеллектуальных способностей курсантов.
Независимо от субъективных критериев качество обучения будет также определяться тем, в какой мере реализованы критерии, характеризующие организационно-техническую сторону учебного процесса. В этой группе можно выделить критерии, относящиеся к структуре знаний, представленных в содержании обучения, к оптимальности дидактической инфраструктуры, стратегии обучения и использования учебного времени.
Третья группа - итоговые критерии, которые чаще всего используются в различных исследовательских работах.
Проведение исследования применимости указанных групп критериев показывают, что для оценки качества военно-профессиональной подготовки курсантов в военно-учебных заведениях должны быть критерии третьей группы - итоговые.
На этих критериях мы остановимся подробнее. Группа исследуемых критериев качества военно-профессиональной подготовки связана с оценкой и определением измеряемых величин в категориях конечных результатов. В состав этой группы входят: действенность, правильность, экономичность, выгодность и полезность подготовки.
Действенность В характеризует степень реализации поставленных целей военно-профессиональной подготовки. Этот критерий, очевидно, должен предполагать контроль и оценку знаний, навыков и умений курсантов. Такой контроль делает возможным для преподавательского и руководящего состава военно-учебного заведения оценку степени реализации поставленных целей подготовки. Данная оценка служит для преподавателей постоянным источником информации о том, какая часть содержания программы курсантами освоена и какие пробелы имеются у них в знаниях.
При этом цели подготовки должны быть строго конкретизированы с точки зрения трех основных критериев эффективности обучения, т. е. с точки зрения объема приобретаемых знаний, степени их понимания и творческого использования на отдельных уровнях овладения знаниями.
Объем приобретаемых знаний V представляет собой количественную характеристику, или сумму знаний а, умений в и навыков у, которые приобретают курсанты:
V=ЕаРу.
Степень понимания Кп - это такой способ постижения или восприятия знаний, который делает возможным их узнавание, выявление или описание. Кроме того, понимание характеризуется тем, что оно обеспечивает правильное использование знаний в процессе выполнения курсантами функциональных обязанностей по должностному предназначению.
Степень творческого использования Ки характеризует знания, которыми овладели с пониманием, обеспечивающим формирование в сознании курсантов понятийной структуры, позволяющей использовать эти знания на практике в обстановке, приближенной к боевой.
Таким образом, критерий действенности военно-профессиональной подготовки может оцениваться следующим образом:
в = Л(V, кп, ки).
Важная группа критериев качества военно-профессиональной подготовки относится к результативности обучения. В настоящее время при определении результатов деятельности военно-учебного заведения под результативностью обучения понимают отношение числа выпускников к числу курсантов, начавших учебу на первом курсе.
При этом используются три подхода:
• анализ результативности обучения контингента принятых на первый курс, или курсантов, приступавших к учебе на 1-м курсе;
• анализ результативности обучения «пришедших извне», т. е. принятых курсантами переводом из гражданских вузов и других военно-учебных заведений на различных этапах подготовки;
• анализ результативности обучения за программный цикл обучения всех курсантов.
Чаще всего критерии результативности обучения включают: результативность годовую,
срок обучения, процент оканчивающих учебу, а также среднюю продолжительность учебы.
Годовая результативность во взводе, на курсе, военно-учебном заведении оценивается процентом, показывающим, какая часть курсантов успешно закончила военно-учебное заведение. Своевременность учебы характеризуется отношением (проценты) числа курсантов, обучавшихся в данном году (или же оканчивающих обучение), к числу принятых на первый курс обучения при данном наборе.
Очередным критерием, называемым общим процентом оканчивающих обучение, или полной результативностью обучения, является отношение числа всех выпускников, оканчивающих обучение из данного набора курсантов, к числу принятых в этот год на первый курс, независимо от того, окончили они учебу или нет.
При оценке качества военно-профессиональной подготовки представляется целесообразным пользоваться критериями экономичности и выгодности обучения.
Можно принять, что экономичность военно-профессиональной подготовки определяется величиной используемых средств, необходимых для достижения целей подготовки. Эти средства охватывают материалы, энергию, время и материальную базу. В дидактическом процессе - это средства обучения, усилия преподавателей, время, затрачиваемое преподавателем и курсантом, стоимость материальной базы, используемой как преподавателем, так и курсантами.
При сравнении двух курсантов, характеризующихся одинаковым уровнем мотивации, способностями и результатами, наибольшими знаниями и умениями располагает тот курсант, который достиг этих результатов за более короткое время и с меньшей затратой сил своих и преподавателей (командиров). Военно-учебное заведение научило такого курсанта экономно планировать и правильно организовывать свое время, правильно расходовать энергию, контролировать результаты своей работы, умело распределять время работы. Эти же показатели также относятся и к критериям производительности труда курсанта и преподавателя.
Выгодность обучения определяется разницей между стоимостью «продукта» и стоимостью средств и затрат, необходимых для его
производства. Понимаемая таким образом выгодность подготовки характеризует прирост стоимости.
В педагогическом труде понятие выгодность будет, например, выражать разницу между стоимостью (для Вооруженных Сил, государства) выпускника и стоимостью его подготовки. Стоимость подготовки оплачивает государство.
Социально-профессиональная полезность относится к числу внеучебных критериев эффективности обучения. Условием социальной полезности подготовки является польза от него всему обществу. Социально-профессиональная полезность выступает в качестве жесткого критерия, в конечном счете определяющего качество обучения. С точек зрения социальной и профессиональной, выпускник военно-учебного заведения должен выступать как умелый организатор и квалифицированный военный инженер, способный решать сложные вопросы в мирное время и в боевой обстановке. Социальная полезность его определяется умением применить полученные в военно-учебном заведении навыки инженера в народном хозяйстве, что характерно после ухода офицера на пенсию. В связи с этим в содержании обучения фундаментальные общенаучные и общетехнические дисциплины должны по содержанию обеспечивать такую его двоякую подготовку.
При оценке эффективности военно-профессиональной подготовки чаще всего представляется необходимость использовать критерии качества усвоения знаний (объем, системность, действенность знаний), критерии развития самостоятельности и творческой активности обучаемого. Применяя качественные критерии и другие методы, можно сформулировать картину качественного состояния подготовки курсантов. Но для полного и объективного описания военно-профессиональной подготовки не менее важным являются и количественные критерии оценки форм, методов и средств обучения. К ним следует отнести успеваемость обучаемых, показатель качества усвоения учебного материала, число правильных ответов, число допущенных ошибок, затрату обучаемыми времени на усвоение определенного понятия, определения, раздела, темы и т. д. Со-
четание качественных и количественных критериев позволяет повысить объективность оценки дидактической эффективности системы военно-профессиональной подготовки.
Под термином «показатель» понимаются различные явления, наблюдение которых позволяет утверждать, что происходят изменения в состоянии вещей, охваченных понятийной областью исследуемых явлений. Считается, что показатель - это определенный признак, на основе появления которого делается вывод, точный или же с определенной вероятностью, как развивается явление, нас интересующее.
Наиболее важен для нас общий показатель эффективности системы военно-профессиональной подготовки. Он, очевидно, определяется интегральным суммированием частных показателей всех элементов системы военно-профессиональной подготовки.
Общий показатель функционально зависит от результативности, стоимости и времени, отводимого на военно-профессиональную подготовку:
П = ЛРСгЛ
Результативность подготовки Р оценивается уровнями обученности курсантов, количественно может оцениваться в баллах.
Стоимость Ст оценивается количеством затрат на содержание преподавательского, лаборантского состава, управленческого аппарата, обслуживающего персонала, учебно-материальную базу и материальное обеспечение курсантов.
Время ^ военно-профессиональной подготовки должно быть минимальным за счет его полного использования на учебно-воспитательный процесс.
Общий показатель эффективности должен оцениваться соответствующими общими критериями, которые, на наш взгляд, должны определяться как интегральная функция итоговых критериев, т. е. Птт и Птах
Птт < П < Птах.
Общий показатель является комплексной величиной, включающей комплекс локальных показателей, позволяющих оценить труд обучаемых, преподавателей, командования и уп-
равления вуза. Эти показатели содержат оценку результата труда, затрат времени и усилий.
Показатели эффективности деятельности обучаемых. Результатом деятельности обучаемых являются знания, умения, навыки, сфор-мированность приемов умственной деятельности, достигнутые в результате военно-профессиональной подготовки.
1. Входные показатели процесса военно-профессиональной подготовки:
• первоначальный уровень знаний курсанта;
• психологические и психофизические характеристики курсанта.
2. Выходные показатели деятельности обучаемого:
• объем знаний, умений, навыков, количественно оцениваемых в баллах, число правильных действий, число ошибок;
• самостоятельность решений, оцениваемая количеством обращений за помощью, справкой;
• творческий элемент, оригинальность решений.
3. Показатель динамики процесса обучения:
• интенсивность усвоения (забывания) знаний;
• затраты времени на работу по усвоению разделов, тем, выработке командных и методических навыков (по этапам).
Показатели труда преподавателей и командования (административного аппарата):
• затраты на подготовку учебных занятий, учебно-материальной базы и других средств;
• затраты на разработку и внедрение новых форм и методов обучения;
• затраты на повышение научного и профессионального уровня.
Комплекс показателей эффективности уточняется для конкретных этапов военно-профессиональной подготовки и ограничивается в зависимости от целей оценки эффективности.
Фиксация измеренных показателей эффективности осуществляется по каждому курсанту. Таким образом устанавливаются индивидуальные показатели эффективности. Сбор данных, характеризующих показатели эффективности, осуществляется различными средствами. На основе индивидуальных показателей вычисля-
ются статистические значения показателей эффективности групп обучаемых.
Усреднение показателей эффективности по учебной группе. Оценки средних значений величин Ё по группе п курсантов
— 1 п
Е = -ХС, п7=1
где С, - оценка ,-го курсанта.
Оценка дисперсии 52 величин по группе из п курсантов
S2 =-
n -
7 Е (C - E)2
1 i-1
Оценка обобщенного показателя обученно-сти у по m видам действий (работ) вычисляется по формуле
1 n m
y=-ЕЕ ЕС, mnti
где Cij - оценка, полученная i-м обучаемым за j-й вид деятельности (работы).
Вычисление статистических оценок величин сопровождается расчетом доверительных интервалов для их значений при заданной доверительной вероятности 1 - а, т. е. вероятность того, что по оценке величины будет сделано правильное заключение о ее принадлежности
и доверительному интервалу. Значение доверительной вероятности обычно принимают равным 0,95 (95 %).
Границы доверительных интервалов вычисляются по приведенным ниже формулам с использованием табличных значений доверительной вероятности. Параметр Е - среднее значе-
2
ние при известной дисперсии о
E + UаE < E + Ui_a/2"^,
\]n \ n
где Ё - точечная оценка среднего по n курсантам; Uа/2 и U1-a/2 - табличные значения функции нормированного нормального распределения;
U =J-
U а/2 = Т2Л
а/2
du;
Ui-
а/2
1 ад u
^ |e 2 du.
1-а/2
Параметр Ё - среднее при неизвестном о2
S
n—1, а/2 Г~
Vn
S
-1,1-а/2 1—,
-v/n
где ^ - табличные значения распределения студента для (п - 1)-х степеней свободы при заданной доверительной вероятности.
Разность средних значений двух результатов Е] - Е2, полученных для групп из щ и п2 курсантов, при известных:
_2 2.
С1 = С2;
1 . 1
Ei - E2 + Uа/2а I— + — < E - E <
< E1 - E2 + Ul-a/2^11 + -1.
То же при неизвестных с,2 и с 2
E1 - E2 +t
П1+ПЛ-2-а/2 P
SD I— + — < e, - E2 <
< E - E +1
2 ^ 'n, +n,-2,1-а/2
s i—+
где SP =
(n, - 1)Si2 + (n2 - 1)S2
n + n2 - 2
Предлагаемые критерии и показатели эффективности военно-профессиональной подготовки были положены в основу разработки мо-дульно-рейтинговой системы оценки военно-профессиональной подготовки курсантов, методики рейтинговой оценки труда профессорско-преподавательского состава.
При проведении педагогических экспериментов по определению эффективности новых форм и методов тактико-специальной подготовки использованы специальные методики.
Рассмотренные критерии и показатели были использованы также при разработке Положений и других инструктивных документов по оценке качества учебной и методической работы кафедр и военных факультетов.
1
u
e
-ад
Практика показала, что для полной объективной оценки военно-профессиональной подготовки в ходе инспекторских проверок, а также при проведении педагогический экспериментов целесообразно использовать и средние величины. Они представляют собой обобщенную характеристику качественно однородной совокупности явлений по определенному количественному признаку. Средние величины обычно применяют в тех случаях, когда необходимо дать объективную квантитативную успеваемость курсантов, уровня их профессиональной подготовленности, определить, какой вариант учебного плана, методической системы дает лучший результат по сравнению с другим, сколько случайного в этих результатах и т. д. В педагогическом исследовании могут применяться различные виды средних величин: средняя арифметическая, средняя геометрическая, медиана и мода.
Наиболее распространенным видом средней величины является средняя арифметическая. Она применяется в том случае, если между определяющим свойством и данным признаком имеется прямо пропорциональная зависимость (например, при улучшении показателей боевой работы каждого номера расчета). Средняя арифметическая представляет собой частное от деления суммы величин на их число и вычисляется по формуле
х = -
где х1, х2, х3,..., хп - результаты отдельных наблюдений; п - количество наблюдений.
Типичность и показательность средней арифметической подтверждает специальный показатель - среднеквадратичное отклонение, являющееся мерой колебаний численных зна-
чений признака, из который выводится средняя величина. Вычисление этого показателя происходит путем возведения в квадрат отклонений каждого значения ряда от средней, деления суммы квадратов на число членов ряда с последующим извлечением квадратного корня из полученного среднеквадратичного отклонения
с =
I (х - х)2
где о - среднеквадратичная.
Средняя арифметическая и средняя квадратичная ошибки являются массовыми характеристиками полученных результатов наблюдений. Они позволяют обобщить накопленные данные, сравнить их, установить преимущества одной методической системы, программы перед другой.
ВЫВОДЫ
Проведенный анализ и систематизация структурных критериев и показателей эффективности военно-профессиональной подготовки и разработка новых на основе современных требований к подготовке офицерских кадров и работе военно-учебных заведений позволяет более объективно и всесторонне оценивать эффективность работы преподавателей военно-учебного заведения, качества военного образования. С использованием рассмотренных критериев представляется возможным определить ключевые компетенции и интегральные компетентности в основных видах деятельности военных кадров: организационно-боевой, технико-эксплуатационной, административно-управленческой и воспитательной.
Поступила 30.05.2008
п
х
Х1 + Х2 Х3 ... Хп
г=1
п
п
