Научная статья на тему 'Система синтеза учебных тестов на основе формальных грамматик'

Система синтеза учебных тестов на основе формальных грамматик Текст научной статьи по специальности «Компьютерные и информационные науки»

CC BY
172
61
i Надоели баннеры? Вы всегда можете отключить рекламу.
i Надоели баннеры? Вы всегда можете отключить рекламу.
iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.
i Надоели баннеры? Вы всегда можете отключить рекламу.

Текст научной работы на тему «Система синтеза учебных тестов на основе формальных грамматик»

N

= £

ш=1

рчрт = 2

Р -Y

г т т

1 + L

та,

1 + С

1+ L

l+L

■к,

Формула (12) позволяет рассчитать чистый приведенный доход, получаемый от инвестиционного проекта, использующего заемные средства, в случае, когда поступления от инвестиционного проекта и индекс инфляции заданы нечеткими числами ¿.К-типа.

Подытоживая, отметим, что в статье описан программный пакет «Анализ эффективности ИП с привлечением заемных средств». Получена расчетная формула, позволяющая определять чистый приведенный доход в нечетких условиях на основе арифметики нечетких чисел -типа.

Для определения чистого приведенного дохода ИП в нечетких условиях можно использовать также комплексный или матричный метод выполнения операций над нечеткими числами -типа, что позволит упростить вычисления при использовании систем компьютерной математики [5].

Результаты исследования могут быть полезны в практике инвестиционного анализа.

Литература

1. Четыркин Е.М. Финансовая математика. М.: Дело, 2000. 400 с.

2. Алтунин А.Е., Семухин М.В. Модели и алгоритмы принятия решений в нечетких условиях. Тюмень: Изд-во Тюменского гос. ун-та, 2000. 352 с.

3. Нечеткие множества в моделях управления и искусственного интеллекта; [под ред. Д.А. Поспелова]. М.: Наука, 1986. 312 ^

4. Курант Р., Роббинс Г. Что такое математика? М.: МЦНМО, 2001. 568 с.

5. Усков А.А., Киселев И.А. Комплексный и матричный методы выполнения арифметических операций над нечеткими числами // Управление большими системами. М.: ИПУ РАН, 2012. Вып. 40. С. 96-107.

6. Дюбуа Д., Прад А. Теория возможностей. Приложение к представлению знаний в информатике. М.: Радио и связь, 1990. 288 с.

7. Кучарина Е.А. Инвестиционный анализ. СПб: Питер, 2006. 160 с.

8. Непомнящий Е.Г. Инвестиционное проектирование. Таганрог: Изд-во ТРТУ, 2003. 262 с.

9. Пытьев Ю.П. Возможность. Элементы теории и применения. М.: ЭдиториаЛ. УРСС, 2000. 192 с.

10. Пытьев Ю.П. Возможность как альтернатива вероятности. Математические и эмпирические основы, применение. М.: Физматлит, 2007. 464 с.

11. Усков А.А., Кузьмин А.В. Интеллектуальные технологии управления. Искусственные нейронные сети и нечеткая логика. М.: Горячая Линия-Телеком, 2004. 143 с.

References

1. Chetyrkin E.M., Finansovaya matematika [Financial math.], Moscow, Delo, 2000, 400 p.

2. Altunin A.E., Semukhin M.V., Modeli i algoritmy prinyatiya resheny v nechetkikh usloviyakh [Models and algorithms for decision making under fuzzy conditions], Tyumen, Tyumen State Univ., 2000, 352 p.

3. Pospelov D.A., Nechetkie mnozhestva v modelyakh upravleniya i iskusstvennogo intellekta [Fuzzy sets in control models and artificial intelligence], Moscow, Nauka, 1986, 312 p.

4. Kurant R., Robbins G., Chto takoe matematika? [What is mathematics?], Moscow, Moscow Center for Continuous Math. Education, 2001, 568 p.

5. Uskov A.A., Kiselev I.A., Upravlenie bolshimi sistemami, [Management of large systems], Moscow, ICS RAS, 2012, Vol. 40, pp. 96-107.

6. Dyubua D., Prad A., Teoriya vozmozhnostey. Prilozheniya kpredstavleniyu znaniy v informatike [Possibility theory. Appliances to representation knowledge in informatics], Moscow, Radio i svyaz, 1990, 288 p.

7. Kucharina E.A., Investitsionny analiz [Investment analysis], St. Petersburg, PITER, 2006, 160 p.

8. Nepomnyashchy E.G., Investitsionnoe proektirovanie [Investment project development], Taganrog, Taganrog State Univ. of Radioengineering, 2003, 262 p.

9. Pytyev Yu.P., Vozmozhnost. Elementy teorii i primeneniya [Possibility. The elements of theory and appliance], Moscow, EditoriaL, URSS, 2000, 192 p.

10. Pytyev Yu.P., Vozmozhnost kak alternativa veroyatnosti. Matematicheskie i empiricheskie osnovy, primenenie [Possibilities as the alternative of probability. Math and empiric basics, appliance], Moscow, Fizmatlit, 2007, 464 p.

11. Uskov A.A., Kuzmin A.V., Intellektualnye techno-logii upravleniya. Iskusstvennye neyronnye seti i nechetkaya logika [Intelligent management engineering. Artificial neural networks and fuzzy logics], Moscow, Goryachaya Liniya-Telekom, 2004, 143 p.

1

p

1

m=1

УДК 004.896:519.767.6

СИСТЕМА СИНТЕЗА УЧЕБНЫХ ТЕСТОВ НА ОСНОВЕ ФОРМАЛЬНЫХ ГРАММАТИК

(Исследования выполняются по 2-му этапу ГК№ 02.740.11.0625 в рамках ФЦП «Научные и научно-педагогические кадры инновационной России» на 2009-2013 гг., лот № 2010-1.1-113-025, шифр заявки № 2010-1.1-113-025-043)

А.Н. Швецов, д.т.н., профессор, декан; Ю.О. Мамадкулов, ассистент; С.И. Сорокин, ассистент (Вологодский государственный технический университет, ул. Ленина, 15, г. Вологда, 160000, Россия, [email protected], [email protected], [email protected])

Рассматривается метод генерации обучающих тестов и тестовых заданий, использующий продукционный формализм на основе канонических исчислений Поста. Поддерживаются контекстно-свободные, контекстно-зависимые

и произвольные грамматики по классификации Хомского. Описание правил в грамматике осуществляется в традиционной нотации Бэкуса-Наура. Расширения синтаксиса позволяют использовать объекты мультимедиа (изображения, аудио- и видеофайлы), вычисляемые формулы (синус, косинус, умножение, деление и т.д.) и форматирование текста. Возможно создание различных типов тестов. Экспорт тестовых заданий поддерживается в различных форматах: RTF, HTML, SSI, BIN. Имеются как печатные форматы, так и исполняемые в обучающих системах. Созданная система синтеза поддерживает многопоточную генерацию и удобный редактор правил грамматик. При этом система позволяет проводить учебные занятия по изучению формальных грамматик.

Ключевые слова: грамматика, исчисления Поста, БНФ, тестовые задания, дистанционное обучение, система генерации.

EDUCATIONAL TESTING SYNTHESIS SYSTEM BASED ON FORMAL GRAMMAR ShvetsovA.N., Ph.D., professor, dean; Mamadkulov Yu.O., assistant; Sorokin S.I., assistant (Vologda State Technical University, Lenin St., 15, Vologda, 160000, Russia, [email protected], [email protected], [email protected]) Abstract. The article considers the method of generating training tests and test tasks using production formalism based on the canonical Post calculations. There are following Chomsky classification grammars: context-free, context-sensitive and arbitrary grammar. The description of grammar rules are in traditional notation Backus-Naur Form. Syntax extending allows using multimedia objects (images, audio and video files), calculated formula (sine, cosine, multiplication, division, etc.) and text formatting. Different types of tests creation is possible. Tests export is supported in a variety of formats: RTF, HTML, SSI, BIN. There are printed formats and executable formats in training systems. Synthesis system supports multi-threaded generation and convenient grammar editor. This system allows providing trainings with formal grammars studying. Keywords: grammar, Post calculations, BNF, tests, distance learning, generation system.

Автоматизация обучения является очень важной задачей. Имеется множество разработок компьютерных учебных комплексов с различными методами тестирования и обучения. Эти методы могут быть как простыми, реализованными на основе простых шаблонов и жестких структур, так и сложными - на основе адаптивных систем с нейронными сетями и применением онтологий [1]. При обсуждении данного вопроса мало внимания уделяется работе специалиста, составляющего курсы обучения [2]. Для решения проблем автоматизации труда преподавателя по составлению учебного материала был разработан эффективный метод синтеза учебных материалов, применяемый в инструментальной интеллектуальной программной системе (ИИПС).

Для описания метода синтеза учебных тестов используется продукционный формализм на основе канонических исчислений Поста [3]. Продукции наряду с фреймами, формальными логическими моделями и семантическими сетями являются наиболее популярным средством представления знаний в интеллектуальных системах, которые, с одной стороны, близки к логическим моделям, что позволяет организовывать на них эффективные процедуры вывода, а с другой - более наглядно, чем классические логические модели, отражают знания. В продукциях отсутствуют жесткие ограничения, характерные для логических исчислений, что дает возможность изменять интерпретацию элементов продукции [4].

В нашей стране продукционные системы и исчисления развивались С.Ю. Масловым, Н.А. Шаниным, В.Е. Кузнецовым, М.И. Кратко. Разработанный метод является вариантом практического приложения канонических исчислений Поста к построению произвольного типа тестовых заданий, инвариантных к ПО и виду изучаемой технической дисциплины.

Общая структура генерируемых тестов может

п

быть представлена формулой = II. где

1=1

Б,={Ьц, Ь/2, ..., Ь/а/} - подмножество вопросов /'-го вида; а/ - количество вопросов /-го вида в подмножестве В/,, = X - общее количество во-

1=1

просов в данном тесте.

Вопросы каждого типа необходимо распределить по подтипам так, чтобы один и тот же подтип по возможности не повторялся в данном тесте. Поэтому строим исчисление вида К=(А, Р, А0, л), где А - алфавит исчисления; Р - алфавит переменных; А0 - аксиома исчисления; л - множество правил вывода.

Алфавит исчисления А={Ы^2}, где N - алфавит нетерминальных символов; 2 - алфавит вспомогательных символов. В множество N включены нетерминалы К/, обозначающие структуру вопрос-ответ /-го типа, и П обозначающие множество правил вывода для /-го типа и нетерминалы подтипов ^ возможно, с индексной последовательностью произвольной длины. Алфавит 2={|, (, ), [, ], #, /,], ..., у}. Алфавит переменных Р={р, q, Ф, а, ру, ръ, ре}. Символы алфавитов интерпретируются следующим образом: | - элементарный конструктивный элемент, используемый для организации унарных счетчиков; (, ) - скобки для обозначения состояния счетчика; [, ] - скобки для обозначения элементов множества правил вывода; # - разделитель для формирования структуры посылок и следствий; /,], ..., у - индексная последовательность, показывающая уровень и тип вложенности подтипа; р - левая часть последовательности подтипов; q - правая часть последовательности подтипов; Ф - переменная, обозначающая текущее состояние счетчика подтипов; а/ - пере-

менная, обозначающая начальное состояние счетчика подтипов; ру - переменная, обозначающая исключаемое правило из множества П,; рь, ре - оставшиеся правая и левая (относительно ру) части множества П, .

Аксиома исчисления A0 будет иметь вид

A=V|(а1) ц |("2) п2 #...#rk|(Л) п ,

где П,-={рй, р,2, ..., р f}, f - количество правил вывода для типа -. Структура F, | (ж)[П,], расположенная между разделителями #...#, обозначает, что в генерируемый тест будет включено а, заданий, генерируемых в соответствии со структурой вопрос-ответ i-го типа, при этом а, может быть больше, меньше или равно f,.

Множество правил вывода л построено с исключениями примененных правил из множеств П,. Начало раскрытия типа , моделируется правилами

вида

I (ai-1) ,

которых будет f

...#(PV. . Щ * [PbPe ]#■■■ экземпляров для каждого типа i. Далее использу-

■■■# pVt\

(Ф) [PbPi,- Pe ]#■■■

ются правила вида

...# р(РУи, V |1Ф"1)[р4р, ]#...'

которых также будет £ экземпляров для каждого типа /, причем переменная р хранит последовательность подтипов (.. ,)(РУ/^(...).

Процесс применения правил должен продолжаться до тех пор, пока не будет исчерпано либо К/|(Ф), либо множество [Пг]. Это означает, что _//<а/- и количества правил в [Пг] не хватает для введения подтипов без повторов. Завершение процесса раскрытия типа У/ в каждом случае регламентируется дополнительными правилами.

В результате применения подобных правил для всех типов в А0 (от 1 до к) получается слово вида Р1#Р2#...#РЬ

Далее при необходимости можно сформировать подтипы следующего уровня, применяя пра-

...# р(РУи )д #... вила вывода вида — ' , где РУи,у -

...# Р(РК,, Ф )9 #...

у-й подтип подтипа РУу. Такое построение можно осуществить для любого уровня вложенности.

Вывод конкретного предложения из подтипа РКу> описывается формальной грамматикой, записанной в традиционной нотации Бэкуса-Наура.

Классификация грамматик происходит по иерархии Хомского, ИИПС поддерживает три класса из этой иерархии: контекстно-свободные, контекстно-зависимые и произвольные грамматики.

Контекстно-свободные грамматики - самый простой из рассматриваемых типов. Левая часть правила должна содержать один нетерминал, правая является произвольной.

Например: <А>::=аЬ<Б>с

<Б>::=ё

Данная грамматика породит строку аЬёс.

Контекстно-зависимые грамматики - в левой части, помимо одного нетерминала, может присутствовать контекст из терминальных символов справа или/и слева. Контекст в правой части правила описывать не надо, так как при подстановке система автоматически сохраняет контекст левой части.

Например: <A>::=abe<B>ec e<B>e::=d

Данная грамматика породит строку abedec. Произвольные (неограниченные) грамматики -левая и правая части правила неограниченные, кроме одного условия: в левой части должен присутствовать хотя бы один нетерминал. Например: <A>::=abe<B><C>ztc e<B><C>zt::=eddzt

Данная грамматика породит строку abeddztc. При генерации обучающих тестов анализ и подстановка в правилах контекстно-зависимых и произвольных грамматик происходят в следующем виде. Слева направо просматривается правая часть правила на наличие нетерминалов путем сравнения значений левых частей правил (фронт правил) с нетерминалом и его контекстом, при этом ищется наибольшее покрытие контекста нетерминалов. Например, имеется следующая грамматика:

<A>::=abe<B>e45f<B>gr

e<B>e::=d

<B>::=12

В итоге получится строка abede45f12gr. В первом случае произошла подстановка правила с наибольшим именем, а не с наименьшим, во втором -подстановка правила без контекста.

Формальные грамматики различных типов предоставляют мощное средство синтеза обучающих тестов. Для повышения скорости создания тестов и качества наполнения тестовых заданий дополнительно были разработаны расширения синтаксиса правил грамматик, которые позволили работать со следующими объектами:

- мультимедиа-объекты - в тексте правил можно указывать путь до изображений, аудио- или видеоданных, которые будут вставлены в итоговый результат генерации; такие объекты ограничиваются символом # и могут также содержать элементы грамматики (нетерминалы) для более гибкого управления данным типом объектов;

iНе можете найти то, что вам нужно? Попробуйте сервис подбора литературы.

- вычисляемые выражения - математические формулы, которые можно использовать прямо в правилах грамматик; формулы могут строиться из нескольких правил и рассчитываться во время генерации, что увеличивает интеллектуальность тестов и повышает гибкость создания различных материалов, а также состоять из простых операций (сложение, вычитание, деление и т.д.), различных функций (sin, cos и т.д.), цифр, нетерминалов и иметь порядок расчета; данный объект выделяется символом $;

- стили форматирования - объект, с помощью которого можно задавать параметры отображения определенной единицы учебного материала; стили форматирования отвечают за цвет символов и фона, стили начертания текста (жирный, курсив), шрифты, размеры изображений, выравнивание объектов и т.д. ; символ & ограничивает строку, содержащую именованные параметры со значениями стилей;

- символы - строка обычных символов (текстовые и служебные), которые должны быть добавлены в содержание получаемого материала без изменений; символ @ ограничивает текстовую строку, а символ % определяет номер символа из кодовой таблицы символов.

Для облегчения разработки тестов в среде ИИПС была реализована структура файлов-хранилищ грамматик, позволяющая хранить несколько грамматик одного или разных типов в едином контейнере. Эта структура подразумевает наличие общего заголовка и нескольких информационных секций. Общий заголовок содержит информацию о теме группы грамматик, авторе, примечания и т.д. Информационные секции содержат группы (листы) грамматик различных типов, которые, в свою очередь, содержат группы правил, поделенные на разделы: тип грамматики, заголовок материала, тело материала, пояснительная часть, результирующая часть и т.д. Такая структуризация и разнородность грамматик позволяют оптимизировать работу специалиста с системой.

При генерации тестов можно использовать несколько файлов-хранилищ грамматик для получения большего количества разных вариантов генерации. Кроме правил грамматик, на процесс синтеза влияют и общие параметры генерации:

- глубина рекурсии - в правилах грамматик поддерживается рекурсия для получения большего количества вариантов генерации; рекурсию можно ограничить для предотвращения неконтролируемого разрастания содержимого тестов;

- выборка с памятью - определяет, как осуществлять отбор вариантов, описанных в правых частях правил грамматик; динамическая выборка при раскрытии нетерминалов каждый раз заново определяет выбор вариантов, при выборке с памятью (статическая выборка) - выбор вариантов при раскрытии одноименных нетерминалов осуществляется на основе первого выбора этого нетерминала;

- параметры смешивания - определяют порядок смешивания заданий, как варьировать количество вариантов ответа на задания, группировать тесты, добавлять заголовки и пр.

Помимо вышеописанной группы параметров, имеются настройки экспорта сгенерированных данных, которые позволяют задать выходные форматы файлов, то есть то, что должно получиться по окончании процесса генерации. ИИПС дает

возможность создавать учебные материалы в следующих форматах.

• Текстовый (rtf) - документ word с форматированием текста и с рисунками; необходим для подготовки печатной версии создаваемых учебных материалов и для возможности дальнейшего редактирования.

• Гипертекстовый документ (html) - как и предыдущий формат, содержит форматирование и мультимедиа-данные; необходим также для печатной версии, но при этом обладает большой плат-формонезависимостью (поддерживается многими ОС), простотой использования и предназначен в основном только для режима просмотра без редактирования.

• Гипертекстовый интерактивный документ (html и ssi) - состоит из двух документов. Первый из них - web-документ (Html), имеющий, помимо текста с форматированием и рисунками, элементы для взаимодействия с содержимым теста (кнопки, поля ввода, элементы выбора); необходим для прохождения теста непосредственно в интернет-браузере с последующей отправкой результатов на проверяющий сервер, где лежит соответствующий ssi файл. Этот файл является вторым генерируемым файлом, он содержит информацию о верных ответах и пояснения к этим ответам.

• Интерактивный файл (usf) - наиболее полноценный формат экспорта тестов, содержит все элементы форматирования текста, помимо изображения, содержит все мультимедиа-объекты (помимо изображений, видео- и аудиоданные) и интерактивные элементы управления; кроме этого, имеет интеллектуальные технологии обратной связи с тестируемым объектом. Данный формат необходим для обеспечения процесса тестирования в отдельном программном комплексе с контролем результатов и процесса выполнения.

• Бинарный файл (txt, bin, bmp и любое произвольное расширение) - содержит практически чистые данные без обертки их в структуру произвольного формата; используется для генерации произвольных бинарных данных (изображения, неформатированный текст и т.д.), при этом специалист должен знать формат создаваемого файла (см. рис.).

Пользователь при использовании среды ИИПС должен придерживаться следующего алгоритма действий. Сначала создается грамматика, на основе которой предполагается синтезировать тесты и задания. В грамматике определяются структура и содержимое тестов, в том числе все внешние объекты. Далее, если планируется использовать не только один контейнер грамматик, определяется набор файлов-хранилищ грамматик, по которым будет происходить синтез заданий. После этого задаются общие параметры генерации. Последним шагом будет указание выходных форматов получаемого материала. Среда ИИПС позволяет полу-

Учебный материал

И

Создание файла грамматик

Несколько типов грамматик в одном файле Структура разделов для правил

Т

Преподаватель

Схема генерации тестов

чать как печатные версии тестов, так и компьютерные интерактивные. Кроме того, после генерации система способна множество раз синтезировать разнообразные тесты на одном наборе файлов-хранилищ.

Как видно из вышеизложенного, ИИПС дает возможность быстро создавать множество разнообразного учебного материала, при этом среда позволяет делать тесты, учебные материалы и даже данные произвольного формата. Рассматриваемая среда разработки применяется при подготовке бакалавров и магистров в таких дисциплинах, как «Системное программное обеспечение», «Интеллектуальные информационные системы», «Системы искусственного интеллекта и принятия решений». ИИПС в данных курсах применяется и для синтеза учебного материала, и для обучения.

Данная система является очень гибкой, что позволяет легко интегрировать ее в различные среды и программные комплексы, в том числе имеется опыт интеграции в интеллектуальный агентно-ориентированный учебный комплекс [5], где для этой системы отводилась роль универсального и мощного генератора учебных заданий. В дальнейшем систему можно расширить и использовать формальные грамматики для генерации не только учебного материала, но и моделей поведения интеллектуальных агентов.

Система генерации учебного материала на основе формальных грамматик упрощает и автоматизирует создание большого количества неповторяющихся и разнообразных тестов и тестовых заданий.

Литература

1. Голосов А.О., Полотнюк И.С., Филиппович А.Ю. Информационные технологии в образовании: преимущества интеграционного подхода // Проблемы теории и практики управления. 2006. № 8. С. 64-68.

2. Brusilovsky P., Kobsa A., Neidl W. (eds.), The Adaptive Web: Methods and Strategies of Web Personalization. Lecture Notes in Computer Science, Springer-Verlag, Berlin Heidelberg NY, 2007, Vol. 4321, pp. 3-53.

3. Маслов С.Ю. Теория дедуктивных систем и ее применения. М.: Радио и связь, 1986. 136 с.

4. Сергушичева А.П., Швецов А.Н. Синтез интеллектуальных тестов средствами формальной продукционной системы // Математика/Компьютер/Образование: сб. науч. тр. М.Ижевск, R&C Dynamics, 2003. Вып. 10. Ч. 1. С. 310-320.

5. Сорокин С.И., Мамадкулов Ю.О., Швецов А.Н. Интеллектуальная система генерации учебных тестов на основе формальных грамматик: сб. тез. Всерос. конф. по результ. проект., реализованных в рамках ФЦП «Научные и науч.-педагогич. кадры инновационной России» на 2009-2013 гг. М., 2010. С. 76-78.

References

1. Golosov A.O., Polotnyuk I.S., Filippovich A.Yu., Problemy teorii i praktiki upravleniya [Problems of management theory and practice], 2006, no. 8, pp. 64-68.

2. Brusilovsky P., Kobsa A., Neidl W., The Adaptive Web: Methods and Strategies of Web Personalization. Lecture Notes in Computer Science, Vol. 4321, Springer-Verlag, Berlin Heidelberg NY, 2007, pp. 3-53.

3. Maslov S.Yu., Teoriya deduktivnykh sistem i ee primeneniya [The deductive systems theory and its appliance], Moscow, Radio i svyaz, 1986, 136 p.

4. Sergushicheva A.P., Shvetsov A.N., Matematika. Kompyuter. Obrazovanie: Sbornik nauch. trudov [Math. Computer. Education: proc.], iss. 10, part 1, Moscow-Izhevsk, R&C Dynamics, 2003, pp. 310-320.

5. Sorokin S.I., Mamadkulov Yu.O., Shvetsov A.N., Sbornik tezisov Vseros. konf. po rezultatam proektov, realizovannykh v ramkakh FTsP «Nauchnye i nauchno-pedagogicheskie kadry innovatsionnoy Rossii» na 2009—2013 gg. [Proc. of All-Russian Conf. in view of the results of projects of FTP «Scientific and educational research personnel of innovative Russia» in 2009-2013], Moscow, 2010, pp. 76-78.

УДК 004.942

ОПТИМИЗАЦИЯ СИСТЕМЫ ТЕСТОВ ПРИ КВАЛИФИКАЦИОННОМ ТЕСТИРОВАНИИ СПЕЦИАЛИСТОВ

Н.А. Бессарабов, бакалавр, инженер; Т.Н. Кондратенко, начальник лаборатории;

Д. С. Тимофеев, начальник сектора (Государственный научно-исследовательский институт авиационных систем, ул. Викторенко, 7, г. Москва, 125319, Россия, [email protected], [email protected], [email protected])

Статья посвящена исследованию процесса конструирования системы педагогических тестов при использовании критериально-ориентированного подхода. Рассмотрена зависимость точности оценивания латентных параметров при

i Надоели баннеры? Вы всегда можете отключить рекламу.