Оценка и сертификация электронных дидактических средств

Материал из IrkutskWiki
Перейти к: навигация, поиск

Современный этап развития общества характеризуется бурным развитием информационных технологий. Причем разработка новых аппаратных средств информационных технологий сопровождается появлением целой серии более совершенных программных инструментальных средств. Существующий уровень инструментальных средств, предназначенных для создания прикладного программного обеспечения, позволяет обеспечить разработку программных средств образовательного назначения (ПС ОН) даже не имея обширных познаний в области программирования. Особенно наглядно эта тенденция просматривается в области создания новых инструментальных средств разработки мультимедиа-приложений, в том числе и в сетях.

В нашей стране существует достаточно много фирм, занимающихся разработкой программного обеспечения для системы образования. Среди них есть общепризнанные лидеры, осуществляющие массовый выпуск программных средств по самым разным учебным дисциплинам, такие как: «1С», «NMG», «Кирилл и Мефодий», «Интеллект - Сервис», «Физикон», «Новый диск». Многие учебные заведения самостоятельно занимаются разработкой программного обеспечения, в том числе и ПС ОН. Но среди всего разнообразия программной продукции на современном рынке качественных ПС ОН недостаточно. Это объясняется тем, что ни в нашей стране, ни за рубежом не создана целостная и достаточно эффективная система оценки качества ПС ОН. Под термином «качество» ПС ОН здесь и ниже будем понимать совокупность свойств ПС ОН, определяющих его пригодность для использования в обучении школьников и студентов по преподаваемой дисциплине.

Международные стандарты, такие как стандарты серии ISO 9000, не учитывают специфику современного программного обеспечения для системы образования и мало пригодны для практического использования. ПС ОН не входят в перечень товаров и услуг, подлежащих обязательной сертификации. Сертификацию ПС ОН осуществляют несколько испытательных лабораторий «Системы добровольной сертификации средств и систем в сфере информатизации (РОСИНФОСЕРТ)», но ее нормативная база не является совершенной, поскольку не регламентирует состав и значения основных характеристик качества ПС ОН и методы их оценки, не отражает технологию проведения экспертизы. Технология оценки качества является той основой, на которой строится вся экспертиза системы сертификации ПС ОН. В настоящее время сдерживание темпов развития экспертизы и сертификации ПС ОН происходит именно из-за отсутствия теории оценки качества ПС ОН.

Программы информатизации образования России включали такие направления исследований, как разработка теоретических основ оценки качества программных средств, создание органов по их сертификации, развитие системы сертификации программного обеспечения для системы образования. Тема оценки качества ПС ОН являлась предметом обсуждения круглых столов в Комитете при Президенте по информационной политике и Госкомсвязи России, на втором международном конгрессе ЮНЕСКО, и различных научных конференциях.

В педагогической науке существуют методы, пригодные для оценки качества ПС ОН: экспериментальная оценка, экспертная оценка, комплексная оценка, получившая в ряде работ название экспертно-аналитической оценки качества ПС ОН. Так, экспериментальная оценка качества ПС ОН осуществляется методами педагогического эксперимента. Для постановки и организации экспериментальной оценки качества ПС ОН можно использовать работы по теории и практике проведения педагогического эксперимента Архангельского СИ., Бабанского Ю.К., Беляевой А.П., Грекулова А.Г., Грабаря М.И., Ильиной Т.А., Краснянской К.А., Пискунов А.И. и др. Правильно поставленный сравнительный педагогический эксперимент позволяет в настоящее время обеспечить наибольшую достоверность оценки качества ПС ОН.

Большинство ПС ОН, поступающих на рынок программных средств, в той или иной мере проходят апробацию в реальных условиях обучения. На практике часто оказывается так, что разрабатывают методику эксперимента, организуют и проводят педагогический эксперимент те же специалисты, которые участвуют в создании программного средства. Они часто идут по пути упрощения педагогического эксперимента. Поэтому допускаются методические погрешности и искажения результатов эксперимента, в том числе и в рекламных целях, поскольку за достоверность его результатов разработчики никакой ответственности не несут.

В последнее десятилетие в педагогической науке большое внимание уделяется экспертным методам оценки педагогических исследований и разработок, в том числе и ПС ОН. Разработаны методологические основы использования экспертных методов в педагогических исследованиях, ориентированные на использование программных средств (Марченко Е.К., Михеев В.И., Полонский В.М., Черепанов B.C.), определены основные методические цели, которые наиболее эффективно реализуются с использованием ПС ОН. Разработана типология программных средств по функциональному и методическому назначению, дидактические требования к ПС ОН, сформулированы основные положения экспертно-аналитической деятельности по оценке качества ПС ОН и анализа их педагогической целесообразности (Роберт И.В., Кузнецов А.А., Сергеева Т.А. и др.).

Сформированы теоретические основы разработки технологии применения программно-методических средств в учебном процессе общеобразовательной школы (Софронова Н.В., Зайнутдинова Л.Х.). Разработаны также психологические основы организации диалога учащегося с ИКТ (Горелов И.Н., Машбиц Е.И., Тихомиров O.K.). Успешно развивается Система добровольной сертификации средств и систем в сфере информатизации РОСИНФОСЕРТ, разработаны организационно-методические документы этой системы (Позднеев Б.М., Шахин В.П.). Вопросы практического использования экспертных методов для проведения сертификационных испытаний ПС ОН отражены в работах Ваграменко Я.А., Галкиной А.И., Роберт И.В.

Вместе с тем, в настоящее время отсутствуют работы, ориентированные на комплексный подход решения проблемы оценки качества ПС ОН и на создание технологии их оценки. Недостаточно разработаны основные вопросы теории оценки качества. Такие вопросы, как критерии оценки и характеристики качества до недавнего времени были мало исследованы и достаточно спорны. Это является причиной сложностей при организации и проведении экспертизы ПС ОН, вынесении экспертных заключений, особенно в пограничных областях оценок.

В качестве базового метода исследования использовался итерационный метод, получивший название метода последовательного приближения решения задачи оценки качества ПС ОН.

В теории информации хорошо известны подобные методы для решения технических задач. Суть его состоит в следующем. На первом этапе отбирается и детально анализируется большой объем теоретической информации на пригодность для решения проблемы исследования. На основании этой информации формируется базовая модель оценки и направления дальнейшего углубления модели. Это первое приближение решения задачи. На следующем этапе осуществляется виток последовательного приближения решения задачи. Идет наращивание модели оценки, устанавливаются и уточняются критерии оценки, уточняются основные направления решения поставленной задачи.

На последующих этапах идет разбиение критериев оценки качества ПС ОН на характеристики качества, формирование системы оценки качества ПС ОН, уточнение групп характеристик качества и их параметров.

На последнем этапе осуществляется окончательная адаптация системы оценки качества к конкретным условиям работы, отработка технологии экспертизы качества ПС ОН и уточнение характеристик оценки, их граничных и ориентировочных параметров применительно к рационализации технологии экспертизы.

Научная новизна определяется предложенным в исследовании системном подходе к решению проблемы оценки качества ПС ОН, реализованным в разработке: - метода исследования, основанного на методе итераций и базовой модели - информационно-кибернетической модели учебного процесса с использованием средств ИКТ ОН, отличающейся от известных моделей тем, что она обеспечивает исследование информационных процессов в обучении и выявление факторов, влияющих на усвоение учебной информации с позиций таких наук, как педагогика, психология, психофизиология, инженерная психология, теория информации, квалиметрия, эргономика;

- комплексной модели учебного процесса с использованием средств ИКТ ОН, отличающейся от ранее известных тем, что она включает в себя информационно-кибернетическую модель учебного процесса (обеспечивающую исследование информационных процессов в обучении и факторов, влияющих на усвоение учебной информации), учитывает основные дидактические требования к ПС ОН, психолого-физиологические и возрастные особенности восприятия информации, санитарно-гигиенические требования и нормы работы с вычислительной техникой, эргономические характеристики ПС ОН и позволяет выделить основные критерии и характеристики оценки качества ПС ОН; 

- требований к системе оценки качества ПС ОН, разработанных на основе теории экспертных суждений и принятия решений экспертом, и требований к организации экспертизы и порядку ее проведения, разработанных на основе нормативных документов, регламентирующих деятельность государственных учреждений, занимающихся экспертизой и сертификацией ПС ОН, позволивших сформировать группы характеристик оценки качества, их граничные и ориентировочные параметры.


Содержание главы:

  1. Оценка и сертификация электронных дидактических средств. Критерии оценки дидактических, эргономических, психолого-педагогических, технологических качеств электронных средств учебного назначения
  2. Требования к ППС
  3. Требования к ОЭИ
  4. Оценка качества образовательных электронных изданий и ресурсов