Важное значение имеет реализация третьей миссии университета, а именно: содействие социально-экономическому развитию общества, особенно в регионах, где университеты функционируют, создавая, внедряя, и распространяя новые знания, устанавливая прямые взаимосвязи с регионом и всеми его составляющими, что, в свою очередь, служит основанием для развития самого образования, основанного на проектах по решению реальных проблем [1]. Одной из таких проблем является обеспечение качества информационных систем в образовании людей с ограниченными возможностями. В современных условиях пандемии такой анализ является весьма актуальным. Цифровая трансформация системы образования способствует повсеместному распространению массовых открытых образовательных ресурсов (MOOC, MOOC – Massive Open Online Courses), способных транслировать лучшие образовательные практики в любую точку мира [2].
Одной из массовых целевых категорий пользователей таких систем являются люди с ограниченными возможностями здоровья (ОВЗ), осваивающие профессиональные образовательные программы непосредственно по месту жительства [3]. Однако наличие барьеров информационного доступа вследствие имеющихся у человека нарушений является серьезным препятствием для использования онлайн-ресурсов в инклюзивной образовательной практике. Так, по результатам мониторинга обеспечения доступности ведущих интернет-ресурсов Рунета [4], ни одна из протестированных платформ не выполняет требований минимального уровня доступности международных стандартов. В качестве типичных ошибок доступности отмечаются отсутствие альтернативных представлений для графического и мультимедийного контента (например, альтернативного текста для изображений, отсутствие титров и описания для аудио-, видеоконтента), нарушение правил оформления ссылок, заголовков, навигационных панелей, форм ввода данных, наличие временных ограничений на странице и многое другое. Эти ошибки распространяются в том числе и на ресурсы образовательного назначения.
В этой связи доступность образовательных систем предлагается рассматривать как одну из базовых характеристик потребительского качества при их использовании в обучении людей с ограниченными возможностями. Целью данного исследования является разработка моделей и методов комплексной оценки уровня доступности таких систем.
Интегральная модель оценки доступности образовательного контента
Доступность (accessbility) определяется в международном стандарте ISO/IEC 25010 [5] как характеристика качества программного обеспечения (ПО), которая отражает способность программной системы поддерживать работу людей с ограниченными возможностями.
Основываясь на многоуровневой модели качества программного обеспечения международного стандарта ISO 9126 [6], можно построить трехуровневую модель оценки доступности. В этой модели на верхнем уровне представлена рассматриваемая характеристика качества (цель) – доступность программной системы, включающая четыре базовые подхарактеристики. Критерии доступности определяют уровень атрибутов, необходимых для достижения цели (доступности), а их количественные характеристики – уровень метрик.
Рассматриваемые в модели меры и их метрики классифицированы по четырем принципам доступности в соответствии с международным стандартом WCAG (Web Content Accessbility Guidelines, версии 2.0-2.1) [7; 8]. Они неравнозначны, то есть могут оказывать различное влияние на возможность полноценного доступа к информации в зависимости от степени выраженности нарушения. Степень важности каждой меры в процессе интегрированной оценки доступности ресурса можно учитывать, используя весовые коэффициенты.
Таким образом, для получения интегральной характеристики доступности необходимо осуществить выбор весовых коэффициентов в зависимости от значимости каждой меры для конкретной характеристики (подхарактеристики). После этого значения подхарактеристик, характеристик и интегральной оценки доступности могут быть получены в соответствии с формулами, предложенными в [9].
Многоуровневая модель оценки доступности ПО
Интегральная оценка j-й подхарактеристики i-й характеристики Sij качества равна
(1)
где Mjk – значение k-й меры j-й подхарактеристики, – значение весового коэффициента меры Mjk.
Интегральная оценка i-й характеристики качества вычисляется по формуле
(2)
где – значение весового коэффициента каждой подхарактеристики.
Тогда интегральная оценка доступности аналогичным образом определяется по формуле
(3)
где – весовые коэффициенты каждой характеристики.
Весовые коэффициенты выбираются таким образом, чтобы ,
,
.
Выбор числовых критериев для измерения доступности может быть выполнен на основе актуальной нормативной базы. В работе [10] сформирован и классифицирован перечень требований информационной доступности веб–контента, выполненный на основе международного стандарта веб-доступности WCAG и отечественного ГОСТ Р. 52872-2012 [11]. На их основе выделены и классифицированы по различным видам нарушений критерии, наиболее значимые при построении архитектуры веб-ориентированных образовательных систем, построена модель инклюзивного образовательного ресурса. Вес каждого критерия установлен исходя из его значимости для определенной степени тяжести рассматриваемого нарушения.
Нечетко-логические методы оценки доступности
Наличие большого количества разновесных входных параметров с высокой долей неопределенности предполагает целесообразность привлечения аппарата нечеткой логики, в особенности когда необходимо принимать управленческие решения [12; 13]. Результатом оценки в данном случае является принадлежность полученных значений характеристики некоторому множеству или системе множеств.
В настоящей работе предложена методика комплексной оценки доступности веб-ориентированной образовательной системы на основе стандартных нечетких 5-точечных [0,1]-классификаторов. Комплексная оценка доступности формируется на основе нечетко-множественного агрегирования соответствующих оценок доступности для четырех базовых категорий нарушений: слуха, зрения, опорно-двигательного аппарата (ОДА), ментальной сферы. Значимость отдельных критериев и показателей доступности учитывается за счет весовых коэффициентов. В соответствии с общим алгоритмом нечетко-множественный анализ доступности выполняется в несколько этапов.
На первом этапе вводятся в рассмотрение лингвистические переменные gi (i = 1..4), соответствующие комплексной оценке доступности контента для лиц 4 категорий нарушений, g – комплексная оценка доступности контента в целом. Универсальным множеством для каждой лингвистической переменной служит отрезок [0,1], а множеством значений всех пяти переменных g1, g2, g3, g4, g – терм-множество . Здесь G1 – «полная недоступность», G2 – «низкий», G3 – «средний», G4 – «достаточно высокий», G5 – «высокий » уровни доступности для каждого вида нарушений.
Для каждого из термов задается трапециевидная функция принадлежности (табл. 1), в соответствии с теорией стандартных пятиуровневых нечетких [0,1]-классификаторов.
Таблица 1
Функции принадлежности подмножеств терм-множества G
Терм Gi |
Функция принадлежности нечеткого множества Gi |
G1 |
|
G2 |
|
G3 |
|
G4 |
|
G5 |
|
На втором этапе выделяются критерии доступности по каждому виду нарушений. Учитывая, что показатели неравновесны (оказывают разное влияние на уровень доступности ресурса), ранжируется их важность за счет весовых коэффициентов kij ().
На третьем этапе выполняется расчет значений xi (i = 1..N) каждого показателя. Значение xi (0 ≪ xi ≪ 1) представляет собой долю элементов образовательного контента, для которых исследуемый критерий выполняется относительно общего количества исследованных элементов.
На четвертом этапе осуществляется переход от числовых значений показателей к числовым значениям оценок. Правило перехода от значений показателей xi к весам термов лингвистических переменных gi имеет вид:
(5)
(6)
где ki – весовые коэффициенты показателей, – середины промежутков, являющихся носителями термов, μik(xk) – значения функций принадлежности, рассчитанные для числовых показателей.
На пятом этапе осуществляется лингвистическое распознавание полученных числовых оценок в соответствии с определением терм-множества .
С использованием предложенной методики выполнена оценка доступности нескольких национальных массовых открытых образовательных платформ (табл. 2).
Таблица 2
Комплексная оценка доступности образовательных платформ
В табл. 3 представлены значения оценок по каждому виду нарушения, а также их интерпретация с определением границ применимости системы в обучении различной категории лиц с инвалидностью. Градация тяжести нарушений выполнена на основе международных классификаций зрительных и слуховых нарушений [14].Таблица 3Значения комплексных оценок доступности и их интерпретация
g1 |
Терм |
g2 |
Терм |
g3 |
Терм |
g4 |
Терм |
g |
Терм |
|
Открытое образование |
0,885 |
G5 |
0,561 |
G3 |
0,625 |
G4 |
0,657 |
G4 |
0,622 |
G4 |
Интернет-университет «Интуит» |
0,315 |
G2 |
0,379 |
G3 |
0,377 |
G2 |
0,343 |
G2 |
0,337 |
G2 |
Stepik |
0,441 |
G3 |
0,354 |
G2 |
0,503 |
G3 |
0,562 |
G3 |
0,408 |
G3 |
Лекториум |
0,315 |
G2 |
0,312 |
G2 |
0,314 |
G2 |
0,390 |
G2 |
0,320 |
G2 |
Универсариум |
0,315 |
G2 |
0,308 |
G2 |
0,314 |
G2 |
0,390 |
G2 |
0,320 |
G2 |
Нарушения |
Слуха |
Зрения |
Моторные |
Ментальные |
||||||
Образовательная система |
Терм |
Уровень, границы |
Терм |
Уровень границы |
Терм |
Уровень |
Терм |
Уровень |
||
Открытое образование |
G5 |
высокий, без ограничений |
G3 |
средний, острота зрения не менее 0,3 |
G4 |
достаточно высокий |
G4 |
достаточно высокий |
||
Интернетуниверситет «Интуит» |
G2 |
низкий, только для I степени тугоухости |
G2 |
низкий, острота зрения не менее 0,7 |
G2 |
низкий |
G2 |
низкий |
||
Stepik |
G3 |
средний, I-II степень тугоухости |
G2 |
средний, острота зрения не менее 0,3 |
G3 |
средний |
G3 |
средний |
||
Лекториум |
G3 |
низкий, только для I степени тугоухости |
G2 |
низкий, острота зрения не менее 0,7 |
G2 |
низкий |
G2 |
низкий |
||
Универсариум |
G3 |
низкий, только для I степени тугоухости |
G2 |
средний, острота зрения не менее 0,3 |
G2 |
низкий |
G2 |
низкий |
По результатам исследований, достаточно высокий уровень доступности демонстрирует только платформа «Открытое образование». Остальные платформы показывают низкую доступность, препятствующую их полноценному использованию в инклюзивной образовательной практике. Низкая доступность всех ресурсов для лиц с поражением зрения затрудняет их использование в обучении лиц с практической и абсолютной слепотой.
Выводы
Оценка качества информационных систем в образовании людей с ограниченными возможностями предполагает анализ их доступности. Предложенные модели и методы направлены на формирование комплексной оценки доступности на основе оценок по различным видам нарушений. Эти оценки позволяют выявить имеющиеся проблемы доступности, а также обозначить границы применимости образовательного ресурса для лиц с ограничениями различной степени тяжести, способствовать выбору оптимального образовательного инструмента, наиболее учитывающего индивидуальные особенности и ограничения обучающегося.