Scientific journal
Fundamental research
ISSN 1812-7339
"Перечень" ВАК
ИФ РИНЦ = 1,674

MODELS AND METHODS OF EVALUATING ACCESSIBILITY OF WEB-ORIENTED EDUCATIONAL SYSTEMS

Kramarov S.O. 1 Tishchenko E.N. 2 Arapova E.A. 2
1 Surgut State University
2 Rostov State University of Economics
The authors of this paper proceeded from the need to implement the third mission of the University, namely: to promote the socio-economic and cultural development of society, in which universities operate by creating, implementing, and distributing new knowledge, establishing direct relationships with the region and all its components, which, in turn, serves as the basis for the development of education itself, based on projects to solve real problems. One of these problems is ensuring the quality of information systems in the education of people with disabilities. In the current context of the pandemia, this analysis is very relevant. The economic and mathematical methods and models of complex analysis of the availability of web-oriented educational systems based on the use of fuzzy logic were considered and proposed in the paper. Based on the requirements of the quality of information systems in the education of people with disabilities, we have developed theoretical and methodological provisions for such systems of analysis. The audit and comparative analysis of the availability of popular national open educational platforms was performed, which allows us to assess the level of resource availability and the limits of its applicability, to make a reasonable choice of the optimal resource taking into account the individual characteristics of the student, including for people with disabilities, which is currently very important. The main concept used for mathematical formalization of the problem is based on the choice of economic principles calculated on the basis of fuzzy aggregation of heterogeneous sets of parameters.
software quality
accessibility
online courses
inclusive education
distance learning

Важное значение имеет реализация третьей миссии университета, а именно: содействие социально-экономическому развитию общества, особенно в регионах, где университеты функционируют, создавая, внедряя, и распространяя новые знания, устанавливая прямые взаимосвязи с регионом и всеми его составляющими, что, в свою очередь, служит основанием для развития самого образования, основанного на проектах по решению реальных проблем [1]. Одной из таких проблем является обеспечение качества информационных систем в образовании людей с ограниченными возможностями. В современных условиях пандемии такой анализ является весьма актуальным. Цифровая трансформация системы образования способствует повсеместному распространению массовых открытых образовательных ресурсов (MOOC, MOOC – Massive Open Online Courses), способных транслировать лучшие образовательные практики в любую точку мира [2].

Одной из массовых целевых категорий пользователей таких систем являются люди с ограниченными возможностями здоровья (ОВЗ), осваивающие профессиональные образовательные программы непосредственно по месту жительства [3]. Однако наличие барьеров информационного доступа вследствие имеющихся у человека нарушений является серьезным препятствием для использования онлайн-ресурсов в инклюзивной образовательной практике. Так, по результатам мониторинга обеспечения доступности ведущих интернет-ресурсов Рунета [4], ни одна из протестированных платформ не выполняет требований минимального уровня доступности международных стандартов. В качестве типичных ошибок доступности отмечаются отсутствие альтернативных представлений для графического и мультимедийного контента (например, альтернативного текста для изображений, отсутствие титров и описания для аудио-, видеоконтента), нарушение правил оформления ссылок, заголовков, навигационных панелей, форм ввода данных, наличие временных ограничений на странице и многое другое. Эти ошибки распространяются в том числе и на ресурсы образовательного назначения.

В этой связи доступность образовательных систем предлагается рассматривать как одну из базовых характеристик потребительского качества при их использовании в обучении людей с ограниченными возможностями. Целью данного исследования является разработка моделей и методов комплексной оценки уровня доступности таких систем.

Интегральная модель оценки доступности образовательного контента

Доступность (accessbility) определяется в международном стандарте ISO/IEC 25010 [5] как характеристика качества программного обеспечения (ПО), которая отражает способность программной системы поддерживать работу людей с ограниченными возможностями.

Основываясь на многоуровневой модели качества программного обеспечения международного стандарта ISO 9126 [6], можно построить трехуровневую модель оценки доступности. В этой модели на верхнем уровне представлена рассматриваемая характеристика качества (цель) – доступность программной системы, включающая четыре базовые подхарактеристики. Критерии доступности определяют уровень атрибутов, необходимых для достижения цели (доступности), а их количественные характеристики – уровень метрик.

Рассматриваемые в модели меры и их метрики классифицированы по четырем принципам доступности в соответствии с международным стандартом WCAG (Web Content Accessbility Guidelines, версии 2.0-2.1) [7; 8]. Они неравнозначны, то есть могут оказывать различное влияние на возможность полноценного доступа к информации в зависимости от степени выраженности нарушения. Степень важности каждой меры в процессе интегрированной оценки доступности ресурса можно учитывать, используя весовые коэффициенты.

Таким образом, для получения интегральной характеристики доступности необходимо осуществить выбор весовых коэффициентов в зависимости от значимости каждой меры для конкретной характеристики (подхарактеристики). После этого значения подхарактеристик, характеристик и интегральной оценки доступности могут быть получены в соответствии с формулами, предложенными в [9].

kramorov1.wmf

Многоуровневая модель оценки доступности ПО

Интегральная оценка j-й подхарактеристики i-й характеристики Sij качества равна

kram01.wmf (1)

где Mjk – значение k-й меры j-й подхарактеристики, kram02.wmf – значение весового коэффициента меры Mjk.

Интегральная оценка i-й характеристики качества вычисляется по формуле

kram03.wmf (2)

где kram04.wmf – значение весового коэффициента каждой подхарактеристики.

Тогда интегральная оценка доступности аналогичным образом определяется по формуле

kram05.wmf (3)

где kram06.wmf – весовые коэффициенты каждой характеристики.

Весовые коэффициенты выбираются таким образом, чтобы kram07.wmf, kram08.wmf, kram09.wmf.

Выбор числовых критериев для измерения доступности может быть выполнен на основе актуальной нормативной базы. В работе [10] сформирован и классифицирован перечень требований информационной доступности веб–контента, выполненный на основе международного стандарта веб-доступности WCAG и отечественного ГОСТ Р. 52872-2012 [11]. На их основе выделены и классифицированы по различным видам нарушений критерии, наиболее значимые при построении архитектуры веб-ориентированных образовательных систем, построена модель инклюзивного образовательного ресурса. Вес каждого критерия установлен исходя из его значимости для определенной степени тяжести рассматриваемого нарушения.

Нечетко-логические методы оценки доступности

Наличие большого количества разновесных входных параметров с высокой долей неопределенности предполагает целесообразность привлечения аппарата нечеткой логики, в особенности когда необходимо принимать управленческие решения [12; 13]. Результатом оценки в данном случае является принадлежность полученных значений характеристики некоторому множеству или системе множеств.

В настоящей работе предложена методика комплексной оценки доступности веб-ориентированной образовательной системы на основе стандартных нечетких 5-точечных [0,1]-классификаторов. Комплексная оценка доступности формируется на основе нечетко-множественного агрегирования соответствующих оценок доступности для четырех базовых категорий нарушений: слуха, зрения, опорно-двигательного аппарата (ОДА), ментальной сферы. Значимость отдельных критериев и показателей доступности учитывается за счет весовых коэффициентов. В соответствии с общим алгоритмом нечетко-множественный анализ доступности выполняется в несколько этапов.

На первом этапе вводятся в рассмотрение лингвистические переменные gi (i = 1..4), соответствующие комплексной оценке доступности контента для лиц 4 категорий нарушений, g – комплексная оценка доступности контента в целом. Универсальным множеством для каждой лингвистической переменной служит отрезок [0,1], а множеством значений всех пяти переменных g1, g2, g3, g4, g – терм-множество kram11.wmf. Здесь G1 – «полная недоступность», G2 – «низкий», G3 – «средний», G4 – «достаточно высокий», G5 – «высокий » уровни доступности для каждого вида нарушений.

Для каждого из термов задается трапециевидная функция принадлежности (табл. 1), в соответствии с теорией стандартных пятиуровневых нечетких [0,1]-классификаторов.

Таблица 1

Функции принадлежности подмножеств терм-множества G

Терм Gi

Функция принадлежности нечеткого множества Gi

G1

kram12.wmf

G2

kram13.wmf

G3

kram14.wmf

G4

kram15.wmf

G5

kram16.wmf

На втором этапе выделяются критерии доступности по каждому виду нарушений. Учитывая, что показатели неравновесны (оказывают разное влияние на уровень доступности ресурса), ранжируется их важность за счет весовых коэффициентов kij (kram17.wmf).

На третьем этапе выполняется расчет значений xi (i = 1..N) каждого показателя. Значение xi (0 ≪ xi ≪ 1) представляет собой долю элементов образовательного контента, для которых исследуемый критерий выполняется относительно общего количества исследованных элементов.

На четвертом этапе осуществляется переход от числовых значений показателей к числовым значениям оценок. Правило перехода от значений показателей xi к весам термов лингвистических переменных gi имеет вид:

kram18.wmf (5)

kram19.wmf (6)

где ki – весовые коэффициенты показателей, kram20.wmf – середины промежутков, являющихся носителями термов, μik(xk) – значения функций принадлежности, рассчитанные для числовых показателей.

На пятом этапе осуществляется лингвистическое распознавание полученных числовых оценок в соответствии с определением терм-множества kram21.wmf.

С использованием предложенной методики выполнена оценка доступности нескольких национальных массовых открытых образовательных платформ (табл. 2).

Таблица 2

Комплексная оценка доступности образовательных платформ

В табл. 3 представлены значения оценок по каждому виду нарушения, а также их интерпретация с определением границ применимости системы в обучении различной категории лиц с инвалидностью. Градация тяжести нарушений выполнена на основе международных классификаций зрительных и слуховых нарушений [14].Таблица 3Значения комплексных оценок доступности и их интерпретация
 

g1

Терм

g2

Терм

g3

Терм

g4

Терм

g

Терм

Открытое образование

0,885

G5

0,561

G3

0,625

G4

0,657

G4

0,622

G4

Интернет-университет «Интуит»

0,315

G2

0,379

G3

0,377

G2

0,343

G2

0,337

G2

Stepik

0,441

G3

0,354

G2

0,503

G3

0,562

G3

0,408

G3

Лекториум

0,315

G2

0,312

G2

0,314

G2

0,390

G2

0,320

G2

Универсариум

0,315

G2

0,308

G2

0,314

G2

0,390

G2

0,320

G2

Нарушения

Слуха

Зрения

Моторные

Ментальные

Образовательная система

Терм

Уровень, границы

Терм

Уровень границы

Терм

Уровень

Терм

Уровень

Открытое образование

G5

высокий,

без ограничений

G3

средний, острота зрения не менее 0,3

G4

достаточно высокий

G4

достаточно высокий

Интернетуниверситет «Интуит»

G2

низкий, только для I степени тугоухости

G2

низкий, острота зрения не менее 0,7

G2

низкий

G2

низкий

Stepik

G3

средний, I-II степень тугоухости

G2

средний, острота зрения не менее 0,3

G3

средний

G3

средний

Лекториум

G3

низкий, только для I степени тугоухости

G2

низкий, острота зрения не менее 0,7

G2

низкий

G2

низкий

Универсариум

G3

низкий, только для I степени тугоухости

G2

средний, острота зрения не менее 0,3

G2

низкий

G2

низкий

По результатам исследований, достаточно высокий уровень доступности демонстрирует только платформа «Открытое образование». Остальные платформы показывают низкую доступность, препятствующую их полноценному использованию в инклюзивной образовательной практике. Низкая доступность всех ресурсов для лиц с поражением зрения затрудняет их использование в обучении лиц с практической и абсолютной слепотой.

Выводы

Оценка качества информационных систем в образовании людей с ограниченными возможностями предполагает анализ их доступности. Предложенные модели и методы направлены на формирование комплексной оценки доступности на основе оценок по различным видам нарушений. Эти оценки позволяют выявить имеющиеся проблемы доступности, а также обозначить границы применимости образовательного ресурса для лиц с ограничениями различной степени тяжести, способствовать выбору оптимального образовательного инструмента, наиболее учитывающего индивидуальные особенности и ограничения обучающегося.