Уровень конкурентоспособности страны во многом определяет высшее образование. Сегодня налицо всплеск интереса к сравнительным оценкам внутри национальных образовательных систем и вузов мира, к глобальным рейтингам университетов мира.
В настоящее время академическое ранжирование вузов становится популярным инструментом повышения качества образовательных программ высшего образования во всем мире. Результатами академического ранжирования вузов являются различного рода рейтинги: мировые, региональные и специализированные.
Агентства, осуществляющие ранжирование вузов, исходят из того, что рейтинги, составленные ими, являются источником информации для студентов и их родителей, руководителей и профессорско-преподавательского состава вузов, представителей бизнеса, лицах, принимающим решения на национальном и международном уровнях. В то же время нет опубликованных сведений об изучении мнения общества в отношении академического ранжирования вузов.
Недостаточное знание рейтинговыми агентствами отношения общества к академическому ранжированию вузов чревато тем, что результаты ранжирования не будут востребованы обществом, так как не будут соответствовать его ожиданиям. Поэтому данная проблематика актуальна как в методологическом, так и в практическом плане.
Методика изучения мнения общества в отношении академического ранжирования вузов должна соответствовать известным методикам изучения общественного мнения и одновременно учитывать специфичность процесса академического ранжирования вузов.
Специфичность заключается в том, что при академическом ранжировании проводится не только опрос определенного сегмента общества, включающего в первую очередь профессорско-преподавательский состав вузов (опрос может и не проводиться), но и ряд других инструментариев.
К примеру, Институт высшего образования Шанхайского университета Джао Тонг «Shanghai Jiao Tong University», составляющий с 2003 года ежегодный академический рейтинг 500 ведущих университетов мира, называемый Academic Ranking of World Universities (ARWU), изучает официально опубликованные данные об университетах. А лаборатория Cybermetrics Центра информации и документации Национального исследовательского совета Испании берет исходную информацию только с сайтов вузов.
Огромное преимущество китайского и испанского глобальных рейтингов состоит в том, что не надо ни у кого запрашивать какие-либо данные, так как есть мировые доступные он-лайновые базы данных по нобелевским лауреатам, публикационной активности и цитируемости, университетским сайтам.
Необходимо учитывать и то, что пользователи рейтингов вузов имеют разные знания о высшем образовании и инструментах повышения его качества. Соответственно, при изучении их мнения нужно не забывать об этом.
Ранжирование вузов должно быть обоснованным, а качественные оценки под флагом рейтинга, когда они даются от имени некой общности, сообщества, предполагают особую тщательность, информационную обеспеченность, ответственность, осторожность, деликатность, осмотрительность. Право на такую деятельность надо заслужить и доказать, поскольку деление учебных заведений на «хорошие», «средние» и «плохие» затрагивает интересы не просто некой абстракции под названием «ВУЗ» или его администрации, но и всех сотрудников, студентов, выпускников и даже работодателей.
Например, как будут относиться работодатели к выпускникам вузов, которые вдруг попали в разряд «негативно оцениваемых профессиональным сообществом»? При этом работодатель, ознакомившийся с такой информацией в прессе или на сайте Интернета, скорее всего не будет вдаваться в такие тонкости, как: по каким критериям, кем и каким образом производилась оценка, обеспечивалась достоверность, репрезентативность и т.д. Таковы уж свойства человеческого сознания, что многие люди верят печатному слову, а тем более высказанному от имени «независимого агентства» или социологической службы, растиражированному многими изданиями.
Между тем давно известны научно обоснованные принципы ранжирования: достоверность, репрезентативность, достаточность информации, проверяемость, равноудаленность и компетентность составителей и экспертов. Есть международный опыт формулирования и изложения основных требований рейтингования вузов. Так, например, Европейский центр по высшему образованию ЮНЕСКО, Институт политики в области высшего образования создали Международную экспертную группу по ранжированию, которая сформулировала так называемые «Берлинские принципы ранжирования высших учебных заведений» (Берлин, май 2006 г.). Вот основные из них:
– «важно, чтобы составители рейтингов и табелей несли ответственность за качество своего собственного сбора данных, методологии и распространения информации»;
– должны «служить одним из разнообразных подходов к оценке высшего образования на входе, контроля внутренних текущих процессов, а также оценке высшего образования на выходе»;
– «рейтинги могут обеспечить сравнительную информацию и лучшее понимание высшего образования, но они не должны быть главными методами оценки»;
– «признавать разнообразие учебных заведений и учитывать различие миссий и целей учебных заведений»;
– «необходимы неоднократные консультации с учебными заведениями, которые ранжируются, и с экспертами, которые обеспечивают информацию для процесса ранжирования»;
– «обеспечивать ясность относительно широты информационных источников для рейтингов и данных, которые предоставляет каждый источник. Релятивность результатов ранжирования зависит от целевых групп, получающих информацию, и от источников самой информации (таких, как базы данных, студенты, профессора, работодатели)»;
– «нужно знать о возможной предвзятости и быть аккуратным»;
– «выбор данных должен быть основан на признании способности каждого показателя представлять качество… Должно быть понятно, почему показатели были включены и что они, как предполагается, должны представлять»;
– «быть прозрачными в отношении методологии, используемой в рейтингах… Эта прозрачность должна включать расчет показателей, а также источник данных»;
– «четко выделять весовые коэффициенты, присваиваемые различным показателям»;
– «уделять должное внимание этическим стандартам»;
– «ответственные за сбор и исследование данных, а также те, кто обследует сами учебные заведения, должны быть как можно более объективны и беспристрастны»;
– «использовать, по возможности, подтвержденные и проверяемые данные…, включая тот факт, что с ними согласны учебные заведения»;
– «данные, полученные по нерепрезентативной или искаженной выборке,… могут неточно представлять учебное заведение или программу и должны быть исключены»;
– «обеспечивать потребителям четкое понимание всех факторов, используемых при составлении рейтинга»;
– «составляться таким образом, чтобы исключать или сокращать ошибки в исходных данных»;
– «при правильном понимании и интерпретации они вносят вклад в определение «качества» высших учебных заведений».
Итак, какая цель преследуется, изучая отношение общества к академическому ранжированию вузов. Во-первых, выясняется важность критериев и показателей ранжирования, выбранных агентством. Во-вторых, выявляются общественные ожидания от академического ранжирования. В-третьих, устанавливается соответствие результатов ранжирования ожиданиям общества или удовлетворенность общества проведенным академическим ранжированием вузов. В-четвертых, устраняются ошибки или недочеты, допущенные при проведении ранжирования вузов.
При составлении рейтинга необходимо четко представлять себе, для кого он предназначен. Именно аудитория-цель, в конечном итоге, определяет вид рейтинга и способ представления результатов.
Как правило, основными потребителями рейтингов являются абитуриенты, желающие выбрать для себя университет и программу. И, разумеется, сами университеты являются потребителями рейтингов. При этом университеты нуждаются в подробной и многогранной информации. Очевидно, необходимо найти оптимальное соотношение, чтобы удовлетворить эти зачастую противоречивые ожидания. Ориентация на целевую потребительскую группу определяет концепцию рейтинга, показатели и способ представления результатов.
Выбор показателей имеет решающее значение при подготовке рейтинга. При этом важно понимать, что пригодность показателей во многом зависит от специфики национальной системы образования. Поэтому в одном случае определенный показатель может быть исключительно важным, но в другом оказывается практически бессмысленным.
Поэтому при выборе показателей целесообразно руководствоваться общими соображениями действенности (действительно ли показатель характеризует тот аспект, который он должен характеризовать?), надежности (свободен ли показатель от погрешности?) и возможности сравнения (является ли показатель единственным образом вне зависимости от типа программы или вуза?).
В целом если показатель включается в рейтинг, то необходимо доказать его пригодность для достижения запланированных целей (например, на основе существующих данных или на основе данных, собранных разработчиками рейтинга), т.е. его действенность, надежность и возможность сравнения. Не так уж просто однозначно определить пригодность показателей – возможны противоречивые свидетельства и мнения.
Например, показатель ЕНТ абитуриентов. Этот показатель качества вуза в течение ряда лет критикуется, поскольку отражает уровень подготовки студентов до поступления в вуз, а никак не качество знаний, которые вуз дает студентам.
Однако есть и противоположное мнение, что это действенный, хотя и косвенный показатель качества вуза, поскольку «высококачественные» вузы привлекают наиболее одаренных абитуриентов. В качестве одного из способов оценки этой способности привлекать наиболее способных студентов предлагается показатель оценок абитуриентов на вступительных экзаменах.
Возможен и другой подход к подбору показателей – с точки зрения вложений, процесса и результатов. При прочих равных условиях предпочтение отдается показателям, описывающим процесс (т.е. качество преподавания) и результаты (например, успешность трудовой деятельности выпускников вуза).
Одним из самых распространенных методов перевода выбранных показателей в формат рейтингования является метод взвешивания и суммирования. Здесь каждому показателю присваивается вес в соответствии с придаваемой ему важностью, а затем все показатели суммируются с учетом весовых коэффициентов для получения итогового балла. В зависимости от числа показателей и присвоенных им весов один из показателей может превалировать над остальными или несколько менее важных показателей могут перевесить один, но критически важный.
Для достижения вышеназванных целей необходимо сегментировать общество, так как различные группы общества имеют разные представления о высшем образовании и путях повышения качества высшего образования.
В принципе, общество можно разделить на 4 сегмента:
– абитуриенты и студенты;
– родители абитуриентов и студентов;
– преподаватели и руководители вузов;
– потенциальные работодатели для выпускников вузов.
При анализе результатов изучения мнения общества в отношении академического ранжирования вузов следует вводить весовые коэффициенты для различных сегментов общества в целевых направлениях. Так, при выяснении важности критериев и показателей академического ранжирования, вес мнения преподавателей и руководителей вузов должен быть наибольшим в связи с тем, что этот сегмент общества имеет более глубокие знания по данному вопросу.
Так же к известным методикам изучения общественного мнения можно отнести прессовый, почтовый и телефонный опросы.
Естественно, что основной массив информации должен быть получен из университетов. Поэтому в адрес отобранных вузов должны быть разосланы письма с опросными листами и инструкцией с указанием, как измерять показатели, запрашиваемые агентством.
Почтовый опрос – один из методов количественных исследований, заключающийся в рассылке анкет по заранее выбранным адресам и получении ответов по почте. При проведении почтового опроса стоит уделять особое внимание составлению Баз данных адресов, по которым будут разосланы анкеты. Лица, участвующие в опросе, должны репрезентировать изучаемую целевую группу, поэтому агентству необходимо всегда тщательно подходить к процессу формирования выборки.
Преимуществами данного метода являются:
– относительно низкая стоимость (почтовый опрос является одним из самых дешевых методов сбора информации);
– возможность использовать наглядные материалы;
– возможность получить ответы на сензитивные вопросы;
– легкость организации опроса (нет необходимости в подготовке большого штата интервьюеров, упрощенная схема контроля над их работой);
– почтовый опрос позволяет опросить жителей самых отдаленных регионов, недоступных для проведения телефонных и личных опросов.
Отдельно стоит отметить, что обычно только с помощью почтового опроса можно изучить некоторые сложнодоступные аудитории. Примером такой аудитории может являться высокодоходная группа населения, проживающая в элитных жилых комплексах. Ввиду специфики аудитории наиболее результативным представляется использование данного вида опроса.
К недостаткам почтового опроса можно отнести:
– отсутствие у респондента возможности уточнить у интервьюера вопросы;
– низкий процент возврата анкет. Однако существуют исследовательские приемы, нивелирующие данный недостаток;
– смещение выборки – проблема «самовыборки», т.е. в почтовых опросах чаще участвуют лица, располагающие свободным временем и заинтересованные в теме опроса (молодежь, либо пенсионеры, либо домохозяйки и т.п.). Оценить смещение, ориентируясь на тему опроса, часто невозможно;
– значительные временные затраты.
Также при проведении академического ранжирования разрешается использовать публичные источники информации:
– официальные сайты вузов;
– годовые отчеты вузов;
– данные агентств, специализирующихся в сборе и обработке образовательной статистики;
– различные рейтинги, в которых фигурируют в том числе и оцениваемые университеты (например, рейтинг Топ-500 суперкомпьютеров мира);
– записи наукометрической БД Scopus;
– данные поисковой системы Google.
Современная методика ранжирования вузов Казахстана по специальностям бакалавриата полностью основана на Берлинских принципах определения рейтингов высших учебных заведений. Ранжирование проводится по следующим 5 критериям:
1) высокая концентрация талантливых студентов, преподавателей и исследователей;
2) изобилие ресурсов;
3) международное сотрудничество;
4) конкурентоспособность выпускников;
5) проведение передовых научных исследований.
Каждый из критериев, имеющий свой относительный вес, определяется одним или несколькими показателями.
Таким образом, для поднятия качества образования через академическое ранжирование под методикой расчета нового рейтинга понимается «комплексная характеристика, которая отражает общественное признание вуза. Признания можно добиться за счёт качественной учебной и научной деятельности, высокой квалификации преподавателей, востребованности выпускников на рынке труда и хорошего материально-технического обеспечения».
Рецензенты:
Шаханова Н.Ж., д.ф.н., доцент, директор департамента образовательных грантов, ОФ «БОТА», г. Алматы;
Искаков Б.М., д.ф.-м.н., профессор кафедры общей и теоретической физики Казахского национального технического университета имени К.И. Сатпаева, г. Алматы.
Работа поступила в редакцию 30.12.2014.
Библиографическая ссылка
Мамырханова А.М., Абылгазина А.Е. МЕТОДИКА ИЗУЧЕНИЯ МНЕНИЯ ОБЩЕСТВА В ОТНОШЕНИИ АКАДЕМИЧЕСКОГО РАНЖИРОВАНИЯ ВУЗОВ // Фундаментальные исследования. – 2014. – № 12-11. – С. 2458-2462;URL: https://fundamental-research.ru/ru/article/view?id=36714 (дата обращения: 17.08.2024).