ТЕХНИЧЕСКИЕ ЗАМЕТКИ ПО РАЗРАБОТКЕ РЕЙТИНГА ОРГАНИЗАЦИЙ ПРОФЕССИОНАЛЬНОГО ОБРАЗОВАНИЯ

Настоящий раздел описывает этап работы, предшествовавший формированию рейтинга согласно разработанной методики.

Изначально от ИАЦ были получены данные о 461 554 выпускниках ВУЗов и 443 489 выпускниках колледжей 2015-2017 годов.

Первым этапом работы стало создание эталонной базы, очищенной от данных, которые могут оказать искажающее действие на результаты рейтинга, и от ошибочных данных.

Далее представлены наглядные шаги по созданию эталонной базы на примере выпускников ВУЗов 2017 года и выпускников колледжей 2016 года.

Чистка искажающих данных

Поскольку задачей рейтинга является оценка того, насколько учебное заведение способствует конкурентоспособности выпускников, впервые выходящих на рынок труда, возникла необходимость исключения из массива данных первой партии выпускников, которые:

  • проходили обучение на вечернем, заочном и экстернат отделениях,
  • обучались дистанционно,
  • получали послевузовское образование (применительно к массиву выпускников ВУЗов).

Смысл проведенной работы заключался в том, что указанные выпускники, наиболее вероятно, могли уже быть трудоустроены, либо были ранее трудоустроены, что ставит их в более выгодное положение в сравнении с теми выпускниками, которые получали образование впервые перед выходом на рынок труда, что могло привести к искажению сформированного рейтинга.

В результате из 129 344 выпускников ВУЗов 2017 года были исключены 43 163 выпускника. Число выпускников, оставшееся для дальнейшего анализа, составило 86 181 человек (66,6% от изначальной численности).

Из 154 417 выпускников колледжей 2016 года исключены 29 942 человек. Число выпускников, оставшееся для дальнейшего анализа, составило 124 475 человек (80,6% от изначальной численности).

Далее, из массива данных были исключены сведения по второй партии выпускников:

  • которые имели нетипичный возраст для лиц, получающих профессиональное образование впервые, то есть вне 22-28 лет для специальностей резидентуры, 20-25 лет для специальностей высшего образования, 18-23 лет для специальностей технического и профессионального образования,
  • число которых для конкретной квалификации (в случае колледжей) и конкретной специальности (в случае с ВУЗами) составляло меньше 7 человек.

В первом случае, смысл проведенной работы также заключался в исключении тех выпускников, которые, наиболее вероятно, могли уже быть трудоустроены, либо были ранее трудоустроены.

Во втором случае, выпускники были исключены из соображений репрезентативности данных, поскольку судить об эффективности в целом квалификации или специальности на основе анализа лишь небольшого числа выпускников представляется нецелесообразным

В результате были исключены 12 573 выпускников ВУЗов и 8 323 выпускников колледжей. Число персональных данных, оставшееся для дальнейшего анализа, свелось к 73 608 выпускникам ВУЗов (56,9% от изначальной численности) и 116 152 выпускникам колледжей (75,2% от изначальной численности).

Чистка ошибок

В представленном массиве данных содержалось определенное число ошибочных данных. К примеру:

  • незаполненные данные по одному или нескольким параметрам, таким как наименования специальности, формы обучения, учебного заведения. В результате представленные данные не имели практической ценности для формирования рейтинга и были исключены.
  • отсутствующие, не полностью или некорректно заполненные ФИО, ИИН, возраст, дата рождения. Например, среди выпускников Казахского агротехнического университета им. Сейфуллина 2017 года по специальности «5B080600 Аграрная техника и технология» присутствовало лицо «Jon Snow». По представленным данным невозможно было отследить наличие пенсионных взносов выпускника, в результате чего массивы были исключены. Необходимо отметить, что ЦРТР по возможности занималось поиском выпускников с неполными личными данными в АИС «ООП», вследствие чего отдельные записи удалось восстановить и сохранить для дальнейшего анализа.
  • дублирующие данные по идентичным выпускникам, то есть двойные, тройные и более записи, которые были исключены с сохранением оригинальных сведений.
  • данные о представленных выпускниках, помимо АИС «ООП» не найденные также в Государственной базе данных физических лиц Министерства юстиции Республики Казахстан, также были исключены.

В результате чистки ошибочных данных были исключены 10 274 выпускников ВУЗов и 9 949 выпускников колледжей.

Тем самым, коэффициент наличия ошибок для выпускников ВУЗов (ИС «ЕСУВО») составил 7,9%, для выпускников колледжей (ИС «НОБД») несколько меньше – 6,4%.

Число персональных данных, оставшееся для дальнейшего анализа, свелось к 63 334 выпускникам ВУЗов 2017 года (48,9% от изначальной численности) и 106 203 выпускникам колледжей 2016 года (68,8% от изначальной численности).

Общие результаты чистки

В результате описанного этапа чистки общее число выпускников 2015-2017 годов, использованных для дальнейшего формирования рейтинга, сократилось до 187 585 выпускников ВУЗов (40,6% от изначальной численности) и 304 901 выпускников колледжей (68,8% от изначальной численности).

При этом для дальнейшего анализа и формирования рейтинга из изначально представленного списка 111 ВУЗов остался 101 ВУЗ с достаточными данными. Десять ВУЗов были исключены за недостаточностью полноценных данных:

  • Атырауский институт нефти и газа,
  • Евразийская юридическая академия имени Д. А. Кунаева,
  • Евразийский Технологический Университет,
  • Казахская национальная академия хореографии,
  • Казахский автомобильно-дорожный институт имени Л.Б.Гончарова,
  • Казахский университет международных отношений и мировых языков им.Абылай хана,
  • Костанайский инженерно-экономический университет им. М. Дулатова,
  • Международный казахско-турецкий университет им.Х.А.Ясави,
  • Университет иностранных языков и деловой карьеры,
  • Южно-Казахстанский педагогический университет.

Из изначально представленного списка 795 колледжей сначала исключены 16 колледжей, прекративших свою деятельность к моменту формирования рейтинга, затем после этапа чистки исключены еще 13 колледжей за недостаточностью полноценных данных. В результате в рейтинг вошли 766 колледжей.

Ограничения

Разработчиками рейтинга определены три ограничивающих фактора, которые могут в некоторой степени оказывать искажающее влияние на результаты расчетов и ранжирования.

  1. Поскольку в качестве источника информации выступала в том числе АИС «ООП», то в рейтинге не учтены выпускники, которые фактически заняты, но не имеют пенсионных взносов. В результате, неформальная занятость занижает фактические показатели, характеризующие положение выпускников на рынке труда.

    Данное ограничение в наибольшей степени сказывается на учебных заведениях и регионах с высокими уровнями неформальной занятости. К таковым относятся, в первую очередь, Жамбылская, Западно-Казахстанская, Костанайская, Павлодарская, Северо-Казахстанская области и город Астана.

    Вместе с тем, рейтинг сохраняет объективность, поскольку, например, северные регионы, имеющие высокий уровень неформальной занятости, по-прежнему являются лидерами рейтинга. Корректировка значений рейтинга на уровень неформальной занятости представляется нецелесообразной.

    В целом, результаты рейтинга можно расценивать как «Объективная оценка успешности учебных заведений (регионов, направлений, специальностей, квалификаций) по подготовке выпускников к формальной занятости».

  2. Первая версия рейтинга, разработанная в текущем году, основывалась на предоставленной ИАЦ базе всех выпускников организаций профессионального образования, включая тех, кто продолжил получение образования, например, в ВУЗе после колледжа, по специальностям послевузовского образования после высшего образования.

    Тем самым, фактические показатели рейтинга, такие, например, как уровень трудоустройства, вновь оказываются заниженными. Данное ограничение в наибольшей степени сказывается на выпускниках колледжей по сравнению с выпускниками ВУЗов, а также на выпускниках ВУЗов, чаще остальных продолжающих получать послевузовское образование (в первую очередь в городах Астана и Алматы).

    Планируется, что при разработке следующей версии рейтинга, данное ограничение будет исключено.

  3. Также из базы данных не были исключены выпускники, покинувшие страну. Общее влияние данного ограничения на результаты рейтинга оценивается как статистически незначимое, однако для отдельно взятых учебных заведений (в первую очередь ВУЗы в городах Астана и Алматы) может занижать фактические показатели.

    При разработке следующей версии рейтинга, будет проработана возможность исключения данного ограничения.