Центр тестирования и развития
Гуманитарные технологии

(495) 504-3479, 642-2414
partner@teletesting.ru

Подписка на новости

Профориентация: кем стать


Rambler's Top100
 
Комплекс тестирования "ПРОФОРИЕНТАТОР": психометрические и прагматические свойства теста



В течение многих лет Центр тестирования и развития в МГУ «Гуманитарные технологии» использует в  профориентационной работе методику «Профориентатор», комплексно диагностирующую интересы, способности и личностные качества учащегося, соотнося их с выбором профессии и учебного заведения. Обсуждение результатов методики с психологом позволяет обратить внимание подростка профконсультации на внутренние факторы выбора профессии, более важные, чем «престижность», «доходность», «легкость поступления в вуз» и т.п.
В настоящей статье идет речь о том, как устроен компьютерный комплекс «Профориентатор».

I. Описание компьютеризированного комплекса тестирования «Профориентатор»

1. Краткая история создания

Первая версия комплекса тестирования называлась «Тест профессиональных склонностей» (ТПС). Этот тест был разработан проф. А.Г.Шмелевым в 1997 году с целью проведения профориентационных консультаций со старшеклассниками и абитуриентами МГУ. В основу теста был положен не только оригинальный набор тестовых заданий, но и оригинальный набор тестовых шкал (факторов), не дублирующий  ни один из известных в профориентации инструментов (ДДО Климова, опросник Холланда, перечень интересов Стронга, «карту интересов» и др.). Комплекс ТПС функционировал под тестовой оболочкой «ТЕСТАН», разработанной А.Г.Шмелевым для ОС DOS. Комплекс ТПС включал два основных блока: блок «Интересы» (использовалось 8 субшкал интересов) и блок «Способности» (6 субшкал). Эти блоки по составу субшкал фактически сохранились в версии, получившей в 2001 году название «Профориентатор» (лишь субшкала интересов «Госслужба» была заменена на субшкалу интересов «Знак»). Со временем стало очевидно, что выбор профессии не исчерпывается определением только интересов и способностей, – в результате добавился блок диагностики личностных качеств, составленный на основе факторов «Большой пятерки», адаптированных для русскоязычной выборки. Кроме того, в блоке «Интересы» было принято решение использовать более простые задания опросного типа – вместо выбора из 8-ми вариантов ответа выбор из двух (плюс нейтральный ответ). Новые задания блока «Интересы» были получены с участием студентов факультета психологии МГУ на практикуме по конструированию тестов. В создании версии 2001 года активное участие приняли Е.И. Рыхлевская и А.Г. Серебряков.
В 2001 году не только концепция теста была доработана, но была создана Windows-версия тестовой программы (реализация О.Н. Кононова под руководством А.Г. Шмелева). Методика получила свое нынешнее название: компьютеризированный комплекс тестирования «Профориентатор». Комплекс стандартизировался на выборке испытуемых различного возраста, прошедших профориентационную диагностику и консультацию на факультете психологии  МГУ им. М.В. Ломоносова.
Кроме версии для проведения профессиональных консультаций со старшеклассниками (собственно «Профориентатор») в Центре используется специальная тестовая батарея для проведения профессиональных консультаций со студентами вузов и взрослыми людьми (методика «Профконсультант»). Эта тестовая батарея была создана на базе тестов «Большая пятерка» (личностные свойства), СТМ (мотивы) и ТИПС (способности), разработанных А.Г. Шмелевым в 90-е годы для нужд оценки персонала в коммерческих организациях.
Оба тестовых комплекса ежегодно обновляются на основе результатов психометрического анализа. Тест «Профориентатор» претерпел уже 3 крупных модификации на основе экспериментально-статистических данных – сотен собранных протоколов и проделанного статистического анализа отдельных заданий (пунктов) теста. В ходе модификаций замене или коррекции подвергались до 15% заданий. Кроме того,  ведется регулярная работа с тестом по проверке работы каждого пункта и шкал в целом, по расчету и пересчету норм, по коррекции списка профессий и введению новых специальностей.

2. Назначение и применение

Комплекс «Профориентатор» ориентирован на работу со старшеклассниками (учениками 7-11 классов), рассматривающими вопрос о выборе профессии и  высшего или среднего специального учебного заведения, а также с выпускниками школ, еще не имеющими опыта работы.
При выборе профессии очень важно соответствие между психологическими особенностями человека и соответствующими характеристиками профессии. «Профориентатор» позволяет совместить анализ интересов, способностей и личностных качеств учащихся в рамках диагностики их профессиональных склонностей.
Во-первых, профессия должна быть ИНТЕРЕСНА. Если ребенку нравятся животные, растения, то ему будет интересно в своей профессиональной деятельности сталкиваться с объектами живой природы. Если он любит технику – интерес к ней будет поддерживать его в деятельности инженера-конструктора или физика-теоретика.
Во-вторых, любая профессия требует, чтобы у человека присутствовали так называемые «профессионально важные качества» – например, корректору важно внимание, художнику – образное мышление и т.д. Поэтому, выбирая определенную профессию, важно осознать, какие СПОСОБНОСТИ соответствуют профессионально важным в данной профессии качествам.
Наконец, тип реализуемой профессиональной деятельности должен совпадать с ЛИЧНОСТНЫМ, характерологическим типом. Скажем, общительным людям больше подойдут профессии, связанные с многочисленными контактами, а эмоционально неустойчивым – не подходят рутинные виды деятельности, требующие концентрации в течение длительного времени.
Таким образом, в данном случае понятие «профессиональная склонность» следует трактовать как интерес, подкрепленный соответствующими личностными качествами и развитием соответствующих способностей, то есть, как совпадение интересов, способностей и характера человека в определенной профессии (группе профессий). Поэтому тестовый материал сфокусирован на интересах и способностях, важных для приобретения образования в соответствующей профессиональной области.
Как известно, нередко в ходе профориентационного анализа выясняется, что у юноши или девушки наблюдаются противоречия между сферой интересов, сферой личностных качеств и сферой способностей, то есть, фактически, нет явно выраженных склонностей. Очень часто вызывает интерес сфера искусства и другие виды творческой деятельности, но при этом недостаточно выражены определенные способности.
Итак, для того, чтобы выбрать профессию, необходимо не только разбираться в мире существующих профессий, но прежде всего познать себя – свои индивидуальные психические свойства. Комплекс тестирования «Профориентатор» позволяет получить дифференцированное представление об уровне интереса к 8-ми сферам профессиональной деятельности, о выраженности 4-х ортогональных личностных качеств и об уровнях развития по 6-ти основным факторам умственной деятельности.

Рекомендации по выбору профессий даются в терминах круга специальностей, отражающих наиболее массовые профили подготовки современного специалиста с высшим и средним специальным образованием.

3. Структура теста

Комплекс тестирования «Профориентатор» включает 3 блока:
  • Структура интересов. Данный блок состоит из 80 утверждений, диагностирующих сферу интересов по 8-ми факторам: «Техника», «Наука», «Искусство», «Общение», «Бизнес», «Знак», «Природа» и «Риск». Выбор восьми шкал осуществлялся с опорой на теоретические подходы отечественной психологии труда (Е.А. Климов) и американской психологии профессионального выбора (Дж. Холланд).
  • Структура интеллекта. Данный блок состоит из 72 вопросов, представляющих собой задания на определение уровня развития различных способностей (факторов умственной деятельности): «Вычисления», «Лексика», «Эрудиция», «Зрительная логика», «Абстрактная логика» и «Внимание». Кроме того, выдается общий балл по данному блоку, отражающий средний показатель по всем шести факторам в совокупности – аналог «уровня умственного развития», который принято в нашем Центре интерпретировать  как операциональный индикатор актуально достигнутого «уровня обучаемости и умственной работоспособности».
  • Структура личности. Данный блок состоит из 45 вопросов-утверждений, ориентированных на выявление личностных качеств. Факторы данного блока основываются на Большой Пятерке (Big Five) личностных качеств, за исключением шкалы «Открытость опыту (обучаемость)». Данная структура личностных качеств показала свою состоятельность на отечественной выборке (А.Г. Шмелев, 2002). В методике «Профориентатор» данные факторы условно обозначаются как «Активность», «Согласие», «Самоконтроль» и «Эмоциональная стабильность».
    Тест включает в себя различные вопросы: это и решение задач, и выбор наиболее привлекательных альтернатив, оценка объектов по заданным параметрам, выбор вариантов поведения в тех или иных ситуациях.
    Первый и третий блоки предъявляются без ограничения времени, на выполнение второго блока отводится 40 минут. На выполнение всех заданий уходит в среднем от 40 до 60 минут.
    Комплекс снабжен несколькими версиями тестовых норм, которые применяются в зависимости от возраста испытуемого.
4. Краткая характеристика шкал

СТРУКТУРА ИНТЕРЕСОВ

Шкала «Техника»
Яркая выраженность: интерес к работе с техникой, техническими системами, электроникой, различными видами энергии, к изготовлению и использованию различных инструментов и оборудования; эксплуатация и ремонт транспорта. Предпочтение точных наук (алгебра, геометрия, физика, информатика); ручная умелость, любовь к конструированию.
Примеры профессий: инженерные, технологические, машинист, водитель, программист.

Шкала «Наука»
Яркая выраженность: интерес к исследовательской деятельности, к самообразованию, любопытство, эрудиция, увлеченность, направленность на сбор и анализ информации и знаний в различных предметных областях; обычно сопровождается чтением научно-популярной литературы, энциклопедий, посещением кружков, дополнительных занятий.
Примеры профессии: исследовательские, аналитические, наукоемкие.

Шкала «Искусство»
Яркая выраженность: интерес к работе с художественными образами (их создание, организация, оценка). Обычно присуща сильная впечатлительность, эмоциональность, развитое воображение и образное мышление.
Примеры профессий: актер, писатель, критик, экскурсовод, ювелир, дизайнер, культуролог.

Шкала «Общение»
Яркая выраженность: интерес к работе с людьми, различными группами и коллективами. Обычно сопровождается развитыми коммуникативными и организационными способностями, хорошей выдержкой, самоконтролем, доброжелательным отношением к окружающим.
Примеры профессий: сфера воспитания и обучения (педагогические), здравоохранения (медицинские), правовой защиты (юридические), организации и управления (менеджмент), сфера обслуживания, культурно-просветительская работа.

Шкала «Бизнес»
Яркая выраженность: интерес к управлению и организации работы других людей. Есть стремление к материальному благополучию, способность принимать решения и брать на себя ответственность; активность, лидерские качества, аналитическая направленность ума. Увлечение общественными и экономическими науками.
Примеры профессий: экономические, менеджерские, политика.

Шкала «Знак»
Яркая выраженность: интерес к работе с буквами, цифрами, схемами, графиками, текстами, документами, естественными и искусственными языками. Обычно свойственно предпочтение таких предметов, как алгебра, логика, информатика, языки.
Примеры профессий: гуманитарная направленность (переводчик, филолог, юрист), экономическая направленность (бухгалтер, маркетолог, экономист), техническая направленность (оператор ПК, программист, диспетчер), кроме того, это работа секретарей, библио-текарей, делопроизводителей.

Шкала «Природа»
Яркая выраженность: интерес к работе с природными объектами (животными, растениями, микроорганизмами, природными явлениями). Увлеченность такими предметами, как биология, химия, медицина, экология.
Примеры профессий: биолог, зоолог, генетик, эколог, агроном, ветеринар, геолог, метеоролог.

Шкала «Риск»
Яркая выраженность: желание действовать в стрессовых, неопределенных ситуациях, при высоких физических или психических нагрузках. Обычно сопровождается любовью к спорту (особенно к экстремальным его видам), наблюдается жажда острых ощущений, высокая активность, ловкость, выносливость.
Примеры профессий: пожарный, спасатель, врач скорой помощи, спортсмен, летчик, работа в правоохранительных органах.

СТРУКТУРА СПОСОБНОСТЕЙ

Шкала «Вычисления»
Яркая выраженность: хорошее умение оперировать числами в уме, производить счетные операции, выявлять закономерности в числовых рядах. Необходимо для технических и экономических профессий.

Шкала «Лексика»
Яркая выраженность: большой объем словарного запаса, легкость его актуализации (возможность легко подбирать слова при общении с людьми, грамотно строить фразы).
Необходима для гуманитарных профессий и профессий, связанных с общением с другими людьми.

Шкала «Эрудиция»
Яркая выраженность: широкий кругозор и высокая общая осведомленность о разных сферах жизни, развитая познавательная активность.
Необходима практически для всех профессий, связанных с интеллектуальной деятельностью.

Шкала «Зрительная логика»
Яркая выраженность: хорошее пространственное и образное мышление, конструктивно-технические способности. Умение решать геометрические, конструкторские, дизайнерские задачи (мысленно повернуть объект, построить его проекцию на плоскость и т.д.).
Необходима в технических и творческих профессиях (строитель, инженер, архитектор, фотограф, дизайнер).

Шкала «Абстрактная логика»
Яркая выраженность: способность логически рассуждать, выявлять причинно-следственные связи, строить и понимать высказывание, мыслить на понятийном уровне.
Необходима в научной деятельности, в юриспруденции, журналистике, психологии.

Шкала «Внимание»
Яркая выраженность: умение концентрироваться на выполнении задания (даже в стрессовых условиях), развитые навыки самоконтроля и самоорганизации.
Необходимо при выполнении работы монотонной и требующей высокой точности и концентрации внимания.

СТРУКТУРА ЛИЧНОСТИ

Шкала «Активность»
Яркая выраженность: активность в общении с другими людьми (стремление знакомиться, завязывать связи, проявлять инициативу в общении, организовывать других на какое-нибудь дело). Энергичность, поиск новых впечатлений. В крайних проявлениях – гиперактивность, перевозбуждение.
Важна для профессий, предполагающих частые контакты с множеством людей (журналистика, менеджмент, политика).
Слабая выраженность: необщительность, замкнутость, скромность в общении, предпочтение узкого круга большому количеству людей. В крайних проявлениях – закрытость, отгороженность от мира.
Важна для профессий, требующих самостоятельной деятельности, в условиях ограниченного общения, при выполнении монотонной деятельности.

Шкала «Согласие»
Яркая выраженность: склонность сотрудничать и соглашаться с другими, умение встать на точку зрения другого, посочувствовать, желание помочь. Желания другого рассматриваются как более важные, нежели свои собственные. В крайних проявлениях – конформизм, ведомость.
Важно для профессий, связанных со сферой обслуживания, педагогикой, медициной.
Слабая выраженность: самостоятельность в выборе позиции, отстаивание собственной точки зрения. Индивидуализм, склонность полагаться на себя. Независимость и игнорирование желаний других людей. Трудности при работе в группе. В крайних проявлениях – конфронтация, эгоизм.
Подходят профессии, предполагающие самостоятельную работу, вне коллектива, работа в условиях конкуренции.

Шкала «Самоконтроль»
Яркая выраженность: умение организовать себя в пространстве и времени: пунктуальность, целенаправленность, склонность к планированию. Хорошо развит самоконтроль и волевые качества. В крайних проявлениях – педантизм, неумение расслабляться.Необходима в «знаковых» профессиях (библиотекарь, экономист, программист, переводчик, секретарь).
Слабая выраженность: импульсивность, отсутствие организованности, непоследовательность в достижении целей. Часто это сочетается с высокой оригинальностью мыслей и поступков и высокой переключаемостью с одного дела на другое. Способность отклониться от шаблона, развитое творческое начало. В крайних проявлениях – полная дезорганизованность выполнения деятельности.
Подходит для творческих профессий и для работы в условиях неопределенности.

Шкала «Эмоциональная стабильность»
Яркая выраженность: устойчивость в стрессовых ситуациях, способность сохранять хладнокровие, хорошая выдержка. В крайнем проявлении – «непробиваемость», эмоциональная холодность.
Важна для профессий, связанных с риском для жизни и здоровья, при работе в постоянно изменяющихся или, наоборот, монотонных видах деятельности, а также при взаимодействии с другими людьми.
Слабая выраженность: чувствительность, тонкое переживание происходящих и предполагаемых событий, тревожность. В крайних проявлениях – эмоциональная дезорганизация деятельности.
Подходит для профессий, требующих чуткости и тонкости восприятия (творчество, психология), не подходят монотонные виды деятельности.

5. Результаты тестирования

После прохождения комплексного тестирования по методике «Профориентатор» клиент получает распечатку результатов, куда входит: индивидуальный профиль с результатами по каждой шкале, списки сходных профессий по различным критериям, интерпретации результатов по всем шкалам теста,  информация по рекомендуемым развивающим (тренинговым) программам.
Показатели по отдельным шкалам образуют так называемый факторный профиль, являющийся, по сути, индивидуальным психологическим портретом испытуемого. Факторный профиль сравнивается с «идеальными» профилями различных профессий, созданными экспертами на основе профессиограмм.
Результаты сравнения представляются в виде списка наиболее близких по профилю профессий с соответствующими коэффициентами сходства (полное совпадение – 1) – сначала по каждому блоку, затем программа формирует интегральный список профессий, комплексно оценивая результаты по всем трем тестовым блокам.
Рис. 1 и 2 представляют собой образцы факторных профилей реальных испытуемых. Балл по каждому фактору отображается в стандартной шкале стенов (от 1 до 10), где средним значением является 5,5, а средней зоной – от 3,5 до 7,5 стенов (среднее плюс-минус стандартное отклонение). Данная форма предоставления результатов позволяет каждому испытуемому сравнивать себя со своими сверстниками, так как нормы значений рассчитываются для каждой возрастной группы отдельно, опираясь на данные реальных испытуемых, прошедших тестирование по методике «Профориентатор».

Образец диагностического профиля

Рис. 1. Образец диагностического профиля. Испытуемый X. Пол – мужской, 9 класс.

Образец диагностического профиля

Рис. 2. Образец диагностического профиля. Испытуемая Y. Пол – женский, 10 класс.

Рассмотрев подробно полученный профиль, психолог может ответить на многие вопросы:
  • какие профессии и почему подходят учащемуся на основе анализа интересов, способностей и черт характера;
  • в каких вузах можно получить соответствующее образование;
  • как развить «запущенные» сферы интеллекта;
  • в каких развивающих тренингах рекомендуется принять участие.
II. Содержание психометрической работы с методикой «Профориентатор»

1. Тестовая система Maintest

Тестовая система «Maintest» позволяет сохранять в едином формате все протоколы испытуемых, прошедших тестирование, а также производить дальнейшую статистическую обработку протоколов с целью психометрического анализа работы тестовой методики.
Постоянный поток клиентов нашего Центра в Москве, а также постоянное взаимодействие с нашими региональными представительствами  позволяет довольно быстро набирать необходимое для статистической обработки количество протоколов, поэтому как минимум раз в полгода тест проходит проверку на «качество», регулярно ведется активная работа по обновлению и коррекции банка вопросов и списка профессий.

2. Психометрические свойства методики «Профориентатор»

а) Надежность. Надежность теста отражает степень внутренней согласованности включенных в него шкал (операционально – это взаимная скоррелированность ответов на разные задания, входящие в одну шкалу). Надежность-согласованность определяется вычислением коэффициента Альфа-Кронбаха. Такой анализ проводился неоднократно – на всех этапах совершенствования методики. Последний анализ надежности-согласованности методики «Профориентатор» показал довольно высокий уровень – 0,79 для теста в целом.
Отдельно по шкалам наблюдается разброс значений. При этом обнаружение невысоких показателей коэффициента Альфа по отдельной шкале служит причиной более глубокого анализа шкалы и пересмотра отдельных пунктов либо концепции шкалы в целом. Пример – шкала «Общение»: при обнаружении невысокой надежности был проанализирован качественный состав вопросов, после чего они были заменены на более профессионально ориентированные, в отличие от общения в обыденной жизни.

б) Валидность. Под валидностью методики понимается степень соответствия получаемой информации диагностируемому психическому свойству. В практическом смысле валидность можно интерпретировать как «пригодность» методики для решения поставленной практической задачи – в данном случае, для задачи адекватной профессиональной ориентации подростка.
Рассмотрим на примере «Профориентатора» два типа валидности: валидность прогностическую и конструктную. Прогностическая валидность – важнейший вид валидности диагностической методики, который подтверждает её пригодность для выдвижения прогноза. Очевидно, что в случае профориентации задача прогнозирования особо актуальна. Исследование прогностической валидности методики производилось 3 года назад, когда был произведен обзвон клиентов с вопросом о выборе вуза и специальности. Другой вариант анализа валидности методики (корреляция профилей по тесту с фактом принадлежности к той или иной профессиональной группе) был произведен в рамках дипломной работы М. Енгалычевой под руководством А.Г. Шмелева. Выявленный уровень прогностической валидности – около 0,4 – 0,6 для разных экспериментальных ситуаций (для разных источников информации). Важно подчеркнуть, что само значение коэффициента корреляции не следует путать с вероятностью точного прогноза. Скромный уровень корреляции 0,4 означает вероятностную точность прогноза на уровне примерно 0,7 (уровень 0,5 случайного угадывания плюс примерно 40 процентов прироста).
Конструктная валидность – один из основных теоретических видов валидности, показывающий степень отражения исследуемого психологического конструкта в результатах теста. Конструктная валидность методики «Профориентатор» обеспечивается теоретической базой, заложенной в шкалы-факторы, а также проверяется на практике психологами-консультантами в рамках психодиагностической беседы.
Шкалы, обнаруживающие недостаточный уровень валидности, подробно анализируются и корректируются. Пример: результаты по шкалам «Лексика» и «Зрительная логика» не всегда совпадали в практике с данными самоотчета испытуемых. Более глубокий анализ показал, что данные шкалы недостаточно многогранно отражают исследуемое ка-чество (например, явно доминировали задания на анаграммы для «Лексики» и задания с нахождением закономерностей в двух блоках рисунков для «Зрительной логики»). В результате были предложены принципиально новые идеи заданий на диагностику данных шкал, которые позволили преодолеть неоправданное сужение области валидности тестов.
Конечно,  наиболее убедительные данные о валидности теста «Профориентатор» можно было бы получить в случае мониторинга прогностичности теста, или иными словами – в случае возможности лонгитюдного исследования успешности рекомендованной профессиональной карьеры (хотя бы успешности профессиональной адаптации в рекомендованных вузах). Но в настоящее время решение этого вопроса вне выделения особого фонда (финансовых средств) для оплаты испытуемых (и их родителей), сотрудничающих с учеными, не представляется возможным. Однако, на этом фоне важным источником дополнительной информации о валидности теста для нас служила прослеженная в ряде случаев практика психологических тренингов «Внимание» и «Личностный рост»: после тренинга было отмечено повышение диагностического профиля именно по тем шкалам, на которые был направлен тренинг.

в) Достоверность. Достоверность – психометрическое свойство теста, обеспечивающее защиту его результатов от сознательных фальсификаций (лжи, неискренности испытуемых) или непреднамеренных мотивационных искажений.Достоверность результатов методики «Профориентатор» обеспечивается самой процедурой проведения тестирования: в данном случае мы сталкиваемся с ситуацией клиента, самопознания, а не с ситуацией экспертизы. Опираясь на такую посылку, тест «Профориентатор», в отличие от теста «Профконсультант» для взрослых, решено было не перегружать шкалой социальной желательности. Кроме того, возможная недостоверность результатов (в случае неадекватной мотивации испытуемого) может быть скорректирована в процессе постдиагностической беседы между клиентом (и его родителями) и психологом, которая в обязательном порядке дополняет результаты компьютерного тестирования.

г) Репрезентативность. Репрезентативность – представленность свойств более широкого множества объектов в свойствах подмножества.
Репрезентативность методики «Профориентатор» обеспечивается на высоком уровне, поскольку выборка стандартизации насчитывает тысячи человек и по времени сбора данных и по характеру формирования фактически совпадает с выборкой испытуемых, на которых в дальнейшем этот тест используется.

3. Расчет норм

Результаты тестирования по методике «Профориентатор» выдаются не в виде сырых баллов, а в виде стандартизированной десятибалльной шкалы стенов. То есть, сырые баллы подвергаются процедуре стандартизации, для проведения которой требуется знать нормы: среднее значение и стандартное отклонение по каждой шкале.
Тестовая система Maintest позволяет производить расчет норм по протоколам, хранящимся в её базе. В методике «Профориентатор» рассчитываются нормы отдельно для каждой возрастной группы: 8 класс и менее, 9, 10, 11 класс, а также категории «школа окончена менее 5 лет назад» и «школа окончена более 5 лет назад». Стандартные баллы позволяют испытуемому сравнить себя (свои показатели) с показателями своих сверстников и таким образом получить более объективную оценку. Нормы регулярно обновляются и в обязательном порядке пересчитываются с каждой модификацией теста.

4. Психометрический анализ пунктов

Помимо анализа психометрических показателей всей методики в целом, ведется работа по анализу каждого пункта. Данная работа заключается в следующем:
а) анализ коэффициента корреляции каждого отдельного пункта с общим баллом по шкале, на которую он работает; при необходимости – коррекция;
б) анализ долей (распределение ответов испытуемых);
в) введение новых тестовых пунктов вместо неэффективных.
Тестовая система Maintest  по запросу специалиста генерирует таблицы статистической обработки, позволяющие проанализировать каждый пункт. Основываясь на этих результатах, слабо работающие пункты корректируются; неработающие или потерявшие свою актуальность заменяются новыми; в пунктах, имеющих сильно неравномерное распределение по частотам выборов альтернативных вариантов ответов, усиливаются или, наоборот, ослабляются дистракторы.
Приведем некоторые примеры хорошо работающих пунктов (анализ производился на выборке в 227 человек, использовался «точечно-бисериальный» коэффициент – разновидность пирсоновского для двух переменных, одна из которых является бинарной (пункт теста)):
- п.1 (техника): Меня занимает сборка-разборка многих интересующих меня приборов, аппаратов. – корреляция вопроса со шкалой = 0,56 (p < 0,001)
- п.2 (искусство): Никто мне так не интересен в общении, как люди искусства. – корреляция вопроса со шкалой = 0,54 (p < 0,001)
- п.4 (бизнес): В команде я стремлюсь занять лидирующую позицию. – корр. со шкалой = 0,22 (p < 0,001)
Вопросы, показавшие в предыдущих версиях недостаточные коэффициенты корреляции со шкалой (например, «Письменные экзамены нравятся мне больше, чем устные» – Знак, «Мне необходимо общение с природой, когда у меня плохое настроение» – Природа) заменяются новыми.

5. Анализ корреляций шкал друг с другом

Статистическая обработка в системе Maintest обеспечивает возможность анализа корреляций шкал друг с другом. Это особенно важно для такой многофакторной методики как «Профориентатор». Знание о том, что некоторые шкалы теста положительно или отрицательно связаны между собой, помогает психологу-консультанту анализировать результаты в каждом конкретном случае, строить гипотезы при недостатке информации от клиента, замечать и интерпретировать противоречия в профиле, связывать воедино результаты трех разных блоков теста. Примеры корреляции шкал «Профориентатора» друг с другом:
1) значимая корреляция следующих шкал блока «Интересы» друг с другом:
  • Техника, Наука, Знак (между собой и отдельно со шкалой или Бизнес, или Природа);
  • значимая отрицательная корреляция шкалы Общение с «научными» шкалами (Техника, Наука, Природа);
2) значимая корреляция личностных качеств с Интересами:
  • Факторная субшкала «Активность» положительно коррелирует с интересом к Искусству, Общению, Бизнесу, Риску;
  • Фактор «Согласие» положительно коррелирует с Искусством и отрицательно с Бизнесом;
  • Фактор «Самоконтроль» положительно коррелирует с Техникой, Наукой, Бизнесом, Знаком, Природой; отрицательно – с Риском;
  • Фактор «Эмоциональная стабильность» положительно коррелирует с Техникой, Наукой, Знаком; отрицательно – с Искусством, Природой;
3) корреляции личностных качеств и интересов с субшкалами «Способности»:
  • Согласие – значимая положительная корреляция со всеми субшкалами способностей;
  • Самоконтроль – значимая отрицательная корреляция со шкалами Лексика, Абстрактная логика, Внимание;
  • Эмоциональная стабильность – значимая положительная корреляция с Вычислениями;
  • Техника – значимая положительная корреляция с Вычислениями;
  • Наука – значимая положительная корреляция с Эрудицией;
  • Искусство – значимая положительная корреляция с Лексикой;
  • Бизнес – значимая отрицательная корреляция с Лексикой и Абстрактной логикой;
  • Знак – значимая отрицательная корреляция со шкалами Вычисления, Лексика, Эрудиция, Абстрактная логика;
  • Природа – значимая отрицательная корреляция со всеми шкалами интеллекта.
6. Идеальные профили профессий

По результатам тестирования испытуемые получают список профессий, максимально соответствующих их индивидуальным особенностям. Это возможно благодаря наличию так называемого списка «идеальных» профилей профессий. На настоящий момент в данном списке находится около 80 профессий, отражающих основные направления образования и специализации абитуриентов.
«Идеальный» профиль профессии представляет собой перечень наиболее типичных значений по каждой шкале «Профориентатора», при этом не значимые шкалы обозначаются в профиле значением 5,5 (что означает возможность как высокого, так и низкого, а также среднего значения по данной шкале для данной профессии). При предъявлении списка профессий компьютерная программа ориентируется как на общий уровень выраженности отдельных шкал, так и на конфигурацию профиля испытуемого. В результате список сходных профессий сопровождается четкими значениями коэффициента сходства – показателем согласованности индивидуальных результатов и «идеальных» для каждой профессии. Коэффициент сходства может изменяться от -1 до 1, где 1 отражает полное совпадение, а диапазон от 0,30 до 1 – зону приемлемого сходства.

«Идеальные» профили составляются двумя способами:
1) путем сбора тестовых данных на эффективных исполнителях, представляющих определенную профессиональную группу. Но этот метод требует организационных возможностей сбора данных, которые в нашей стране еще не сложились. Поэтому в нашей работе использовался метод 2.
2) методом экспертных оценок независимыми психологами-профессиоведами через изучение профессиограмм и психограмм профессий и дальнейшего компьютерного шкалирования связей между наличием психологических свойств (факторов) и эффективностью работы в данной профессии. В нашем Центре к сбору таких оценок привлекались группы экспертов, имеющих не только академическое образование в области психологии и профессиоведения, но и опыт практической работы по профориентационному консультированию.

Примеры профилей некоторых специальностей приведены ниже.

Ветеринарный врач

Журналист

В заключение стоит отметить важность правильной интерпретации результатов тестирования. Как и любая другая многофакторная методика, «Профориентатор» требует экспертного использования. Именно опытный психолог-профконсультант может создать из разрозненных показателей по отдельным шкалам целостную картину ситуации, комплексный портрет испытуемого, обнаружить в диагностическом профиле противоречия и артефакты и уточнить наличие выявленных качеств в постдиагностической беседе с клиентом.



[ Статьи из раздела Профориентационные методы | Все статьи ]

Страница для печати Послать эту статью другу
© 2008—2019 Центр тестирования и развития «Гуманитарные технологии»
(495) 504-34-79, 642-24-14; partner@teletesting.ru
Разработка сайта Компания GlobeWeb