Исследовательская часть магистерской

Исследовательская часть – сердце магистерской диссертации: здесь вы проверяете гипотезу на данных и получаете результат, который потом выносите на защиту. От анализа в бакалаврской работе её отличает дизайн исследования: заранее продуманные данные, методы и критерии, по которым станет понятно, подтвердилась ли гипотеза. Разберём, как спланировать и описать эту часть.

Коротко

1. Составьте дизайн исследования: гипотеза, данные, методы, критерий проверки.

2. Соберите и подготовьте данные, опишите, откуда они и что с ними сделано.

3. Проведите анализ и сравните результат с базовым вариантом или контрольной группой.

4. Проверьте устойчивость результатов и честно назовите ограничения.

5. Сформулируйте выводы и практические рекомендации.

Чем исследование магистра отличается от анализа бакалавра

Бакалавр чаще всего описывает организацию по известной методике и находит проблемы. Магистрант проверяет гипотезу: обосновывает выбор данных и методов, сравнивает свой вариант с существующим и показывает, насколько результату можно доверять.

Формы исследования зависят от направления:

• эксперимент с контрольной и экспериментальной группами – педагогика, психология, технические науки;

• опрос и статистический анализ – социология, менеджмент, маркетинг;

• эконометрическое или математическое моделирование – экономика, финансы;

• разработка и апробация модели, методики или программы – прикладная информатика, инженерные направления;

• анализ правоприменительной практики – юриспруденция.

Сквозной пример – тема из бизнес-аналитики: «Прогнозирование оттока клиентов интернет-провайдера методами машинного обучения».

Дизайн исследования

До сбора данных ответьте на четыре вопроса: что проверяете, на каких данных, с чем сравниваете и по какому критерию решите, что гипотеза подтвердилась. Для примера это выглядит так:

Такая таблица помогает и вам, и руководителю: сразу видно, хватит ли данных и не потеряется ли по дороге сравнение. Её удобно согласовать до того, как вы потратите месяцы на сбор. И заложите время с запасом: доступ к данным и согласования с организацией почти всегда занимают дольше, чем кажется, поэтому начинать их лучше ещё на первом курсе.

Данные: откуда и как подготовлены

Описание данных должно быть таким, чтобы другой исследователь мог повторить ваш путь. Обычно в нём есть:

• Источник и разрешение. Чьи это данные, на каком основании вы их используете, как обезличены персональные сведения.

• Выборка. Объём, период, критерии включения и исключения.

• Подготовка. Что сделано с пропусками, выбросами и дублями, какие показатели рассчитаны дополнительно.

Если исследование строится на опросе, к этому добавляются способ отбора респондентов, описание анкеты и обоснование методик. Пробный опрос на небольшой группе помогает заранее найти непонятные вопросы. Участников предупреждают о целях исследования и анонимности ответов, а в отчёте не приводят сведений, по которым можно узнать конкретного человека.

Анализ и сравнение

Начните с описательной статистики: как распределены показатели, чем отличаются группы. Затем – основной анализ под гипотезу и обязательно сравнение: с базовой моделью, контрольной группой, существующей методикой или данными до внедрения. Без сравнения нельзя сказать, что ваш вариант лучше. Если сравниваете группы или показатели до и после, проверьте статистическую значимость различий: на небольшой выборке заметная на глаз разница может оказаться случайной.

После каждой таблицы или рисунка – вывод: что из них следует для гипотезы. Например, так:

Модель с признаками обращений в поддержку выявляет больше уходящих клиентов при той же доле ложных срабатываний, чем базовая модель (таблица 2.4).

Преимущество сохраняется на данных другого региона, что говорит об устойчивости результата.

Проверка устойчивости – признак зрелого исследования. Это может быть другой период, другая подвыборка, другие параметры модели или повторный замер после эксперимента.

Интерпретация и ограничения

Вернитесь к гипотезе: подтвердилась она полностью, частично или нет. Объясните почему и сравните свои результаты с работами из обзора литературы: где они совпали, где разошлись и как это можно объяснить. Частичное подтверждение – обычный и вполне достойный итог, если он честно разобран. В примере он мог бы звучать так:

Гипотеза подтвердилась частично: учёт обращений в поддержку повысил качество прогноза, а технические показатели почти не повлияли на результат.

Вероятно, клиенты реагируют не столько на сами перебои связи, сколько на то, как быстро их решают.

Отдельным абзацем назовите ограничения: данные одной компании, короткий период, самоотчёты респондентов, небольшая выборка. Это не слабость работы, а признак научной честности, и рецензенты это ценят. Там же уместно назвать перспективы: что стоило бы проверить в следующих исследованиях.

Рекомендации и описание в тексте

Магистерская обычно заканчивается не только выводом о гипотезе, но и практическими рекомендациями. В примере это правила, по которым отдел удержания получает список клиентов с высоким риском ухода, и оценка эффекта от работы с ними. Эффект оценивают в тех же единицах, что и проблему: если речь об оттоке, то сколько клиентов удастся сохранить и во что обойдётся работа с ними. Такой расчёт всегда строится на допущениях, и их стоит назвать явно. Если организация готова подтвердить, что результаты используются, это оформляют актом о внедрении.

Исследовательская глава в примере могла бы выглядеть так:

• 2.1. Дизайн исследования и характеристика данных

• 2.2. Построение моделей прогнозирования оттока

• 2.3. Сравнение моделей и проверка устойчивости результатов

• 2.4. Рекомендации по удержанию клиентов и оценка эффекта

Частые ошибки

• Данные собраны до гипотезы. Сначала собрали всё, что было доступно, а потом ищут, что из этого следует, – результат получается случайным.

• Нет сравнения. Модель или методика описана, но не показано, чем она лучше существующей.

• Таблицы без выводов. Рисунки и расчёты идут подряд, а что они значат для гипотезы – непонятно.

• Подгонка под гипотезу. Из выборки без объяснения убраны «неудобные» наблюдения; рецензент это заметит.

• Скрытые ограничения. Выводы распространены на всю отрасль по данным одной компании.

Если не получается выстроить дизайн исследования или непонятно, как интерпретировать результаты, это удобно разобрать на методологической консультации: проверим связку гипотезы, данных и методов до того, как вы потратите время на сбор.

Чек-лист