Дизайн выборки для интервью — по рекомендациям @Kseniya_Vasil
340Человек в отчёте
8Полярных групп
16Интервью
Все цифры и имена — пример
Какое решение поможет принять
Бизнес-задача — из отчёта: для каких рабочих задач текущего набора AI-инструментов недостаточно и что проверить перед закупкой. Там же — кто принимает решение и по каким признакам. Выборка решает, чьи задачи мы увидим на интервью.
Сначала определяют, какие способы решать задачи нужно увидеть: через корпоративный AI-инструмент, через другие AI-инструменты, вручную или через коллег — и у тех, кто попробовал инструмент и бросил. Отчёт по ChatGPT Enterprise — один из источников: он находит первых и бросивших. Пользователей других инструментов находят по анкете на всю компанию и по спискам лицензий и закупок.
Вход
Таблица людей из отчёта, анкета на всю компанию, списки лицензий и закупок
Что делает метод
Отбирает по 2 человека на каждый способ решать задачи
Решение на выходе
С кем говорить перед покупкой и что проверять — вплоть до вывода, что новый инструмент не нужен
Почему одного топа по активности мало
Три способа набрать 16 человек. Цвет точки — сценарий использования. Самые активные и добровольцы — хорошие респонденты, их берут в любую выборку, но одних их мало.
малоТоп по сообщениям
сценариев: 2 из 8
малоДобровольцы
сценариев: 3 из 8
полноПолярные группы
сценариев: 8 из 8
Вывод
В этом примереТоп по сообщениям покрывает 2 сценария из 8, добровольцы — 3, полярные группы — все 8.
В общем случаеСамые активные и отзывчивые люди лучше всех знают инструмент, и их стоит звать. Они похожи друг на друга и вместе описывают один-два сценария. Чтобы услышать остальные, выборку добирают людьми с крайними значениями других признаков.
Что сделатьВозьмите 2–3 человек из топа по сообщениям. Остальные места отдайте людям с другими сценариями: тем, кто работает только через Codex, бросил инструмент, пользуется другими или ведёт много проектов.
Восемь групп
Шесть групп находятся по порогам из отчёта, «бросили» — по дате последней активности, «другие инструменты» — по анкете. У каждой группы вопрос, который она помогает проверить. Ответ может быть любым, в том числе «новый инструмент не нужен». Пороги в примере — ориентир: подбирайте их так, чтобы в группу попадали 2–5 человек.
Самые активные в коде
код > $200 / 3 мес
чего не хватает в разработке: инструмента, доступа к репозиториям — или ничего
Hana Sato, Luis Moreno
Агентные задачи
агент > $60 / 3 мес
где агент не справляется и почему: данные, задача или сам агент
Mira Castellano, Tomás Reid
Глубокий ресёрч
> 3 000 сообщ., чат главный
как проверяют ответы и хватает ли текущего поиска
Jonas Keller, Aiko Lind
Только Codex
0 сообщ. и > $20 / 3 мес
какие задачи решают без чата и нужно ли им что-то ещё
Ben Ortiz, Lena Moss
Неактивные
0 сообщ. и $0 за период
как решают свои задачи и какие варианты рассматривали
Pavel Novak, Sara Quinn
Попробовали и бросили
были сообщения, 0 за последние 60 дней
почему перестали: результат, время, безопасность или задача ушла
Farah Nasser, Yara Selim
Проектные организаторы
≥ 6 активных проектов
что дают проекты и чего в них не хватает
Elif Demir, Rafael Costa
Другие инструменты
по анкете: основной AI-инструмент не корпоративный
что в другом инструменте лучше и можно ли получить это в текущем
В этом примере16 разговоров: по двое в каждой из восьми групп.
В общем случаеДвое-трое в группе показывают, повторяется ли проблема: если одно и то же говорят двое из трёх, это сигнал. Людей со средними значениями не берут: их ответы похожи на ответы соседних групп, и на 16 разговорах они не добавляют новых сценариев.
Что сделатьВ каждой группе отсортируйте кандидатов по её порогу и возьмите двух с самыми крайними значениями, по возможности из разных команд. Если человек попал в две группы, оставьте его в той, где его значение крайнее, а во второй возьмите следующего кандидата.
Покрытие команд и замены
Отдельный шаг после набора, группы он не меняет: сколько отобранных людей пришлось на каждую команду и кем заменить отказавшихся.
Команда
Регулярно пользуются
Отобрано
Статус
Команда A
покрыта
Команда B
покрыта
Команда C
покрыта
Команда D
после замены
Команда E
после замены
Вывод
В этом примереПосле набора по группам в командах D и E никого не было. Трёх кандидатов заменили на людей из D и E с тем же поведением, теперь покрыты все пять команд.
В общем случаеПороги по тратам и сообщениям ловят крайних пользователей. Команда, где все пользуются понемногу, под пороги не попадает, и её задачи выпадают из исследования. Поэтому команды проверяют отдельным шагом.
Что сделатьРазложите отобранных по командам. Если в команде никого нет, замените в подходящей группе одного кандидата на человека из этой команды с тем же поведением. Отказавшегося замените следующим кандидатом той же группы по её порогу.
Что узнать на интервью
Разговор идёт от последней рабочей задачи, а не от инструмента: что нужно было получить, чем человек располагал, что выбрал и как дошёл до результата. Полный сценарий — в статье про интервью.
Задача
Последняя рабочая задачаЧто нужно было получить и для кого
Средства и выборЧем располагали, что выбрали и почему
Путь
Как дошли до результатаЧто взяли как есть, что доделали сами
Затраты и ограниченияВремя, данные, доступ, безопасность
Удачный случай
Когда получилось хорошоЧто тогда было иначе
Отказ и переключение
Бросали или меняли инструментНа что перешли и почему
Вывод
В этом примереШесть пунктов: четыре по одной задаче, удачный случай и отказ или переключение.
В общем случаеРассказ о прошлой задаче даёт факты: видно, где человек выбрал AI, где другой способ и почему. Удачный случай показывает, что уже работает, отказ и переключение — почему инструменты меняют. Прогноз о будущем проверить нельзя.
Что сделатьПопросите в первые минуты назвать последнюю рабочую задачу и ведите весь разговор по ней. Если человек не упоминает AI, спросите, какие варианты он рассматривал, а не почему он им не пользуется.
Порядок работы
1
Собрать кандидатов в восемь групп
Шесть групп — по порогам из отчёта, «бросили» — по дате последней активности, «другие инструменты» — по анкете
2
Оставить по 2 человека в группе
Из разных команд, если есть выбор; один человек — только в одной группе
3
Проверить покрытие команд
Если в команде никого нет, заменить одного кандидата на человека из неё с тем же поведением
4
Назначить интервью по 30 минут
Разговор идёт от последней рабочей задачи: что нужно было получить, чем располагали, что выбрали и как дошли до результата. С бросившими отдельно обсуждают, почему перестали
Ограничение. 16 интервью показывают, какие проблемы встречаются и как они выглядят в работе. Сколько людей в компании сталкивается с каждой из них, по 16 разговорам не посчитать. Чтобы узнать масштаб, отправьте всей компании короткую анкету, которую составляют после интервью. Если проблемы не подтвердились, это тоже результат: новый инструмент не нужен.