Согласно новому исследованию аналитической группы Strat7, исследования с участием людей по-прежнему превосходят опросы с использованием синтетических респондентов.
Исследование показало, что результаты опросов с использованием синтетических респондентов в среднем отличались от основных результатов, полученных с помощью реальных респондентов, на два-три процентных пункта .
Что касается более сложных исследований , таких как изучение подгрупп, факторов, влияющих на результаты, сегментов и изменений во времени , компания Strat 7 отметила, что синтетические данные не позволяют сформировать связные ответы респондентов, несмотря на то, что они формулируют убедительные аргументы .
В исследовании, опубликованном в статье под названием « Синтетические данные: это максимум, чего можно достичь? » , сделан вывод, что по многим параметрам синтетические данные существенно отличаются от результатов опроса, проведенного среди реальных людей.
Полученные результаты подтверждают аналогичное исследование компании Strat7, проведенное в 2025 году , которое показало, что опросы , дополненные синтетическими данными, на базовом уровне соответствуют реальным данным, но выявили непоследовательную сегментацию, отсутствие логической согласованности, «эффект группировки » , при котором меньше ответов обнаруживается на крайних значениях , и расходящиеся результаты в анализе ключевых факторов.
В новом исследовании , проведенном ранее в этом году , эксперимент был повторен : репрезентативная выборка из 3000 человек сравнивалась с опросами, проведенными двумя компаниями, занимающимися созданием синтетических данных , с тремя изменениями: расчет цен по методике Ван Вестендорпа и вопросы о готовности платить; актуальный ситуационный вопрос о чемпионате мира по футболу 2026 года ; и тест на отслеживание , сравнивающий реальные изменения в период с 2025 по 2026 год с изменениями, которые предполагали синтетические данные. Одна из компаний, занимающихся созданием синтетических данных, также была заменена в исследовании 2026 года.
Результаты
Что касается готовности потребителей платить, компания Strat7 отметила, что в 2026 году благодаря использованию синтетических моделей были достигнуты улучшения по сравнению с исследованием 2025 года : уменьшилось скопление целых чисел , таких как 1 или 2 фунта стерлингов , но цены, указанные синтетическими респондентами, в целом были на 16% выше , чем цены, указанные реальными людьми .
В ходе эксперимента по определению цен, в котором респондентам предлагалось указать четыре цены на товар, начиная от «слишком дешево» и заканчивая «дешево», затем «дорого» и, наконец, «слишком дорого » , респонденты, использовавшие исключительно синтетические данные, нарушали логический порядок в 68% случаев, а при использовании реальных данных этот показатель снизился до 32,8%.
Сохранились две проблемы: логика опроса и подгруппы, где часто наблюдались большие расхождения между тем, что говорили реальные и синтетические потребители, при этом в статье предупреждалось о необходимости проявлять большую осторожность при использовании искусственного завышения оценок для более конкретных вопросов.
Согласно статье, результаты синтетических опросов также показали лишь 47% точность в отслеживании изменений показателей между двумя исследованиями — по сути, не лучше, чем подбрасывание монеты .
Компания Strat7 добавила , что если синтетическое расширение данных не может надежно обнаруживать изменения числовых показателей с течением времени , то это «неподходящий инструмент» для этой задачи.
В целом, синтетические данные могут помочь в определении ключевых показателей эффективности, базовом анализе ценообразования и привлечении действительно труднодоступных групп, но исследователи рекомендовали либо избегать их использования, либо проявлять осторожность при их применении в: исследованиях отслеживания и моделировании рыночного микса, новых сегментациях и работе с пространством спроса, анализе подгрупп и многомерном анализе, ситуационных вопросах; а также в исследованиях новых участников рынка или брендов с низкой долей проникновения на рынок.
Анализ
В интервью Research Live Хасдип Сети , руководитель группы по искусственному интеллекту в Strat7, заявил, что спустя почти четыре года после выпуска ChatGPT 3.5 он считает , что использование формата опроса для имитации человеческих ответов на вопросы опроса « вероятно, не является правильным применением технологии » .
« Существуют варианты использования синтетических стимулов , — сказал Сети . — Но попытаться смоделировать на индивидуальном уровне, на что человек отреагирует в ходе всего опроса, очень сложно » .
Он сказал , что на самом деле исследование подчеркнуло необходимость проведения подлинных первичных исследований. « Если ваша задача — просто понять, сколько брать за этот продукт, то [синтетические данные] дадут вам то, что нужно. Но по мере углубления в тему ситуация начинает немного усложняться ».
« Если вам нужна точность, вам всё равно нужно спрашивать реальных людей, и следует быть осторожным с использованием бустинга » .
Сети утверждал, что цифровые двойники — это « лучшее применение технологии » , и сказал, что исследование подчеркивает важность сохранения исследований с участием людей, при этом доля синтетических респондентов должна быть ограничена 10-20% от общей выборки для получения приемлемых результатов. «Не заменяйте людей » , — добавил он. « Или, если вы это делаете, будьте осторожны с процентом респондентов, которых вы заменяете с помощью искусственного интеллекта » .
« Я думаю, это как квадратная доска в круглом отверстии, потому что если вы не можете использовать [ синтетические данные] так же, как планируете исследование во всей его сложности, то все это рушится . Даже экономическая целесообразность иногда не сходится ».
Сети описал использование синтетических данных для повышения эффективности опросов как « фотографию против эскиза » . «Они точно передают некоторые важные детали , но помимо этого, они не могут заменить опрос », — добавил он. « Возможность взаимодействовать с реконструированными сегментами или их двойниками, вероятно, является лучшим применением технологии, потому что это не зависит от того, насколько точно она соответствует опросу » .
Использование синтетических данных для улучшения результатов опросов может быть более перспективным для труднодоступных или нишевых аудиторий, добавил Сети , но отметил, что в настоящее время на рынке нет большого спроса на синтетические данные для повышения эффективности опросов .
« Мы все чаще видим цифровые двойники и синтетические образы, но это по-прежнему основано на данных первичных исследований. Я думаю, что путь, по которому мы все идем, заключается в определении правильного сочетания первичных исследований и такого рода синтетических образов, имитирующих диалог ».
Несмотря на все обещания об эффективности технологии синтетических данных, Сети утверждал: « Безусловно, первичные исследования по-прежнему играют важную роль , и наша задача — противостоять утверждениям о том, что первичные исследования вообще не важны » .
