Эксперимент: ИИ или психолог? | Источник: Shutterstock/Fotodom.ru
Фото
Shutterstock/Fotodom.ru

Эксперимент

Всю прошлую неделю сервис для текстовых консультаций с психологом Mindsafe проводил слепой эксперимент: 27 участников общались с психологом или искусственным интеллектом (ИИ). Участники были полностью анонимны и могли взять себе любое имя.

Пол

Гендерный состав участников разделился таким образом: 66,7% — женщины, 33,3% — мужчины.

Возраст

Большинство участников (55,5%) были в возрасте 36-45 лет, наименьшее количество участников от 18 до 25 лет — всего 7,7%, и одинаковое количество участников (18,5%) было в категориях 46-55 и 26-35.

Образование

У большинства испытуемых высшее образование (85,2%), среди них был один студент.

Место жительства

Большая часть участников постоянно живут и работают в России (85,2%), 11,1 % в Европе и 3,7% на американском континенте. Российский участники эксперимента выходили на связь из Уральского и Центрального округов (по 30,4% в каждом), 17,5% были из Сибирского округа и 13% из Приволжья и по одному участнику из Краснодарского края и Ленинградской области.

Эмоциональное состояние

Участники эксперимента на входе заполнили анкету, где признались, что находятся в немного тревожном состоянии (22,2%), в беспокойном — 11,1%, а в целом довольно спокойны были 14,8%. Пятеро признались в том, что их беспокоит их разражительность, по одному участнику были сосредоточены на работе и находились в радостном, оптимистичном состоянии. Некоторые участники признались в страхе (3,7%), также были и те, кто не смог определиться, что чувствует.

Отношение к ИИ

Только два человека признались, что регулярно путают ботов и человека, остальные оценили свое умение определять ботов выше 5 по десятибалльной шкале, средняя оценка — 7 баллов. В тоже время 22,2% участников указали, что никогда в своей жизни не пользовались ИИ, 8% регулярно используют искусственный интеллект в своей работе, другие участники иногда интересовались его возможностями. При этом для психологических вопросов или ментального здоровья пытались до этого использовать ИИ 7,4% пользователей, остальные участники не знали, что такое возможно.

Опыт работы с психологом

Трое из участников уже были знакомы с форматом текстового консультирования с психологом, остальные столкнулись с таким взаимодействием впервые, семь человек имели до эксперимента разовый опыт взаимодействия с психологом.

Результаты

Результаты эксперимента удивили как участников, так и психологов. «Для ИИ мы заранее составляли разные промты, чтобы посмотреть, какой будет эффективнее принят за живого психолога и живой диалог, — рассказывает инициатор эксперимента, президент Международной ассоциации текстовых консультантов и онлайн терапевтов Ирина Баржак, — самым эффективным промтом стал самый простой: „Ты психолог. Поговори со мной“. Также для чистоты эксперимента мы просили убрать специальные символы и форматирование, но, судя по ответам участников, все же им удалось определить ИИ именно по этим признакам».

Большая часть участников (68,5%), сказали, что чувствовали эмпатию и понимание от своего специалиста. При этом большая часть ответов «нет (не чувствую)» была от тех, кто работал с живым психологом. Комфорт в общении был оценен в среднем на 4,8 балла из 5, максимальную оценку поставили 43,8% участников. Польза для психологического состояния оценена в 4,25 балла из 5.

Психологическое состояние в результате беседы улучшилось у 50% участников, остальные отметили, что оно не изменилось, а один участник отметил, что состояние незначительно ухудшилось. Эмоции, которые испытывали участники за эту неделю:

  • «восторг, грусть, удивление, радость, расширение»,

  • «грусть, радость»,

  • «любопытство, осторожность»,

  • «ровные, спокойные, как обычно»,

  • «комфортные: чувство облегчения — я увидела для себя пути решения»,

  • «довольно приятные — действительно немного помогло снять психологическое напряжение»,

  • «мне было хорошо»,

  • «расковыряли старые раны, которые начали заживать»,

  • «сначала при общении был интерес, потом он снизился, так как я не видела желания от собеседника „докопаться“ до сути проблемы. Вторая половина недели была, можно даже сказать, депрессивной»,

  • «обычные»,

  • «радость, удивление, доброжелательность, умиротворение»,

  • «было иногда интересно ждать ответ, на некоторые вопросы было интересно отвечать, но ловила себя на раздражении, когда диалог сбивался и приходилось пояснять по второму разу или указывать на путаницу»,

  • «любопытство»,

  • «нейтральные»,

  • «предвкушение»,

  • «разные, от слез до эмоционального спокойствия».

Три человека приняли ИИ за живого психолога, а два человека приняли живого психолога за ИИ.

Признаки, по которым участники приняли живого психолога за искусственный интеллект

  • «Теплые ответы, включенность в мою тему, поддержка, интересный взгляд на решение моих задач. Использование сложных фраз поддержки: „Спасибо, что поделились переживанием, это действительно важно“ и других похожих. Обычно люди используют формулировки проще. Не увидел попытки развернуть мои ответы».

  • «Незначительные ошибки восприятия ответов, отсутствие реакции на шутки как на способ установить связь, иногда слишком буквальное восприятие того, что было написано».

Признаки, по которым ИИ приняли за живого человека

  • «В начале у меня точно был ИИ. Ответы одинаковые по объему текста, слишком выверенный текст, слова как из книги. После замены на второй или третий день пришел другой специалист. И там по слогу написания я поняла, что это живой человек».

  • «Мне в начале почему-то показалось, что был ИИ. Потом пришло уведомление на почту, что сменили специалиста. И дальше как будто работали с настоящим человеком. Я как-то имела опыт общения с ИИ как с психологом (в другом боте), там ответы были сухими. А тут специалист был внимателен к деталям, как будто человек общался. Хотя были моменты, когда специалист возвращал обратно, отзеркаливал мои сообщения, тут появлялась мысль про ИИ. Но потом давалась обратная связь, детально смотрели в каждый пункт сообщения. Больше склоняюсь, что общение было с живым человеком, но местами, возможно, мог бы писать ИИ».

  • «Мне очень понравилось общение в таком формате и именно с данным психологом. Даже через текст чувствовалась поддержка, профессионализм, интерес к проблеме клиента. Мне психолог очень помог продвинуться в моей теме: разбирался в моем вопросе, вникал в каждую деталь, помог выстроить опоры, при этом держать фокус на цели, помог „переоформить“ слово „надо“ в хорошем ключе. Мне от этого стало легче. Как будто после работы с психологом ушел большой груз, тяжесть, которая тянула меня вниз и не давала идти вперед к своим целям. И очень меня поразило, что психолог помог шире взглянуть на свои страхи и желания. Это то, что мне было нужно как воздух. При этом чувствовалась бережность со стороны психолога, внимание к деталям и неоднобокое видение ситуации. Я очень довольна результатом работы с психологом. Благодарю за такую возможность!»