ТехноСводка

Наука

Семь чат-ботов распознали ИИ-собеседников лишь в трёх из 98 проверок

В исследовании Университета Париж Сите семь чат-ботов выявили ИИ лишь в трёх из 98 проверок, а подробная легенда позволила ботам избежать обнаружения во всех случаях.

Работа опубликована в журнале Computers in Human Behavior Reports и описывает имитацию теста Тьюринга с ИИ в роли интервьюеров. Среди них были ChatGPT 4.5, Claude 3.7 Sonnet, Gemini 2.5 Pro и Grok 3: каждая модель могла задать до десяти вопросов собеседнику, которым выступал человек или другой бот.

Боты-собеседники получали либо короткую инструкцию изображать человека, либо подробную легенду о 21-летнем бегуне, увлекающемся джазовой трубой. Все три обнаружения пришлись на вариант с короткой инструкцией, тогда как подробная легенда помогла скрыть характерные признаки вроде слишком аккуратных структурированных ответов.

В среднем модели принимали другие нейросети за людей чаще, чем настоящих участников. Авторы предлагают дополнять алгоритмические детекторы криптографическими подписями и контролем со стороны человека.

  • Скрытые участники — 20 добровольцев и семь моделей
  • Интервьюерам разрешали задать до десяти вопросов
  • Ни один бот с подробной легендой не был обнаружен

Источники

Текст подготовлен автоматически по материалам источников и может содержать неточности.