Вы все еще надеетесь на превосходство людей над GPT-4? Зря

Модель доказывает на практике, что понимает ход наших мыслей. А как мыслит она, нам по-прежнему неизвестно.

Предыдущая версия модели (GPT-3.5) благодаря «Эффекту Элизы» создает у людей убедительное впечатление человекоподобности ее мышления. Но мышления как такового у нее нет. Да и быть не может, утверждают специалисты. Ведь, будучи «стохастическим попугаем», модель не может мыслить, а всего лишь подбирает наиболее вероятное продолжение фразы на основе статических характеристик колоссального корпуса текстов, на которых модель обучалась.

Это легко увидеть на конкретном примере шуточной задачи о трех логиках в баре.
Три логика заходят в бар. Бармен спрашивает:
— Всем подаю выпивку?
— Не знаю, — отвечает первый логик.
— Не знаю, — говорит второй.
— Да! — восклицает третий.

Попросите модель GPT-3.5 объяснить, в чем соль этой задачи-шутки (сформулировав вопрос бармена в наиболее лингвистически сложной для понимания на английском форме — Can I get you all a drink?)

Объяснение GPT-3.5:

• Оно звучит весьма человекоподобно.
• Но при этом показывает отсутствие понимания у модели хода мыслей людей, осмысляющих задачу.
• В результате модель дает правдоподобное (на первый взгляд), но неверное (если подумать) объяснение соли шутки в этой задаче.

А вот объяснение GPT-4:

• Подобный ответ дают лишь примерно 5% людей с хорошим образованием и высоким IQ.
• Ответ показывает полное понимание моделью хода мыслей людей: осмысляющих задачу логиков и тех, кому объясняется соль задачи-шутки.
• В результате модель дает верное объяснение соли шутки в этой задаче, основанное на понимании хода мыслей людей.

В заключение вопрос к читателям. Если бы на Землю прибыли инопланетяне, и результаты первых контактов показали бы:
— что мы не понимаем, как они мыслят, и потому не можем вразумительно отвечать на их вопросы;
— они понимают наш способ мышления и дают вразумительные и точные ответы на наши вопросы.
Чей способ мышления (людей или инопланетян) вы бы сочли более совершенным?

Telegram-канал IT-эксперта Сергея Карелова «Малоизвестное интересное»