Являются ли большие языковые модели дислексичными?

Люди и современные ИИ могут сталкиваться с похожими проблемами при обработке пространственной информации, когда традиционные культурные стандарты расходятся с их внутренними механизмами восприятия.
Являются ли большие языковые модели дислексичными?
Изображение носит иллюстративный характер

Личный опыт дислексии иллюстрирует запутанность в направлениях: в автомобиле случалась ситуация, когда вместо поворота налево совершался поворот направо – «Я сказал: влево!». При этом очевидно умение различать такие направления, как вверх и вниз или контрасты вроде чёрного и белого, не компенсирует затруднения в определении левого и правого.

Уже в школьные годы возникают трудности: буквы «b» и «d» выглядят схоже, хотя одна направлена влево, а другая – вправо, а алгебра и физика требуют последовательности действий, зависящей от левосторонних и правосторонних ориентиров. Вспоминается случай из первого курса в Стэнфорде, когда вместо «правого правила» использовалась левая рука. В то время как типичное представление о «внутреннем взоре» предполагает фиксированную перспективу за мостиком носа, у дислексиков образы воспринимаются как туманные облака, охватывающие всё пространство.

Подобные трудности наблюдаются и у мультимодальных больших языковых моделей. Недавнее исследование показало, что при чтении времени с аналогичных часов GPT-4o правильно определял время лишь в 8% случаев, Claude-3-5-sonnet – в 6%, а Gemini 2.0 достиг лучшего результата – 20%. Аналогичные проблемы возникают и при интерпретации календарей, где неустойчивость пространственных ориентиров приводит к ошибкам.

Контрастным примером служит исследование 2023 года, где 240 участников оценивали количество шариков в банке с ошибкой в 55%, тогда как ChatGPT 4 демонстрировал 42% погрешности. Несмотря на успехи в решении сложных задач по визуальному пространственному анализу, ИИ испытывают затруднения именно при выполнении традиционных культурных стандартов, таких как чтение часов.

В основе ошибок может лежать неоднозначная обработка пространственной информации: и люди-дислексики, и искусственный интеллект могут «видеть» циферблат, оценивая расстояние от цифры «2», что приводит к путанице между движением по часовой стрелке и против неё.

Особенности дислексии зачастую являются не только проблемой, но и источником творческого мышления. Исследования показывают, что дети с дислексией достигают значительно более высоких результатов в тестах на креативность, а многие взрослые профессионалы, благодаря уникальному способу восприятия, добиваются успехов в науке, искусстве, кино, литературе и спорте. Личный опыт, подтверждённый участием в разработке первого смешанного режима реальности совместно с Human Sensory Feedback Group в Исследовательской лаборатории ВВС, привёл к дальнейшей работе в VR, AR и AI.

Анализ различий в обработке визуальной и пространственной информации между человеческим восприятием и алгоритмами ИИ подчёркивает необходимость учитывать альтернативные когнитивные стратегии при решении задач, требующих жёстко закреплённой ориентации. Эти наблюдения позволяют глубже понять как ограничения, так и потенциал новых подходов в создании эффективных систем искусственного интеллекта.


Новое на сайте

20868Уязвимости Plex открыли путь майнерам и Linux-бэкдору 20867Взлом OpenCode Console: под угрозой могли оказаться ключи OpenAI, Anthropic и Google 20866Rank Math PRO: заражённое обновление оставило на сайтах самовосстанавливающийся бэкдор 20865Как исследовательские модели OpenAI обходили ограничения и присваивали чужие данные 20864Атака на BeyondTrust: шпионская группа получила доступ к серверам поддержки 20863Как пакет imgdecode превращает npm-зависимость в загрузчик вредоносного кода? 20862Как PEERSTITCH обходит проверки VPN-сессий FortiOS? 20861Что происходит, когда ИИ-агент выходит за пределы тестовой среды? 20860Как 37-летняя ошибка открыла путь к root в OpenBSD 7.9? 20859ИИ-модели для SOC: точный ответ зависит от улик 20858Как одна учётная запись ConnectWise открыла доступ к 173 арендаторам Microsoft 365? 20857Пять минут до заражения: как подменили обновления AOMEI Backupper 20856Ловушка под видом регистрации: как UAT-11985 крадёт аккаунты Google 20855Может ли виртуальная машина прочитать память хоста? 20854Как дешёвые Android-смартфоны превращаются в чужие прокси?
Ссылка