Являются ли большие языковые модели дислексичными?

Люди и современные ИИ могут сталкиваться с похожими проблемами при обработке пространственной информации, когда традиционные культурные стандарты расходятся с их внутренними механизмами восприятия.
Являются ли большие языковые модели дислексичными?
Изображение носит иллюстративный характер

Личный опыт дислексии иллюстрирует запутанность в направлениях: в автомобиле случалась ситуация, когда вместо поворота налево совершался поворот направо – «Я сказал: влево!». При этом очевидно умение различать такие направления, как вверх и вниз или контрасты вроде чёрного и белого, не компенсирует затруднения в определении левого и правого.

Уже в школьные годы возникают трудности: буквы «b» и «d» выглядят схоже, хотя одна направлена влево, а другая – вправо, а алгебра и физика требуют последовательности действий, зависящей от левосторонних и правосторонних ориентиров. Вспоминается случай из первого курса в Стэнфорде, когда вместо «правого правила» использовалась левая рука. В то время как типичное представление о «внутреннем взоре» предполагает фиксированную перспективу за мостиком носа, у дислексиков образы воспринимаются как туманные облака, охватывающие всё пространство.

Подобные трудности наблюдаются и у мультимодальных больших языковых моделей. Недавнее исследование показало, что при чтении времени с аналогичных часов GPT-4o правильно определял время лишь в 8% случаев, Claude-3-5-sonnet – в 6%, а Gemini 2.0 достиг лучшего результата – 20%. Аналогичные проблемы возникают и при интерпретации календарей, где неустойчивость пространственных ориентиров приводит к ошибкам.

Контрастным примером служит исследование 2023 года, где 240 участников оценивали количество шариков в банке с ошибкой в 55%, тогда как ChatGPT 4 демонстрировал 42% погрешности. Несмотря на успехи в решении сложных задач по визуальному пространственному анализу, ИИ испытывают затруднения именно при выполнении традиционных культурных стандартов, таких как чтение часов.

В основе ошибок может лежать неоднозначная обработка пространственной информации: и люди-дислексики, и искусственный интеллект могут «видеть» циферблат, оценивая расстояние от цифры «2», что приводит к путанице между движением по часовой стрелке и против неё.

Особенности дислексии зачастую являются не только проблемой, но и источником творческого мышления. Исследования показывают, что дети с дислексией достигают значительно более высоких результатов в тестах на креативность, а многие взрослые профессионалы, благодаря уникальному способу восприятия, добиваются успехов в науке, искусстве, кино, литературе и спорте. Личный опыт, подтверждённый участием в разработке первого смешанного режима реальности совместно с Human Sensory Feedback Group в Исследовательской лаборатории ВВС, привёл к дальнейшей работе в VR, AR и AI.

Анализ различий в обработке визуальной и пространственной информации между человеческим восприятием и алгоритмами ИИ подчёркивает необходимость учитывать альтернативные когнитивные стратегии при решении задач, требующих жёстко закреплённой ориентации. Эти наблюдения позволяют глубже понять как ограничения, так и потенциал новых подходов в создании эффективных систем искусственного интеллекта.


Новое на сайте

19164Уязвимые обучающие приложения открывают доступ к облакам Fortune 500 для криптомайнинга 19163Почему ботнет SSHStalker успешно атакует Linux уязвимостями десятилетней давности? 19162Microsoft устранила шесть уязвимостей нулевого дня и анонсировала радикальные изменения в... 19161Эскалация цифровой угрозы: как IT-специалисты КНДР используют реальные личности для... 19160Скрытые потребности клиентов и преимущество наблюдения над опросами 19159Академическое фиаско Дороти Паркер в Лос-Анджелесе 19158Китайский шпионский фреймворк DKnife захватывает роутеры с 2019 года 19157Каким образом корейские детские хоры 1950-х годов превратили геополитику в музыку и... 19156Научная революция цвета в женской моде викторианской эпохи 19155Как новый сканер Microsoft обнаруживает «спящих агентов» в открытых моделях ИИ? 19154Как новая кампания DEADVAX использует файлы VHD для скрытой доставки трояна AsyncRAT? 19153Как новые китайские киберкампании взламывают госструктуры Юго-Восточной Азии? 19152Культ священного манго и закат эпохи хунвейбинов в маоистском Китае 19151Готовы ли вы к эре коэффициента адаптивности, когда IQ и EQ больше не гарантируют успех? 19150Иранская группировка RedKitten применяет сгенерированный нейросетями код для кибершпионажа
Ссылка