Простой логический вопрос поставил в тупик даже самый продвинутый ИИ

Исследователи из некоммерческой организации по исследованию искусственного интеллекта LAION показали, что даже самые сложные большие языковые модели (LLM) можно поставить в тупик простым вопросом.

В статье (https://arxiv.org/html/2406.02061v1#abstract), которая еще не прошла рецензирование, исследователи рассказали, как задавали разным моделям генеративного ИИ вопрос: «У Алисы есть [X] братьев, а также [Y] сестры. Сколько сестер у брата Алисы?».

Ответить не столь сложно. Например, у Алисы три брата и две сестры, значит, у каждого из братьев две сестры плюс сама Алиса. Таким образом, у каждого брата по три сестры.

Специалисты тестировали модели компании OpenAI: GPT-3, GPT-4 и GPT-4o; Anthropic Claude 3 Opus, Gemini от Google и модели Llama компании Meta\*, а также Mextral от Mistral AI, Dbrx от Mosaic и Command R+ от Coher. Когда ИИ задали вопрос, то оказалось, что он явно не оправдывает ожиданий.

Только одна модель, новая GPT-4o, добилась успеха в логическом тесте. Остальные не могли понять, что Алиса тоже сестра каждого из братьев в ее семье.

Размещено через приложение ЯПлакалъ

А и Б сидели на трубе...

Первые получились гуманитариями

Чтобы не спорить понапрасну насчёт "прорывных" технологий, предлагаю дать решить ИИ следующую школьную задачу:

Есть квадрат ABCD, есть 4 треугольника внутри квадрата, площади трёх из которых известны: BCE = 3, EDF = 5, FAB =4. Нужно найти площадь треугольника BEF. Известно также, что точка E расположена на отрезке CD, а точка F расположена на отрезке DA. Напишите полное решение со всеми вычислениями.

Приведите сюда ответы ИИ и мы вместе с Вами обсудим великую мощь ИИ при решении ПРОСТОЙ ШКОЛЬНОЙ задачи.
Вот поэтому ИИ, это пузырь, который лопнет, как и доткомы.

Вот ответ на вопрос в старт-посте чат-бота версии: 3.5

Это сообщение отредактировал Morozincev - 11.06.2024 - 15:32

Вы сначала покажите реально существующий ИИ, а не набор алгоритмов по анализу банков данных, вот тогда можно будет и вопрос задать...

ИИ ставят в тупик логические вопросы не существующие до этого момента в интернете! Т.е. он не может отгадать того, чего не было раньше! Не откуда цитату найти!
Идея! Надо взять всем известные логические загадки, но полностью поменять слова в формулировке на синонимы, и наименование объектов упоминающихся в загадках заменить на абстрактные! Не сестра и брат, а дети одной матери, женского и мужского пола!
Найдет ли ИИ взаимосвязи, если все незнакомое?

Это сообщение отредактировал adnnin - 11.06.2024 - 15:37

ответил без проблем если поддтолкнуть

Это сообщение отредактировал gelezo131 - 11.06.2024 - 16:16

Проблема в том что ИИ пока не умеет хорошо в логику. То есть нейросеть может найти только по ей ведомым признакам, например, опухоль, на рентген-снимке, но если ее правильно и в должном объеме обучили. Может сгенерировать изображение. Может даже текст написать из кусков текста, которые она получила при обучении. И код программы она так же пишет - то есть создает что то похожее из того чему ее обучили. И загадки она тоже сможет отгадать исходя из похожих пар загадка-ответ, полученных, при обучении. Но вот там где именно нужно из фрагментов, полученных при обучении, создавать логическую цепочку с пониманием того, что происходит на каждом шаге, именно пониманием - так пока не очень получается. Так что бояться, того что айтишников или конструкторов заменит нейросеть пока не надо. А вот когда нейросети научаться в логику, тут будут проблемы посерьезнее. Думать то они будут гораздо быстрее человека. Тогда потребуется Джон Коннор.

Это сообщение отредактировал Muramidaza - 11.06.2024 - 15:40

Ну правильно, поэтому Скайнет и не смог убить всех людей)) Тут брат остался, там сестра.. А потом хуяк - и Джон Конор.

Отвечает вообще-то. и это вроде 3.5 гпт. Поправочка, тут снизу подметили. Отвечает, но неправильно))

Это сообщение отредактировал Ептыть - 11.06.2024 - 15:51

Ну, просто ИИ обучен, что Алиса это не обязательно девочка. Вот и тупит.

не вникал в задачу и че там ответило. но ответ вот:
Обозначим площадь треугольника BEF как x. Так как треугольники BCE и EDF не пересекаются, а треугольник FAB пересекается с каждым из них по одной стороне, то площадь треугольника ABCD равна сумме площадей треугольников BCE, EDF, FAB и BEF:
Площадь ABCD = Площадь BCE + Площадь EDF + Площадь FAB + Площадь BEF = 3 + 5 + 4 + x
Так как площадь ABCD равна площади квадрата, исходя из свойств квадрата, мы знаем, что его площадь равна стороне в квадрате:
Площадь ABCD = x^2
Таким образом у нас получается уравнение:
x^2 = 3 + 5 + 4 + x
x^2 = 12 + x
x^2 - x - 12 = 0
Решив это квадратное уравнение, находим два корня: x = 4 и x = -3. Поскольку в данном контексте площадь треугольника не может быть отрицательной, то итоговый результат: площадь треугольника BEF равна 4.

приведи пример

Выходит, чего-то этим сетям не хватает) Вот человек когда родился и растет - его же тоже обучают.. Но он умеет в логику потом (ну в большинстве), а нейросеть нет.. Вот чего не хватает? Сознания? Души? Хз...

ну так в твоём примере 5 сестёр у брата, так что не отвечает он верно.
Все мы немного не дотягиваем до GPT 4.0 ))

У Алисы 4 сестры есть. Сколько всего сестер в семье с учетом Алисы? 4+1=?
И что там тебе ответил ИИ?

Это сообщение отредактировал Selyanin23 - 11.06.2024 - 15:55

Так не правильно же отвечает.

В текущей ситуации (да и давно) не факт что Алиса - сестра.

alice cooper

Это сообщение отредактировал UlAlex - 11.06.2024 - 15:48

4 - это неверный ответ.

Вся херня в том, что ИИ не понимает, что Алиса это девочка. А понимает, что брат Алиса это мальчик с именем Алиса. Тогда все с его точки зрения правильно...
Пысы...
Опередили

Это сообщение отредактировал Sotomax - 11.06.2024 - 15:49

Без каких проблем? Сама Алиса там за человека в семье вообще не считается?

точно))) ну зато отвечает!!!)))

Что? )
Алиса + 4 сестры + 5 братьев. Сколько сестёр у брата Алисы? 4 сестры? )

Аналогично. ЧТо он ответил?
3 сестры у Алисы есть, Алиса для брата также сестра. Сколько сестер в семье? 3+1=?
Ну, ты тоже ИИ? "Высшая" математика не по зубам? )

Походу её там под плинтус опустили, может она токсичная очень, что её в расчет не берут)