Причем тут внутренне чутье? У LLM есть совершенно конкретные и измеримые проблемы. Даже в схемах Винограда они всё еще людей догнать не могут.
Я доселе не знал что такое схемы Винограда, сейчас нагуглил. Вот пара примеров и ответы на них Claude 2:
Цитата:
Трофей не помещается в коричневый чемодан, потому что он слишком большой. Что является слишком большим?
Трофей не помещается в чемодан, потому что трофей слишком большой для чемодана. Таким образом, слишком большим является трофей.
Цитата:
Джим утешал Кевина, потому что он был расстроен. Кто был расстроен?
Из предложения следует, что Кевин был расстроен, поэтому Джим его утешал. Таким образом, расстроен был Кевин.
Как видите справился. Если подкинете свои примеры - проверю их.