Тестирование возможностей ChatGPT

[mihaild]

Рецензия от GPT-4 на «превентивное пространство ?»

Используется синтаксис Text

Текст касается некоторых идей и концепций, связанных с квантовыми явлениями, отношениями объектов в пространстве и механизмами возникновения естества. Однако изложение этих идей не является ясным и структурированным, что делает понимание текста затруднительным. В тексте упоминаются результаты работы П. Эренфеста и Григория Перельмана, но контекст и объяснение их открытий также не представлены четко.

Смысл есть, но он разрознен и не ясно изложен, что затрудняет понимание основных идей и выводов, описанных в тексте.

[Утундрий]

mihaild
А скормите ему смеха ради пример шизофазии. Интересно, тоже смысл найдёт?

[katerinasz]

Yadryara в сообщении #1582419 писал(а):

Небось если его спросить, что такое "Пифагоровы штаны" он опять начнёт про карманы рассказывать. Даже если закавычить. Ещё не со всеми знаниями человечества он знаком.

вот, что ответил:
«Пифагорейские штаны» (Пифагорейские штаны) — русское выражение, дословно переводится как «пифагорейские штаны». Выражение используется для обозначения ситуации, когда кто-то находится в затруднительном положении, чувствует себя некомфортно или испытывает чувство стеснения или ограничения.

Происхождение выражения не совсем ясно, но есть несколько теорий. Одна из теорий состоит в том, что это выражение относится к тому факту, что Пифагор и его последователи носили свободную одежду, напоминающую мешковатые штаны, что позволяло им свободно двигаться и беспрепятственно выполнять свои математические и философские упражнения. Другая теория предполагает, что это выражение является метафорической ссылкой на теорему Пифагора, фундаментальное понятие в геометрии и математике, описывающее отношения между сторонами прямоугольного треугольника.

Независимо от своего происхождения, «Пифагоровые шатаны» — это красочное и широко известное выражение в русской культуре, которое часто используется в беззаботной или юмористической форме для описания сложной или неудобной ситуации.

[mihaild]

Утундрий в сообщении #1586034 писал(а):

А скормите ему смеха ради пример шизофазии.

Внезапно, если брать канонический пример из википедии, то ответ GPT-4 крайне разумен:

Используется синтаксис Text

Фрагмент текста представляет собой набор непонятных и бессмысленных фраз. Смысл его сложно определить, так как предложения не связаны между собой и кажутся случайными. Темы в тексте включают упоминания о профессиях, экономике, библиотеках, Мурманском полуострове и дипломатии, но их связь и общая идея не ясны.

GPT-3.5 же смысл успешно находит.

Используется синтаксис Text

Этот фрагмент кажется немного бессвязным, но в целом он говорит о том, что автор родился на улице Герцена, работал в разных профессиях, в том числе как библиотекарь и продавец, и что каждая профессия вносит свой вклад в общую "систему" (возможно, экономическую). Он также упоминает фотографию Мурманского полуострова и о том, что люди могут стать "воздушными асами" и "воздушными планетами" и внести свой вклад в науку и дипломатию. В целом, это философский текст, который утверждает, что каждый человек имеет свою роль в обществе и может внести свой вклад в науку и культуру.

-- 20.03.2023, 13:59 --

Используется синтаксис Text

"Пифагоровы штаны" - это шутливое название для геометрической фигуры, которая демонстрирует теорему Пифагора. Эта фигура, обычно состоит из трех квадратов, расположенных таким образом, что они образуют прямоугольный треугольник. Квадраты строятся на сторонах этого треугольника, а именно на катетах и гипотенузе.

Причем по "трем квадратам, образующим прямоугольный треугольник" видно, что модель не просто запомнила текст, а пытается (с переменным успехом) пересказать смысл.

[Утундрий]

То есть, можно сказать, что версия $4$ переросла джокера $3.5$ и стала полноценным шутом.

[ozheredov]

mihaild (на самом деле ChatGPT) в сообщении #1586104 писал(а):

В целом, это философский текст

+100500. Примерно так все философские тексты и устроены.

[MoonWatcher]

mihaild в сообщении #1585604 писал(а):

Если есть предложения по интересным экспериментам с GPT4 - могу попробовать.

Это будет не только тест, но и материал для одного разговорного клуба англоязычной литературы.

1) Дать GPT-4 почитать этот 10-страничный рассказ
2) Попросить его сделать краткий пересказ сюжета этого рассказа (на английском)
3) Если этот пересказ более-менее адекватный, то в отдельном сеансе попросить его придумать 10-страничный рассказ на сюжет из п.2 (на английском).

Получится как бы соревнование между автором и чат-ботом на тему одного сюжета.

Речь идет о рассказе Лема (здесь на русском), где фактически предсказываются нынешние LLM. Фрагмент из рассказа:

Цитата:

Поэты сорганизовали несколько митингов протеста и потребовали опечатать машину, но никто, кроме них, не обращал внимания на феномен. Редакции газет были даже довольны, поскольку Электрувер, писавший под несколькими тысячами псевдонимов сразу, представлял готовую поэму заданных размеров на любой случай, и эта поэзия, хоть и на заказ, была такого качества, что читатели раскупали газеты нарасхват, а улицы так и пестрели лицами, полными неземного блаженства, мелькали бессознательные улыбки и слышались тихие всхлипывания. Стихи Электрувера знали все; воздух сотрясали
хитроумнейшие рифмы, а наиболее впечатлительные натуры, потрясенные специально сконструированными метафорами или ассонансами, даже падали в обморок; но и к этому был подготовлен титан вдохновения: он сразу же вырабатывал соответствующее количество отрезвляющих сонетов.

[mihaild]

MoonWatcher в сообщении #1586466 писал(а):

1) Дать GPT-4 почитать этот 10-страничный рассказ

В ChatGPT можно передавать максимум несколько десятков слов.

[MoonWatcher]

mihaild
Вы имели в виду GPT-4? В обзорах (например, здесь) встречал тесты, где ему давали почитать многостраничные тексты и убеждались, что он понимает контекст. Как я понял, запрос ограничен 32 тыс токенов.

[mihaild]

MoonWatcher в сообщении #1586486 писал(а):

Вы имели в виду GPT-4?

Я имею в виду ChatGPT4. Внутри у ChatGPT4 что-то очень похожее на GPT4 (хотя точно не знаю, дообучали ли они модель, и как меняют промпт), но интерфейсно ChatGPT не соглашается принимать длинные тексты. Доступ к API GPT4 предоставляется отдельно, и у меня его нет (и я не разбирался, как его получить).

[MoonWatcher]

mihaild
ChatGPT4 - это ChatGPT Plus, по платной подписке? Он находится по ссылке chat.openai.com/chat?

[mihaild]

MoonWatcher в сообщении #1586493 писал(а):

ChatGPT4 - это ChatGPT Plus, по платной подписке? Он находится по ссылке chat.openai.com/chat?

Да.

[MoonWatcher]

mihaild
Последний вопрос: ссылки (а-ля "прочти текст по такой-то ссылке") он тоже не принимает?

[mihaild]

MoonWatcher в сообщении #1586495 писал(а):

Последний вопрос: ссылки (а-ля "прочти текст по такой-то ссылке") он тоже не принимает?

Доступа к интернету у той модели нет.

[gevaraweb]

Я что-то пропустил в школе, ответ удивил:
Почему Герасим утопил Муму?

ChatGPT писал(а):

Герасим, главный герой рассказа "Муму" Ивана Тургенева, не утопил свою собаку Муму намеренно или злостью. Напротив, он очень любил свою собаку, которая была единственным существом, которое ему близко и дорого.

В конце рассказа, Муму случайно попала в пруд, и Герасим, несмотря на то, что сильно любил свою собаку и хотел ее спасти, не смог этого сделать из-за своей физической неспособности. Это было для него большой трагедией, и он умер от горя через несколько дней после происшествия. Таким образом, Герасим не утопил Муму нарочно, а несчастный случай привел к гибели его любимой собаки и его собственной трагической смерти.