Если есть предложения по интересным экспериментам с GPT4 - могу попробовать.
Это будет не только тест, но и материал для одного разговорного клуба англоязычной литературы.
1) Дать GPT-4 почитать
этот 10-страничный рассказ
2) Попросить его сделать краткий пересказ сюжета этого рассказа (на английском)
3) Если этот пересказ более-менее адекватный, то в отдельном сеансе попросить его придумать 10-страничный рассказ на сюжет из п.2 (на английском).
Получится как бы соревнование между автором и чат-ботом на тему одного сюжета.
Речь идет о рассказе Лема (
здесь на русском), где фактически предсказываются нынешние LLM. Фрагмент из рассказа:
Цитата:
Поэты сорганизовали несколько митингов протеста и потребовали опечатать машину, но никто, кроме них, не обращал внимания на феномен. Редакции газет были даже довольны, поскольку Электрувер, писавший под несколькими тысячами псевдонимов сразу, представлял готовую поэму заданных размеров на любой случай, и эта поэзия, хоть и на заказ, была такого качества, что читатели раскупали газеты нарасхват, а улицы так и пестрели лицами, полными неземного блаженства, мелькали бессознательные улыбки и слышались тихие всхлипывания. Стихи Электрувера знали все; воздух сотрясали
хитроумнейшие рифмы, а наиболее впечатлительные натуры, потрясенные специально сконструированными метафорами или ассонансами, даже падали в обморок; но и к этому был подготовлен титан вдохновения: он сразу же вырабатывал соответствующее количество отрезвляющих сонетов.