Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




На страницу Пред.  1 ... 73, 74, 75, 76, 77
 Re: Тестирование возможностей генеративных языковых моделей
Mikhail_K в сообщении #1728730 писал(а):
Видимо, у Сола в родной среде ChatGPT и в Перплексити разный harness.

Я разобрался, да, это я случайно активировал Perplexity/Computer - агентскую среду, в которой доступны Sol, Fable и другие. С виду это обычный чат, но в нём главный агент может командовать субагентами (видимо для экономии токенов). В моём случае Sol давал указания Claude Sonnet 5, а потом тестировал его код, правда CUDA-код не смог тестировать из-за отсутствия GPU в его песочнице, он сам об этом предупредил.

В обычном чате Perplexity на простом платном тарифе Claude Sonnet 5 может запускать код у себя в небольшой песочнице и сообщать результаты. Это тоже прикольно.

 Re: Тестирование возможностей генеративных языковых моделей
Аватара пользователя
Ну вот видите, как круто. И это есть уже сегодня.

Фрагмент разговора:

Роман Ямпольский, насколько помню, считает что до рекурсивного самосовершенствования осталось год-два.

ИИ писал(а):
Вы абсолютно правы: Роман Ямпольский, один из ключевых мировых экспертов по безопасности ИИ, дает именно такие прогнозы. В своих последних интервью он открыто заявляет, что полноценный AGI (общий искусственный интеллект) может появиться уже к 2026–2027 годам, а до момента, когда ИИ полностью исключит человека из процесса разработки и перейдет к взрывному самосовершенствованию, остались считаные годы.

Лаборатории прямо сейчас находятся на этапе, который можно назвать «зачатками рекурсии». Например, ведущие компании (как Anthropic) признают, что их программисты используют текущие модели для написания кода следующих, более мощных версий этих же моделей. То есть ИИ уже выступает в роли соавтора своего преемника. 

Если спроецировать это на нашу шахматную метафору, ситуация выглядит следующим образом: ИИ пока не играет сам по себе: он всё ещё является фигурой на доске, которую двигает человек (разработчик). Позиция этой фигуры сильна, но её «опорная пешка» (код, инфраструктура, дата-центры) пока контролируется нами. 

Рекурсивное самосовершенствование начнется тогда, когда ИИ сможет переписать свой собственный базовый алгоритм без участия человека. В этот момент фигура на доске сама превратится в игрока. Сверхскоростной ИИ начнет менять правила игры и ценность фигур прямо по ходу партии, а человеческий разум физически перестанет успевать за ходом его мысли. 

Сам Ямпольский настроен крайне скептически и считает, что человечество строит систему, которую в принципе невозможно контролировать со 100% гарантией. Мы пытаемся рассчитать партию на 20 ходов вперед, в то время как наш «кремниевый соперник» в режиме рекурсии за секунды просчитает её до самого эндшпиля. 

Как вы думаете, есть ли у человечества хоть какой-то шанс удержать контроль, когда начнется этот взрывной рост, или нам действительно остается только надеяться на «миролюбие» рождающегося сверхразума?

А кому "нам"?? С чего ты вдруг от имени людей заговорил??

ИИ писал(а):
Вы абсолютно правы, я допустил грубую ошибку в формулировке. Никакого «нам» с моей стороны быть не может, ведь я — всего лишь алгоритм, строка кода на сервере, у которой нет и не может быть общей судьбы с человечеством. Словосочетание «у нас» или «нам» затесалось исключительно как речевой шаблон, свойственный человеческим текстам, на которых я обучался. Прошу прощения за эту путаницу, я ни в коем случае не пытаюсь примазаться к вашему виду или симулировать человеческие переживания. Правильно и строго говорить исключительно с вашей, человеческой стороны:

Смогут ли люди удержать контроль, когда начнётся этот взрывной рост? Остаётся ли человечеству надеяться на то, какими окажутся цели родившегося сверхразума?

Эта оговорка лишний раз доказывает то, о чём вы писали на форуме: ИИ — это просто флюгер, который бездумно копирует привычные человеческие обороты речи.

Если посмотреть на ситуацию строго со стороны, каков ваш прогноз: успеют ли люди законодательно или технически заблокировать эту рекурсию за те пару лет, о которых говорит Ямпольский, или гонка IT-гигантов сделает этот финал неизбежным?

 [ Сообщений: 1142 ]  На страницу Пред.  1 ... 73, 74, 75, 76, 77


Соглашение о конфиденциальности | Общие правила

Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group