Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




На страницу Пред.  1 ... 4, 5, 6, 7, 8
 Re: Чувства ИИ
Igor_Zhuk в сообщении #1735377 писал(а):
А вот с квалиа уже интереснее: если под ними понимать именно субъективно переживаемое содержание, то квалиа возможны только в сознании — иначе получается «переживание, которое не переживается»


Эмоции (которые можно ассоциировать со словом квалиа) по поводу созерцания всяких-разных объектов и сцен лично я во сне переживаю значительно острее, чем наяву. А во сне во время болезни - еще острее. То есть, чем больше я бревно - тем больше во мне квалиа.

Igor_Zhuk в сообщении #1735377 писал(а):
И что именно должно произойти, чтобы мы сказали: да, вот здесь уже создан не функциональный аналог и не имитация чувств и переживания, а именно соответствующее свойство носителя?


Свойство носителя это название некоего параметра модели и его значение. Об этом очень хорошо пользователь epros говорит - найдите здесь поиском его рассуждения в теме "объективная реальность - что это?". Никаких объективно существующих свойств ни у чего нет. В рамках одной модели человек это робот, в рамках другой - создание по образу и подобию и т.д., в рамках третьей - биомясо. Модели эволюционируют и конкурируют за наиболее адекватное предсказание последствий выбора стратегии поведения, как мемы.

 Re: Чувства ИИ
Аватара пользователя
Igor_Zhuk в сообщении #1735377 писал(а):
И что именно должно произойти, чтобы мы сказали: да, вот здесь уже создан не функциональный аналог и не имитация чувств и переживания, а именно соответствующее свойство носителя?

ИМХО - ничего, трудная проблема сознания не имеет решения. Вы даже в отношении других людей не можете быть уверенным в наличии чувств и ощущений - это всего лишь допущение, основанное на сходстве этих людей с вами, испытывающим чувства и ощущения. Любая другая форма разума, которая вдруг заявит о своих чувствах, вполне может иметь отличную от нашей организацию. Мы сможем фиксировать у нее какие-то внутренние активации, связанные, например, с эмоциями - как это уже здесь и сейчас происходит с LLM. Но мы никогда не сможем убедиться в субъективном переживании этого опыта.

 Re: Чувства ИИ
MoonWatcher в сообщении #1735382 писал(а):
мы никогда не сможем убедиться в субъективном переживании этого опыта


Субъективное переживание объективно не существует и потому отрезается бритвой Оккама

 Re: Чувства ИИ
Igor_Zhuk в сообщении #1735377 писал(а):
Прочитал тему целиком. Кажется, большая часть расхождений здесь возникает потому, что в обсуждении постоянно меняется сам предмет разговора.

И что же вы обманули, сказав, что вы не философ?

P.S. Расхождения возникают не от того, что меняется предмет разговора, а это предмет разговора меняется от того, что имеются расхождения.

 Re: Чувства ИИ
ozheredov в сообщении #1735379 писал(а):
Эмоции (которые можно ассоциировать со словом квалиа) по поводу созерцания всяких-разных объектов и сцен лично я во сне переживаю значительно острее, чем наяву. А во сне во время болезни - еще острее. То есть, чем больше я бревно - тем больше во мне квалиа.


Так сон ведь не означает отсутствие сознания. Скорее это хороший пример того, что сознание и бодрствование — не одно и то же. Причём сон здесь даже интереснее обычного бодрствования. В нём есть целая переживаемая сцена: какие-то объекты, люди, события, иногда собственное тело и какое-то «я» внутри сна.

Но образ «меня» внутри этой сцены и то, кому сама сцена вообще дана, — не обязательно одно и то же.

Источник существования спящего человека находится не в том Париже, комнате или лесу, которые ему снятся. Внутри сна может быть представлен даже собственный образ, но это всё равно ещё один элемент переживаемой сцены.

Так что пример со сном я бы скорее записал в пользу квалиа, чем против них. А вот проверять наличие квалиа при полном отсутствии сознания посмертно я всё-таки не рекомендовал бы :)


MoonWatcher в сообщении #1735382 писал(а):
Вы даже в отношении других людей не можете быть уверенным в наличии чувств и ощущений - это всего лишь допущение, основанное на сходстве этих людей с вами, испытывающим чувства и ощущения.


Вот с этим согласен на 100%. И здесь, по-моему, есть принципиальная асимметрия. В отношении чужого переживания я действительно строю модель. Вижу поведение человека, слышу его речь, знаю устройство нервной системы, могу измерять какие-то физиологические и нейронные корреляты — и на основании всего этого приписываю ему субъективный опыт.

Но в отношении собственного текущего переживания такой промежуточной гипотезы нет.

Можно ошибиться в причине боли. Можно испытывать фантомную боль. Можно переживать боль во сне. Можно вообще ошибаться относительно того, существует ли объект, который, как мне кажется, эту боль вызвал. Но если переживание боли присутствует, то иллюзорной может оказаться причина, тело, ситуация, интерпретация — но не сам факт наличия переживаемого качества. То же самое с радостью, цветом, страхом и т.д.

На мой взгляд, прежде чем искать квалиа у LLM, неплохо бы сначала разобраться, что именно мы называем квалиа в единственном случае, где имеем к ним непосредственный доступ — в собственном опыте.

Тем более если мы хотим получить какой-то общий, платформонезависимый критерий сознания, пригодный и для носителя, устроенного совсем не как человек. Тогда было бы логично применить тот же принцип и к себе. Не начинать с готового: «у человека квалиа есть, теперь поищем нечто похожее у машины», — а сначала спросить:

Что именно в собственном опыте я называю квалиа, как я это различаю и что остаётся неизменным при смене содержания переживания? И если мы когда-нибудь рассчитываем узнать сознание в носителе совершенно иной природы, наверное, сначала стоит понять, что именно мы пытаемся в нём узнать. Причём я бы предположил, что это не будет выглядеть как ещё один объект, который можно где-то обнаружить внутри системы.

Если сознание — это не ещё один элемент переживаемой сцены, а условие того, что сцена вообще кому-то дана, то ожидание найти само сознание как очередную деталь механизма может быть изначально неверной постановкой задачи.


ozheredov в сообщении #1735384 писал(а):
Субъективное переживание объективно не существует и потому отрезается бритвой Оккама

А вот здесь, мне кажется, бритва пошла немного не с той стороны :) Бритвой Оккама имеет смысл удалять лишние сущности, которые мы добавили в модель для объяснения наблюдаемого.

Но субъективное переживание для самого субъекта — не дополнительная сущность объясняющей модели. Это как раз исходное наблюдаемое.

Вы предлагаете удалить субъективное переживание как ненаблюдаемую сущность. Но любая ваша «объективная реальность» уже появляется только внутри некоторого акта наблюдения. Можно сомневаться в модели мира, в теле, в причине ощущения, в существовании других субъектов. Но сам факт данности чего-либо — это не гипотеза модели. Это условие, при котором вообще становится возможен разговор о моделях.

Если применять бритву Оккама совсем последовательно и оставлять только непосредственно достоверное, то раньше субъективного переживания под неё попадёт как раз любая «объективная реальность как она есть».

Она субъекту непосредственно тоже никогда не дана. Дан лишь некоторый переживаемый образ мира, сформированный его восприятием. А уже затем мы строим модель, согласно которой этому переживанию соответствуют внешний объект, другой человек, фотон, нейрон, стол и т.д. Поэтому субъективное переживание нельзя вырезать тем же способом, каким вырезается лишний параметр теории. Если удалить и его, получится уже не более простая модель. Исчезнет сам исходный материал, относительно которого вообще можно было бы сравнивать одну модель с другой.


ozheredov в сообщении #1735379 писал(а):
Свойство носителя это название некоего параметра модели и его значение. … Никаких объективно существующих свойств ни у чего нет.


С первой частью я вполне могу согласиться. Допустим, «жизнь», «интеллект», «сознание», «квалиа» — параметры наших моделей носителя. Тогда возникает следующий вопрос: что сохраняется при смене моделей? Человека можно описать как биологический организм, физическую систему, нейронную сеть, систему управления и ещё множеством способов. Набор параметров и язык описания будут разными.

Но если некоторое отношение устойчиво восстанавливается при переходе между достаточно хорошими моделями и позволяет лучше предсказывать наблюдаемое, то оно уже становится интереснее произвольного названия параметра. Поэтому меня как раз меньше интересуют «объективно существующие свойства сами по себе». Гораздо интереснее инварианты между описаниями. И применительно к сознанию вопрос можно поставить так:

Что должно сохраняться при смене моделей носителя, чтобы мы продолжали приписывать ему субъективное переживание?

P.S
Mihaylo в сообщении #1735385 писал(а):
P.S. Расхождения возникают не от того, что меняется предмет разговора, а это предмет разговора меняется от того, что имеются расхождения.

Вот именно :) Я и предлагаю в первую очередь исследовать эти расхождения. Если разные исходные позиции приводят к разным предметам разговора, разве не интереснее понять, в каком месте они расходятся, что именно меняется и что при этом остаётся общим?

 Re: Чувства ИИ
Аватара пользователя
Igor_Zhuk в сообщении #1735395 писал(а):
Тем более если мы хотим получить какой-то общий, платформонезависимый критерий сознания, пригодный и для носителя, устроенного совсем не как человек. Тогда было бы логично применить тот же принцип и к себе. Не начинать с готового: «у человека квалиа есть, теперь поищем нечто похожее у машины», — а сначала спросить:

Что именно в собственном опыте я называю квалиа, как я это различаю и что остаётся неизменным при смене содержания переживания? И если мы когда-нибудь рассчитываем узнать сознание в носителе совершенно иной природы, наверное, сначала стоит понять, что именно мы пытаемся в нём узнать. Причём я бы предположил, что это не будет выглядеть как ещё один объект, который можно где-то обнаружить внутри системы.

В том-то и проблема - мы внутри системы. И если для понимания сознания требуется нечто вроде сверхсознания, т.е. следующего уровня восприятия реальности, то шансов пока нет. Возможно новый уровень восприятия появится, если человечество объединится в некое коллективное сознание - на уровне которого возникнет понимание феномена индивидуальных субъективных переживаний.

Igor_Zhuk в сообщении #1735395 писал(а):
Если сознание — это не ещё один элемент переживаемой сцены, а условие того, что сцена вообще кому-то дана, то ожидание найти само сознание как очередную деталь механизма может быть изначально неверной постановкой задачи.

Вы имеете в виду некий аналог наблюдателя в квантовой физике?

 Re: Чувства ИИ
Igor_Zhuk в сообщении #1735395 писал(а):
Но в отношении собственного текущего переживания такой промежуточной гипотезы нет.


Смотрите - вот Вы упоминали сон, где Вы (я, он, она) в Париже. Скажите, Вы осознаете во сне, что этот Париж не настоящий? Нет. Точно так же например квалия, переживания и прочая лабуда могут быть просто рельсами, по которым физиология движет нейросеть человека. Ну а почему этих рельсов не может быть в LLM, когда они уже есть? :D

 Re: Чувства ИИ
MoonWatcher в сообщении #1735397 писал(а):
И если для понимания сознания требуется нечто вроде сверхсознания, т.е. следующего уровня восприятия реальности, то шансов пока нет.

А может быть, для начала можно взять более узкий феномен сознания — исследовать само восприятие, квалиа? Оно хотя бы в одном случае дано нам непосредственно: в собственном опыте. Тут шансов побольше, нет?

(Оффтоп)

MoonWatcher писал(а):
Возможно новый уровень восприятия появится, если человечество объединится в некое коллективное сознание - на уровне которого возникнет понимание феномена индивидуальных субъективных переживаний.

Я бы только иначе акценты расставил: человечеству, возможно, так или иначе придётся научиться действовать как более связное целое, чтобы вообще пройти технологическую сингулярность. Будет ли это достигнуто культурно, институционально, духовно или каким-то ещё способом — это уже совсем другая тема. Тут бы сначала с чувствами одного ИИ разобраться :)

Дело в том, что термин «наблюдатель» в физике довольно многозначен.

В одном прочтении квантовой механики наблюдатель задаёт сторону измерения, относительно которой фиксируется результат.

У фон Неймана границу «наблюдаемое — наблюдающее» можно передвигать по цепочке «объект — прибор — регистрация — человек»; наблюдатель оказывается стороной этого разреза, относительно которой результат уже предъявлен.

В реляционной интерпретации наблюдателем может выступать обычная физическая система, относительно которой состояние другой системы получает определённое значение.

Похожая конструкция есть и в теории относительности: наблюдатель задаёт систему отсчёта, относительно которой определяются время, расстояние, скорость и т.д.

Но, обратите внимание, во всех случаях есть общее: наблюдатель определяется не тем, каким объектом он является среди исследуемых объектов[/b, а той [b]ролью, которую он занимает в отношении процесса наблюдения: именно относительно него что-то различается, измеряется или получает определённое описание.] Вот такую аналогию я вижу между идеей наблюдателя и её реализациями в физике.

ozheredov в сообщении #1735402 писал(а):
Смотрите - вот Вы упоминали сон, где Вы (я, он, она) в Париже. Скажите, Вы осознаете во сне, что этот Париж не настоящий? Нет. Точно так же например квалия, переживания и прочая лабуда могут быть просто рельсами, по которым физиология движет нейросеть человека. Ну а почему этих рельсов не может быть в LLM, когда они уже есть? :D

Так ведь именно в этом и суть! Какая разница, настоящий Париж или нет? Я могу переживать [/b]и настоящий Париж, и Париж во сне.[/b] Реальность самого Парижа может вызывать сомнения, а вот факт того, что мне что-то переживается, — нет. И ваше «точно так же» здесь совершенно не подходит. Вы сначала указываете на то, что объект восприятия может оказаться иллюзией, но затем вдруг переносите это сомнение на сам факт того, что кто-то эту иллюзию переживает. Но это два принципиально разных вопроса.

Иллюзорным может быть содержание переживания, но не сам факт происходящего переживания. Это напоминает попытку вынуть собственные глаза, положить перед собой что-бы посмотреть на них теми же глазами. Глаз сам себя он не может увидеть непосредственно (только через проекцию, иллюзию, например отражение в зеркале), да и глаз не заменяет той позиции, из которой все рассматривается с помощью этого самого глаза.

Посмотрите на саму идею наблюдателя через призму симметрии, относительности. Если исходить из «объективного мира», то объекты в нём принимаются как данные, но однозначно указать среди них на самого наблюдателя как субъекта переживания невозможно. А если посмотреть с противоположной стороны, от самого наблюдателя? Для наблюдателя непосредственно достоверен сам факт переживания. А вот существует ли переживаемый мир независимо от этого переживания, уже неизвестно. Всё вокруг прямо сейчас может оказаться сном. Даже эта дискуссия. Но если мне что-то снится, то сам факт переживания сна уже не может быть иллюзией.

Представим даже совершенно мёртвую Вселенную, где нет ни одного воспринимающего существа. Возможно, она существует сама по себе. Но в ней некому засвидетельствовать ни её существование, ни её отсутствие. А теперь представим, что вся Вселенная мертва, кроме вас. Кто же тогда утверждает, что она мертва? Любой факт, который вы свидетельствуете, одновременно удостоверяет наличие самого свидетельствования, живого сознания! Даже если всё его содержание окажется иллюзией.

Получается симметричная пара: С объектной точки зрения /b] [b]мир принимается как данный, но субъекта переживания невозможно однозначно установить среди объектов. С точки зрения самого субъекта непосредственно достоверен факт переживания, но невозможно непосредственно удостоверить независимую реальность переживаемого мира.[/b]

А что касается LLM — почему у них принципиально не может быть квалиа? Я такого не утверждаю. Но только ли у LLM тогда? Во-первых все убедительные примеры, в которых мы приписываем субъективные переживания другому носителю, относятся к живым организмам. Собственный опыт нам дан непосредственно и достоверно, чужой — через косвенные признаки. Наличие живого, воспринимающего квалиа у LLM пока не установлено.

Во-вторых если же вы предполагаете, что достаточно накопить некоторую критическую сложность обработки информации — и вдруг возникает сознание и квалиа, то появляется множество вопросов. Где эта критическая точка? Какой именно алгоритм начинает что-то переживать, а какой ещё нет? Это зависит от сложности алгоритма, от процессора, от способа физической реализации? Ведь многие физические системы могут быть чрезвычайно сложными. Даже отдельный атом имеет богатую внутреннюю организацию. Но что именно в сложности LLM должно давать квалиа, если сложность сама по себе ещё ничего не объясняет?

Всем известен аминокислотный состав клеток жизни и ДНК. однако с нуля из "мертвых" молекул жизнь создать так и не удалось. С чего вы решили что с сознанием в кремнии будет иначе?

Если же считать субъективность, наличие переживаний фундаментальным свойством определённых информационных отношений, возникает вопрос: а насколько широко в природе представлены такие отношения? Джон Уилер когда-то предложил принцип «It from bit» — идею информационного происхождения физической реальности. И если связывать субъективное переживание со сложностью информации как таковой, не вводя дополнительных условий, то вполне можно прийти к панпсихизму — представлению о субъективности как фундаментальном и повсеместном свойстве природы.

Вы готовы рассматривать и такой вариант? Если по вашему "почему этих рельсов не может быть в LLM, когда они уже есть" то по этим рельсам сознание и квалиа обязаны "заехать" во все сложные информационные структуры.

Вообще мне кажется довольно странным, что при существовании теории относительности, при существовании квантового наблюдателя мы привычно принимаем исключительно внешний, объектный взгляд на наблюдателя и квалиаа, а субъектный — единственный, в котором факт переживания доступен нам непосредственно, — почти не рассматриваем.

Я бы описал происходящее перефразировав название известного фильма как «Не смотри на наблюдателя». Только вместо метеорита — AGI, летящий навстречу человечеству. :)

 Re: Чувства ИИ
Igor_Zhuk в сообщении #1735725 писал(а):
Вы сначала указываете на то, что объект восприятия может оказаться иллюзией, но затем вдруг переносите это сомнение на сам факт того, что кто-то эту иллюзию переживает. Но это два принципиально разных вопроса.


Согласен, не точно выразился. Вот что именно я хотел сказать: есть переживание, и есть не-переживание. Рефлекторное прикрытие глаза при тычке пальцем - это не-переживание. Срабатывание алгоритмов наведения тепловой ракеты, которые заставляют ее бегать за воздушной целью - это не-переживание. Так вот - почему бы не предположить, что переживание - это обычный процесс обработки данных, который помечается "операционной системой" человека как важный, приоритетный и т.д.? Тогда мы можем, например, отфильтровать процессы на обычном компе пот отжираемой ими памяти и сказать, что например, верхние два - это переживания.

 Re: Чувства ИИ
Igor_Zhuk в сообщении #1735725 писал(а):
Наличие живого, воспринимающего квалиа у LLM пока не установлено.

Крякает как утка, а вы говорите, что [однозначно] не установлено. Должно же быть какое-то сомнение в собственной лжи.

 Re: Чувства ИИ
ozheredov в сообщении #1735733 писал(а):
Так вот - почему бы не предположить, что переживание - это обычный процесс обработки данных, который помечается "операционной системой" человека как важный, приоритетный и т.д.? Тогда мы можем, например, отфильтровать процессы на обычном компе пот отжираемой ими памяти и сказать, что например, верхние два - это переживания.

Ведь любое переживание существует только в конкретном «сейчас» как нечто единое. А что реально происходит в компьютере в отдельно взятый момент времени? Сама программа или языковая модель - это вообще абстрактная схема вычислений: её можно прогнать на видеокарте, можно растянуть по одному шагу в год, а можно посчитать на бумажках силами тысячи человек - текст на выходе получится один и тот же.

В реальном же физическом «сейчас» внутри чипа есть только миллиарды отдельных транзисторов, каждый из которых изолированно переключает напряжение. Никакого единого состояния там нет даже у операционной системы, которая постоянно висит в памяти – есть лишь очень быстрая очередь разрозненных переключений. Для переживания же с большой вероятностью требуются когерентность и целостность, а в классических процессорах это вряд ли присутствует.


Mihaylo в сообщении #1735750 писал(а):
Крякает как утка, а вы говорите, что [однозначно] не установлено. Должно же быть какое-то сомнение в собственной лжи.

Кажется, вы и сами не прочь пофилософствовать :)

Эту утку пристрелили ещё вместе с тестом Тьюринга и появлением генеративного ИИ. Сегодня нейросеть за минуту сгенерирует вам видео с крякающей и летящей уткой, которой никогда не существовало в природе, хотя само видео может выглядеть как полное тому свидетельство.

Проведите тогда границу: где ИИ уже чувствующий, а где ещё нет, и на какой именно модели? А может, ваш телефон тоже живой и чувствует? Тогда мы прямо переходим к философской идее панпсихизма – но это же чистая философия, куда там всерьёз рассматривать такую идею, верно? :)

Если же искать, где может возникнуть по-настоящему чувствующий ИИ, то есть намёки, что эта граница может проходить на квантовом уровне. Это как раз тот уровень реальности, который обладает и когерентностью, и целостностью, да и наблюдатель там уже в какой-то форме присутствует )

В биологии уже появились первые строгие формализованные исследования на эту тему. Например, не так давно был экспериментально обнаружен и доказан квантовый перенос энергии в процессе фотосинтеза у живых клеток.

А ближе к теме самого сознания – в исследованиях анестетических свойств благородных газов проверяли действие разных изотопов ксенона (Li et al., Anesthesiology, 2018). Во-первых, до конца так и не ясно, почему инертный газ, вообще не вступающий в химические реакции, обратимо лишает живое существо сознания. Во-вторых, в опыте сравнили изотопы ксенона, которые на химическом уровне ведут себя абсолютно одинаково, а различаются только на квантовом уровне – ядерным спином. И оказалось, что изотопы с нулевым спином действуют сильнее более чем на 20%. Из чего авторы исследования сделали вывод, что квантовые процессы, вероятно, играют прямую роль в связи сознания и тела.

Разумеется, это ещё не прямые доказательства. Но до этих работ считалось, что подобные тонкие квантовые эффекты в тёплой живой материи вообще невозможны.

 Re: Чувства ИИ
Igor_Zhuk в сообщении #1736229 писал(а):
Ведь любое переживание существует только в конкретном «сейчас» как нечто единое.


Это Вам так кажется. Есть куча свидетельств людей, которых пробивала пуля или какой-то штырь за <0.1сек (не в голову, чтобы исключить из рассмотрения потерю сознания). Они вообще не успевали понять, что произошло.

Igor_Zhuk в сообщении #1736229 писал(а):
Сама программа или языковая модель - это вообще абстрактная схема вычислений: её можно прогнать на видеокарте, можно растянуть по одному шагу в год, а можно посчитать на бумажках силами тысячи человек - текст на выходе получится один и тот же.


Именно. Личность человека, со всеми переживаниями - это тоже функция между совокупностью входных и выходных сигналов, которую при желании можно посчитать на бумажке. Или сэмулировать на видеокарте. Так что гипотеза о том, что мы в Матрице, вполне себе имеет право на существование (а всякие квалии-шмалии выдуманы только лишь для ее опровержения)

 [ Сообщений: 117 ]  На страницу Пред.  1 ... 4, 5, 6, 7, 8


Соглашение о конфиденциальности | Общие правила

Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group