2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




Начать новую тему Ответить на тему На страницу 1, 2  След.
 
 Самокопирование нейрона
Сообщение10.04.2018, 22:23 


07/08/14
4231
Математическая модель нейрона не предусматривает его самокопирование, верно?

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение10.04.2018, 23:22 
Заслуженный участник


27/04/09
28128
Значительному усложнению должны быть веские причины. А вообще разные виды нейросетей — разные модели, а из использующихся сегодня на практике точно нельзя взять лишь один и остальными пренебречь.

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение10.04.2018, 23:46 


07/08/14
4231
arseniiv
В таком случае (имхо) нейросеть не эволюционирует, и вообще не является никаким интеллектом, а есть лишь обычный программный код, хранящий в памяти всякие данные, что то вроде базы данных проб и ошибок.

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 00:40 


07/06/17
1003
upgrade
Слабо просматривается связь между первопостингом и вот этим "в таком случае ...".
"Обычный программный код" вполне превосходит человека в разнообразных интеллектуальных занятиях. Что есть интеллект, по-вашему? И что вы подразумеваете под самокопированием нейрона? Почему именно это свойство, а не какие-то другие физико-химические процессы должна описывать модель нейрона?

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 08:54 


07/08/14
4231
Booker48
Booker48 в сообщении #1303060 писал(а):
Что есть интеллект, по-вашему

Что то большее, чем полностью детерминированный процесс.
Booker48 в сообщении #1303060 писал(а):
что вы подразумеваете под самокопированием нейрона

Когда нейрон создает две пары, по-разному измененные внешним воздействием и внутренней структурой, а не только меняет свою внутреннюю структуру единственным способом одно изменение за другим.

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 11:06 


07/06/17
1003
upgrade
На примере шахмат не могли бы вы пояснить, в чём полная детерминированность в принятии решения нейросетью - и, наоборот, недетерминированность в случае человека?
upgrade в сообщении #1303103 писал(а):
Когда нейрон создает две пары...

А когда он это делает? Вы его с ДНК не путаете?

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 15:07 
Аватара пользователя


31/10/08
1244
upgrade в сообщении #1303041 писал(а):
Математическая модель нейрона не предусматривает его самокопирование, верно?

Верно, так как процесс самокопирования это вопрос надсистемы типо нейронной сети. К примеру есть генетические алгоритмы копируй сколько хочешь.
Советую посмотреть на автокодировщик и стекируемые нейронные сети. Идея копирования там прослеживается не явно. Возможно где-то явно и озвучивается.

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 15:11 
Заслуженный участник
Аватара пользователя


16/07/14
8464
Цюрих
upgrade в сообщении #1303103 писал(а):
Что то большее, чем полностью детерминированный процесс.
Ну давайте модели на вход еще источник случайности... Кстати сейчас при обучении часто используют dropout, в котором как раз есть случайность.
(это всё по модулю философии о том, существует ли "настоящая" случайность)

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение11.04.2018, 15:27 
Заслуженный участник


27/04/09
28128
upgrade в сообщении #1303055 писал(а):
В таком случае (имхо) нейросеть не эволюционирует, и вообще не является никаким интеллектом, а есть лишь обычный программный код, хранящий в памяти всякие данные, что то вроде базы данных проб и ошибок.
Вы считаете, что обычные нейроны в мозгу, скажем, млекопитающих делятся? Если нет, то непонятно, чего вы требуете от нейросетей. Если да, то, видимо, сначала придётся сменить мнение.

Далее, никто не говорит, что многие виды нейросетей «эволюционируют». Говорят об их обучении. Кроме того, состояние обученной нейросети далеко от описания словами «база данных проб и ошибок». Там никак не присутствуют отдельные элементы обучающей выборки.

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 04:29 


12/07/15
2953
г. Чехов
upgrade в сообщении #1303103 писал(а):
Что то большее, чем полностью детерминированный процесс.

Я называю это явление мозгопоклонничеством. Когда человек верит, что там, в мозгушечках, творится нечто невероятное, запредельное, умопомрачительное. Когда такому человеку показываешь реальный искусственный интеллект и функционирование его элементов, то мозгопоклоннику кажется, что в этих простых вещах не хватает чего-то эдакого (сами сказать не могут), ну чтобы было совсем круто, идеально.

-- 12.04.2018, 06:37 --

upgrade
Что касается эволюции и естественного отбора, то здесь вы жёстко ошиблись. Вы вспомните дедушку Дарвина! Разве он говорил, что эволюция - это процесс, который затрагивает мозг ребёнка в возрасте от 1 до 3 лет???!! Вам не кажется, что речь шла о нескольких поколениях вида?..

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 12:37 


03/06/17

67
upgrade в сообщении #1303041 писал(а):
Математическая модель нейрона не предусматривает его самокопирование, верно?

Смотря какая модель, что вам мешает исправить этот недостаток?

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 13:17 
Аватара пользователя


11/12/16
13309
уездный город Н
arseniiv в сообщении #1303195 писал(а):
Вы считаете, что обычные нейроны в мозгу, скажем, млекопитающих делятся? Если нет, то непонятно, чего вы требуете от нейросетей. Если да, то, видимо, сначала придётся сменить мнение.


не всё так категорично. Нейрогенез

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 14:49 


07/08/14
4231
Booker48 в сообщении #1303130 писал(а):
На примере шахмат не могли бы вы пояснить, в чём полная детерминированность в принятии решения нейросетью
Одинаковые ходы в разных партиях влекут одинаковые ответные ходы.
У человека одинаковые ходы в разных партиях могут повлечь разные ответные ходы.
Человек может прийти к победе разными путями.
Booker48 в сообщении #1303130 писал(а):
А когда он это делает? Вы его с ДНК не путаете?
Так никогда не делает. Не предусмотрено создание нейроном двух нейронов, у которых у каждого разный ответ на внешнее воздействие, но оба ответа "верные".
mihaild в сообщении #1303178 писал(а):
Ну давайте модели на вход еще источник случайности...
Поможет ли это, ведь структура нейрона не меняется, он будет одинаково обрабатывать разные входные цепочки воздействий, а не по-разному обрабатывать одну и туже входную цепочку воздействий.
arseniiv в сообщении #1303195 писал(а):
Вы считаете, что обычные нейроны в мозгу, скажем, млекопитающих делятся?
Конечно делятся. У новорожденных нейроны появляются делением, сравните объем мозга взрослого и, например, зародыша.
arseniiv в сообщении #1303195 писал(а):
Там никак не присутствуют отдельные элементы обучающей выборки.
но они закодированы в памяти нейрона, насколько я понимаю, а не в структуре обработки воздействий на нейрон.
root721 в сообщении #1303469 писал(а):
Смотря какая модель, что вам мешает исправить этот недостаток?
Отчётность )))

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 14:55 
Заслуженный участник
Аватара пользователя


16/07/14
8464
Цюрих
upgrade в сообщении #1303495 писал(а):
Поможет ли это, ведь структура нейрона не меняется, он будет одинаково обрабатывать разные входные цепочки воздействий, а не по-разному обрабатывать одну и туже входную цепочку воздействий.
А, ну тогда ничего не получится, потому что в классическом процессоре каждый элемент всегда одинаково обрабатывает одинаковые цепочки воздействий (пока не сломается и по модулю текущего состояния; но у рекуррентной нейронки скажем тоже есть текущее состояние). Возможно, знающие физику люди могут и какие-то более фундаментальные примеры привести.

Есть еще скажем нейронки с онлайн дообучением - когда вы в принципе обработав вход можете обновить веса. Есть рекуррентные, которые теоретически можно запускать на всём потоке данных и никогда не переинициализировать.

В чем вопрос-то?

 Профиль  
                  
 
 Re: Самокопирование нейрона
Сообщение12.04.2018, 15:55 


07/08/14
4231
mihaild в сообщении #1303499 писал(а):
В чем вопрос-то?
первоначальный - просто убедиться что это так
upgrade в сообщении #1303041 писал(а):
Математическая модель нейрона не предусматривает его самокопирование, верно?
Теперь - существуют ли модели с копированием двух разных состояний-структур, но одинаково верно отрабатывающих входные данные.
Например, примитивно - попался столб, его можно обойти справа, а можно обойти слева, нейрон (ну, или как он называется) рождает два новых нейрона, у одного из них веса распределены так, что столб обходим слева, а у другого - справа.

 Профиль  
                  
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 30 ]  На страницу 1, 2  След.

Модераторы: Karan, Toucan, PAV, maxal, Супермодераторы



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group