Ознакомьтесь с Условиями пребывания на сайте Форнит Игнорирование означет безусловное согласие. СОГЛАСЕН
ВХОД
 
 
Привет! Правила | Свежее | Чат | Подписка
Чтобы оставлять сообщения нужно авторизоваться.

Тема форума: «Саморегуляция синапса»

Сообщений: 47 Просмотров: 11556 | Вся тема для печати
В теме заданы строгие правила
1 2 3 4
 
Ярослав
Пишет без ограничений, редактирует историю - unlimited

Род: Мужской
Сообщений: 946

Оценок: 5
список всех сообщений
clons
Сообщение № 43491 показать отдельно Апрель 23, 2016, 10:27:25 PM
ответ -только после авторизации

Я считаю что матричная модель мозга намного менее эффективна нежели нейронная модель. Поясню на примере моей несостоятельной идее заменить процессор схемой памяти. Процессор принимает сигналы на вход и выдает на выход - казалось бы можно это свести к таблице истинности, записать эту таблицу в схему памяти, и схема памяти заменит процессор. Это своего рода матричная модель процессора, можно так выразиться. И собственно память с однотипными элементами намного проще в производстве, как бы примитивнее. И подобная штука действительно реализована, называется ПЛИС (программируемая логическая интегральная схема), но используется в основном для проектирования. Потому что есть проблема.

 

Пусть у нас есть процессор с 64 разрядами данных, 64 разряда адреса, 64 разряда команд, это на вход. Ну и на выходе тоже 64 разряда данных, 64 разряда адреса, 64 разряда команд. И вот этот процессор мы заменяем на простую матрицу, то есть на схему памяти. Память можно заполнить так что схема будет вести себя в точности как процессор. Каков должен быть размер памяти? Ячеек должно быть 23*64=2192. В каждой ячейке должно быть 64*3=192 бит. 192=8*24, это 24 байта. То есть нам вместо каждой 192-битной ячейки нужно 24 однобайтовых ячеек. То есть нам нужна память в размере 24*2192. Терабайт это 240. Значит 2192=2152+40=240*2152. Значит нам нужно сколько терабайт? Это 24*2152=1,37*1047. То есть можно выкинуть из компьютера процессор и вставить вместо него схему на 1,37*1047 терабайт памяти. Невооруженным глазом видно что здесь что-то не то, процессор намного эффективнее и компактнее чем аналогичная по поведению память.

 

Думаю аналогично нейронная сетевая архитектура намного эффективнее и компактнее чем аналогичная по свойствам матрица. Тем более что я рассматривал случай когда состояние зависит только от входа в данный момент без учета входа в предыдущий момент. В действительности предыдущий момент тоже учитывается, как процессором так и мозгом. Что должно добавить ещё дополнительный множитель к предыдущему расчету. Итог - матрица не является самой компактной и эффективной схемой. Иногда есть смысл в более хитро закрученных схемах, ради эффективности.


Метка админа:
Спасибо за это сообщение! Благодарность от: nan
 
antonov_v_m
Full Poster


Сообщений: 35
список всех сообщений
clons
Сообщение № 43492 показать отдельно Апрель 24, 2016, 08:29:40 AM
ответ -только после авторизации
автор: Ярослав сообщение 43491:
матрица не является самой компактной и эффективной схемой. Иногда есть смысл в более хитро закрученных схемах, ради эффективности.

ответ

 Перед нейрофизиологами стоит задача не поиск самой компактной и эффективной схемы управления, а раскрыть секрет - как делает это живой мозг. А у живого мозга - матричная структура.


Метка админа:

 
usr
Пишет без ограничений, редактирует историю - unlimited

Сообщений: 521

Оценок: 2
список всех сообщений
clons
Сообщение № 43493 показать отдельно Апрель 24, 2016, 09:48:39 AM
ответ -только после авторизации
автор: antonov_v_m сообщение 43492:
А у живого мозга - матричная структура.

Нет, ваша модель по уровню сложности и близко не изоморфна реальному мозгу.


Метка админа:

 
nan
Имеет права полного администратора сайта - админ

Род: Мужской
Сообщений: 12218


E-Mail
личная фото-галерея
Оценок: 39
список всех сообщений
clons
Сообщение № 43494 показать отдельно Апрель 24, 2016, 10:53:54 AM
ответ -только после авторизации

usr, что-то ты затеял долгое разбирательство с математической точки зрения. Конечно же, принятая модель будет работать, она выполнит согласование между рецепторами и эффекторами в той части, в которой эволюционно формировались реакции типа "стимул - ответ" - самый примитивный уровень реагирования. Даже на нем можно создавать какие-то "роботы". Вообще в мире очень много того, что имеет причинно-следственную зависимость и роботы можно создавать на чем угодно, как в мультиках, когда шарик попадал на весы, они выливали воду, которая по жёлобу сливалась в емкость и там что-то всплывало.

Но у предложенной модели, в отличие даже от самой примитивной нейросети нет тормозных влияний, только утечки, которые должны быть значительно слабее, чем активирующее влияние, иначе последнее станет невозможным. Это значит, что все, что требует торможения оказывается с недопустимо большими задержками выполнения, от задачи контрастирования при восприятии до блокировок и ветвления вариантов воздействия. Т.е. модель - хуже, чем реализация типа "стимул - ответ". И она, в принципе, являясь одним из видов однослойного персептрона, в сравнении с ним оказывается функционально избыточна настолько, что, как наглядно показал Ярославль, просто не реализует даже ограниченный функционал, не говоря о времени его формирования. Есть и другие минусы реализация связи "все со всеми", которые рассматривались в различных работах уже давно, в том числе и на этом сайте. Кстати, про утверждение, что эта "матрица" никакой вообще не персептрон, так в чем конкретно принципиальная разница?

Конечно же, заявлять, что именно так сделана природная реализация мозга при всем накопленном массиве данных фактических исследований - такой же нонсенс, как сегодня заявлять о плоскости Земли, причем, не приводя никаких достаточно корректных обоснований кроме заявлений типа: "мы еще 30 лет назад исследовали и убедились...". Ни в каких его представленных текстах нет никакого корректного обоснования, зато есть признаки подтасовки типа фото гистологической структуры мозга, где автор модели утверждает некие микротрубки. Вот все исследователи выделяют связи между нейронами в виде аксонов через синапсы и дендриты, а у автора есть микротрубки. Все исследователи давно изучили и описали послойное созревание функциональности мозга, на что человекообразным нужно до 25 лет, а у автора все однослойное.

 

Самая главная психопатологическая беда автора - наличие сверхценной идеи, в которую он ни в чем не готов усомниться, что делает обсуждение с ним невозможными просто потому, что он не видит всего того, что может противоречить идее, т.е. его возможность воспринять доводы чрезвычайно ограничена, см. Идея-фикс. Это позволяет ему думать, что только он прав в идее, а все нейрофизиологи просто еще не дошли в понимании до нее. То, что он очень далек не только от математики, но и нейрофизиологии - достаточно очевидно.



p.s. Допускаю, что мое утверждение может быть неверно, поэтому прошу показывать, что именно и почему неверно и запрашивать объяснения, если что-то непонятно.
Метка админа:
Спасибо за это сообщение! Благодарность от: usr
 
Кошкин
УДАЛЕН

Сообщений: 80
список всех сообщений
clons
Сообщение № 43495 показать отдельно Апрель 24, 2016, 06:18:52 PM
ответ -только после авторизации

 Действительно, вот эти утверждения уже говорят о том, что antonov_v_m очень далёк от реального положения дел: «Перцептроны и нейронные сети отвергли сами американцы Пайперт и Минский, доказавшие, что хаос подобных структур не способен сам собой упорядочиться. ... Теория распознавания образов предполагает, что работа мозга состоит из двух этапов: на первом этапе происходит распознавание ситуации, а на втором - принимается соответствующее решение. Мы пришли к выводу, что живой мозг сразу же принимает решения (без какого-либо распознавания), и саморегуляция синапса - тому подтверждение. ... Отличительной особенностью нейронных сетей, по нашему мнению, является приписываемая им способность анализировать ситуации и принимать решения. Говоря простым языком, в них прячутся, своего рода, гномы-анализаторы и гномы-менеджеры (нейроны-распознаватели и нейроны-управленцы). Ничего такого в мозге нет.Напоминаю ещё раз, что слово "сеть" неприменимо в разговоре о мозге.»

 

О Минском и Пайперте было написано ранее, и работа нейронных сетей давно проверена на практике. Что касается «гномов-анализаторов и гномов-менеджеров (нейронов-распознавателей и нейронов-управленцев)», то их в нейронной сети нет и они там не нужны, как нет и неких строго разделённых этапов «распознавание — выработка реакции». Все деления процесса функционирования нейронной сети на строго специализированные части и этапы более или менее условны. Сеть переводит возбуждение на входе в возбуждение на выходе, и делает это всей своей структурой, просто по мере прохождения возбуждения от входа сети до выхода. Поэтому разделение процесса прохождения возбуждения на этапы понимается только в контексте этой общей функции, а не как присущее неким частям сети самим по себе. Например, мы разделяем тепло от лампочки и свет от лампочки, но с точки зрения физики — это всё электромагнитное излучение разной частоты. Приблизительно также и в нейронной сети: упрощённо говоря, нейрон на входе — это нейрон-распознаватель, тот же нейрон на выходе — это мотонейрон.

 

Конечно, вдаваясь в подробности, существует множество типов нейронов, а у каждого типа есть индивидуальные черты — например, конкретное количество связей и их архитектура в составе сети. Но эти отличия не принципиальны — все нейроны вносят свой вклад в перевод возбуждения, функционируя по одному и тому же принципу: приём и передача возбуждения. Вообще, делить сеть на части приходится для изучения работы мозга — изучать мозг как целое затруднительно, мягко говоря. В более общем смысле, любое разделение реальности на части более или менее субъективно, но в данном случае «более», так как «части» нейронной сети слишком функционально схожи и взаимосвязанны, чтобы приписывать им специфические функции как присущие им самим по себе.

***

 

Тем не менее, несмотря на ошибки, обвинять аntonov_v_m-а в том, что его модель работает по принципу «стимул-ответ» не совсем верно. аntonov_v_m пишет о том, что в его модели синапсы под влиянием рецепторного возбуждения изменяются — то есть его «модель мышления» подразумевает обучение. Но именно обучение и именно как изменение веса связи под стимулирующим влиянием возбуждения и отличает нейронную сеть от моделей функционирующих по принципу «стимул-реакция». То есть в нейронной сети «между» стимулом и реакцией есть этап обучения. То есть, по сути, в своей модели antonov_v_m описал принцип обучения нейронной сети (в упрощённом и искажённом виде, конечно).

 

«Синаптическая пластичность — это возможность изменения силы синапса (величины изменения трансмембранного потенциала) в ответ на активацию постсинаптических рецепторов[1]. Она считается основным механизмом, с помощью которого реализуется феномен памяти и обучения. Этот механизм характерен для всех организмов, обладающих нервной системой и способных хотя бы ненадолго чему-либо научиться.» Синаптическая пластичность. Википедия Также биологические нейронные сети — за счёт обратных связей, подразумевают сложную нейродинамику (в результате чего, например, можно вспоминать, планировать и т. п.), но означенного принципа обучения это не отменяет.

 

При этом биологические сети — как и организм вообще — развиваются, то есть их структура формируется в процессе взросления животного и изменяется в процессе дальнейшей жизни (например, растут новые связи между нейронами). Процесс развития нейронной сети и процесс её обучения в точности друг от друга неотделимы. В конце концов изменение синапса — это и изменение структуры нейронной сети (синапс — это часть нейрона, то есть часть структуры сети). То есть и процесс развития, и процесс обучения нейронной сети можно назвать и обучением, и развитием одновременно. К тому же и развитие сети, и обучение сети подразумевают сочетание наследственной детерминанты и влияния среды. Тем не менее разделять необходимо, иначе, например, получится, что искусственные нейронные сети не обучаются — ведь обучение там происходит только за счёт изменения весов связей.

 

Поясню написанное цитатой из своей статьи: «Однако точнее процесс мышления выглядит по-другому. В едином организме можно выделить два взаимосвязанных уровня самоорганизации. Это самоорганизация организма в целом, включая и нейронную сеть, в процессе чего развивается и поддерживается упорядоченная структура организма, и уровень самоорганизации активности нейронов в сети. То есть помимо того, что нейронная сеть как часть единого организма развивается и существует как диссипативная система, нейронная сеть как взаимосвязь нейронов также воплощает в себе диссипативную систему, через архитектуру и пластичность связей задающую общий контекст для упорядочения активности нейронов в ней. Таким образом, уточнение устройства нейронной сети сообразно среде в процессе обучения — это усложнение упорядоченной организации нейронной сети сообразно среде. Например, можно заметить, что активность мышц всегда взаимосвязана в едином порядке с воспринимаемым — от перистальтики, дыхания, сердечной деятельности и общего тонуса мышц, до поддержания равновесия, предметных действий и речи. И чем более опыт, тем более сложные зависимости в условиях распознаются, и тем сложнее порядок работы мышц.»

 

 


Метка админа:

 
antonov_v_m
Full Poster


Сообщений: 35
список всех сообщений
clons
Сообщение № 43496 показать отдельно Апрель 24, 2016, 08:56:56 PM
ответ -только после авторизации
автор: usr сообщение 43493:
ваша модель по уровню сложности и близко не изоморфна реальному мозгу.

ответ

Наиболее полно и устройство матричного мозга и его работа отражены в учебнике "Мозг. Русская теория". А здесь, на этом форуме изложены лишь отдельные его черты, по которым трудно составить целостное представление.


Метка админа:

 
antonov_v_m
Full Poster


Сообщений: 35
список всех сообщений
clons
Сообщение № 43497 показать отдельно Апрель 25, 2016, 07:47:49 AM
ответ -только после авторизации
автор: nan сообщение 43494:
Но у предложенной модели... нет тормозных влияний, только утечки,

ответ

По нашему мнению, у живого мозга нет "тормозных влияний", а есть - уменьшение сигнала управления, зависящее от ситуации (сменилась ситуация - изменился сигнал управления). Мы искали тормозные и релейные механизмы в мозге, но не нашли их там. А навязывать их ему - не входило в нашу задачу.

Ступенчатость сигнала управления достигается в двуступенчатом мозге (подробно об этом говорится в учебнике "Мозг. Русская теория). Достигается это путём включения мимики (мимических мышц) в систему управления.

автор: nan сообщение 43494:ца? 

Кстати, про утверждение, что эта "матрица" никакой вообще не персептрон, так в чем конкретно принципиальная разница? 

ответ:

Матричная структура мозга отличается от перцептрона и назначением, и устройством, и способом обучения, и работой. Перцептрон предназначен для распознавания; матричный мозг - для непосредственного управления. Различное устройство отчётливо видно при сравнении схем. Схема матричного мозга сравнительно легко реализуется электрическими средствами и особенно легко - с помощью компьютера (вычислительными методами). Реализация перцептрона - под вопросом. Матричный мозг - самообучается по воздействием одобрения/наказания; перцептрон нуждается в искусственном алгоритме. Работа матричного мозга - в формировании непосредственного сигнала управления мышцами; перцептрон такой сигнал не создаёт в принципе. Ктомуже, у матричного мозга обучение и работа - совмещены, а у перцептрона - разделены.

автор: nan сообщение 43494:

Ни в каких его представленных текстах нет никакого корректного обоснования...

ответ:

Полноценное обоснование устройства и работы матричного мозга представлено в работе "Мозг. Русская теория". Здесь, на форуме - только фрагменты.

автор: nan сообщение 43494:

зато есть признаки подтасовки типа фото гистологической структуры мозга, где автор модели утверждает некие микротрубки.

ответ:

Микрофотография, на которую намекает nan, взята из монографии Д. Хьюбел "Глаз, мозг, зрение", стр23. В чём подтасовка - не понятно. 

О самих микротрубочках подробно говорится в пункте "Микротрубочки и микрофиламенты" монографии Г. Шеперда "Нейробиология 1", стр. 93, 94:

"...микротрубочки (20...30 нм), нейрофиламенты (10 нм), микрофиламенты (5 нм)... Микротрубочки состоят из длинных неразветвлённых трубочек разной длины... Наличие микротрубочек и нейрофиламентов в аксонах и дендритах естественно навело на мысль, что они, возможно, участвуют в транспорте разных веществ, и множество биохимических работ... подтверждают это представление."

 


Метка админа:

 
nan
Имеет права полного администратора сайта - админ

Род: Мужской
Сообщений: 12218


E-Mail
личная фото-галерея
Оценок: 39
список всех сообщений
clons

>>Микрофотография, на которую намекает nan, взята из монографии Д. Хьюбел "Глаз, мозг, зрение", стр23. В чём подтасовка - не понятно.

Смотрим, в чем заключается подтасовка прямо у Д. Хьюбел: Глаз, мозг, зрение: "Рис. 11. ... В аксоне видны (в поперечном сечении) органеллы, называемые микротрубочками."

В поперечном, Карл! а не продольном. И они там упомянуты единственный раз как локальные органеллы, не имеющие функции придачи возбуждения. А в вашем тексте: "Диаметры микротрубочек, действительно, крайне малы, но длина их может быть достаточно большой. Нужно иметь в виду, что поставляется управляющая жидкость от мозга (от головы) до самых отдалённых мышц животного, на расстояние метра и даже более (представьте себе – у слона или у жирафа).". Это ли не подтасовка, высосанная из пальца? Кстати, ссылку на ваш текст я давал, так что не нужно говорить, что с ним незнакомы, там нет никаких корректных обоснований, кроме вот таких отрывочных измышлений. Вот такие там перлы: "Элементарные нервные волокна, по микротрубочкам которых перемещается управляющая жидкость, принято называть нейронами".

>>у живого мозга нет "тормозных влияний"

В той же книге Хьюела: "Будет ли данный синапс возбуждающим или тормозным, зависит от того, какой в нем высвобождается медиатор и каковы здесь рецепторные молекулы. Ацетилхолин, самый известный медиатор, в некоторых синапсах оказывает возбуждающее действие, а в других — тормозное, он возбуждает мышцы конечностей и туловища, но тормозит сокращения сердца." В отличие от микротрубочек тормозное влияние в тексте упоминается постоянно, множество раз.

Про микротрубочки кто только не пишет из серьезных исследователей просто потому, что капилляры и другие трубчатые образования - очень распространены не только в мозге, а в любой ткани, но никто из них не пишет про них как о передатчиках возбуждения между нейронами.

>>Реализация перцептрона - под вопросом.

Еще одно одиозное, если не сказать наглое утверждение... Персептрон реализован тысячи практических раз как схемотехнически, так и программно, в том числе в демоверсии двух видов распознавателей на этом сайте: 1 и 2. Сказать такое - просто продемонстрировать свое, прямо скажем, дремучее невежество. Но само по себе невежество, неискушенность - не порок и не порицается на этом сайте, а вот активно зомбирующие доверчивых людей невежество, с подтасовками и выраженной идеей-фикс - зло, несовместимое с участием на сайте.

>>Перцептрон предназначен для распознавания

Персептрон - модель, а его реализация в мозге вовсе не предназначена для распознавания, нет такой самоцели, а является промежуточным и универсальным элементом для адаптивного управления.

Путаница в определениях, точнее попытки оправдаться, вывернуться - характерны для фиксанутого и именно это препятствует конструктивному, а не деструктивному обсуждению. Препирательства такого стиля могут быть бесконечны, и они никому не нужны кроме самого фиксанутого. Важные утверждения без малейших обоснований, тем более настойчиво повторяющиеся (он пытался открыть еще две темы для такого же самопиара) являются грубейшим нарушением правил обсуждений. Поэтому я прекращаю возможность оставлять сообщения аntonov_v_m здесь. Его модель была рассмотрена внимательно более, чем того заслуживает, это вполне достаточно, а навязывать свои представления никто здесь не будет.

автор: Кошкин сообщение 43495:

обвинять аntonov_v_m-а в том, что его модель работает по принципу «стимул-ответ» не совсем верно. аntonov_v_m пишет о том, что в его модели синапсы под влиянием рецепторного возбуждения изменяются то есть его «модель мышления» подразумевает обучение.

Явный этап обучения не является обязательным критерием для реакций типа "стимул - ответ". В самом совершенном мозге такие реакции есть и активно используются, это характеризует все первичные и вторичные зоны мозга. Так организуются микродвижения глаз, базовая регулировка гомеостаза, баланс нейромедиаторов и гормонов, адаптивный стресс и многое другое. Главное отличие - отсутствие мотивирующей компоненты, того, что направляет развитие именно такой, а не иной реакции индивидуальной системой значимости. Но вопрос далеко выходит за рамки этого обсуждения.

автор: Кошкин сообщение 43495:

Сеть переводит возбуждение на входе в возбуждение на выходе, и делает это всей своей структурой, просто по мере прохождения возбуждения от входа сети до выхода. Поэтому разделение процесса прохождения возбуждения на этапы понимается только в контексте этой общей функции, а не как присущее неким частям сети самим по себе.

 

Существует множество активностей, не связанных непосредственно с рецепторами. Это видно при наблюдении на визуализаторе: области мозга активируются достаточно локально, не охватывая весь мозг от первичной зоны до эффекторов. В самом деле, мы может мыслить, не совершая действия, и наши мысли могут продуцировать другие мысли, а не непосредственная сенсорика внешнего.



p.s. Допускаю, что мое утверждение может быть неверно, поэтому прошу показывать, что именно и почему неверно и запрашивать объяснения, если что-то непонятно.
Метка админа:

 
Кошкин
УДАЛЕН

Сообщений: 80
список всех сообщений
clons
Сообщение № 43508 показать отдельно Апрель 29, 2016, 09:53:27 PM
ответ -только после авторизации

 

Рассмотрим ячейки Бенара, на примере которых можно понять особенности нейронных сетей как самоорганизующихся систем. Ячейки Бенара. Википедия

 

В интенсивно нагреваемой воде в динамике её молекул возникает упорядоченность. В некоторый момент движение воды приобретает форму цилиндрических валов, которые переносят нагретую жидкость вверх и остывшую вниз (есть и другие проявления «ячеек»). При увеличении температуры структура усложняется — каждый вал распадается на два вала меньшего размера и в пределе возникает турбулентный хаос. Движение мириадов молекул воды никто специально в валы не организовывает, возникновение в воде упорядоченной макроструктуры — это самоорганизация (некоторые подробности почему происходит самоорганизация — в статье).

 

Несмотря на то, что в воде может быть сразу несколько валов, ни один из них, естественно, не существует сам по себе, вал нельзя «вытащить», разделить их перегородками, не разрушив порядок, вся система — это одно неделимое целое. Поэтому если изменить количество воды в сосуде, изменить форму сосуда или изменить интенсивность нагрева, то и упорядоченная структура воды тоже будет меняться, хотя и нелинейно. Например, плавное изменение означенных факторов вначале заметно не повлияет на структуру движения воды — просто будет более или менее плавно изменяться форма валов или их динамика, так как до определённого момента силы гомеостаза будут поддерживать существующий порядок, противостоя возмущениям. Затем, сразу и более или менее со всех концов системы, то есть нелинейно — неадекватно плавному изменению управляющего фактора, произойдёт переход к новой упорядоченной структуре или к хаосу.

 

«Сразу и со всех концов» — потому что флуктуации, ведущие в конечном итоге к разрушению старого порядка, постепенно нарастают во всех концах системы, и в какой-то момент изменяется порядок сразу всей системы как целого. Поддержание же своего упорядоченного состояния диссипативной системой, несмотря на интенсивное взаимодействие со средой, — это гомеостаз. Который, естественно, также не есть функция неких отдельных частей системы.

***

 

В принципиальном смысле то же происходит и в организме в целом, и в нейронной сети в частности, которые также являются самоорганизующимися системами. Архитектура сети — это «форма сосуда», которая задаёт общий контекст самоорганизации (синхронизации) динамики нейронов. Сигналы рецепторов при этом возмущают порядок активности нейронов, но не разрушают его — приблизительно так же как малые изменения внутренних или внешних факторов изменяют форму или динамику валов в воде, но не разрушают их. Тем самым поведение — то есть порядок активности всех мышц и желёз — изменяется, но его общий смысл и само наличие упорядоченности остаётся неизменным. А изменения связей нейронов под стимулирующим воздействием возбуждения позволяет нейронной сети запоминать возникшие изменения. То есть изменять свою структуру, задавая новый и всё более точный относительно внешних условий контекст для дальнейшего уточнения порядка активности мышц и желёз. При этом, насколько мне известно, в нервной системе человека нет совсем не обучаемых нейронов (хотя возможности к обучению разных нейронов в сети неодинаковы, и вообще в формировании опыта много непонятного).

 

Происходящие в сети процессы точно так же зависят от всех факторов системы как и в случае упорядочения воды. Поэтому так же как валы в воде неотделимы друг от друга, в том же смысле нет отдельных процессов в нейронной сети, активность каждого нейрона всегда более или менее зависит и от среды, и от активности всех остальных нейронов сети. В ином случае в нейронной сети должен быть гомункулус, который будет знать, когда надо подключать отдельные части нейронной сети — но тогда все вопросы просто переносятся на уровень устройства этого гомункулуса. 


Метка админа:
Спасибо за это сообщение! Благодарность от: STR
 
STR
УДАЛЕН

Род: Мужской
Сообщений: 1348


ICQ: 425961341
личная фото-галерея
Оценок: 11
список всех сообщений
clons
Сообщение № 43547 показать отдельно Май 04, 2016, 12:25:08 AM
ответ -только после авторизации
автор: Кошкин сообщение 43508:
В ином случае в нейронной сети должен быть гомункулус, который будет знать, когда надо подключать отдельные части нейронной сети но тогда все вопросы просто переносятся на уровень устройства этого гомункулуса.

А более древние структуры мозга не являются такими "гомункулусами" по отношению к более молодым? Насколько верна такая аналогия?



Да не согласен я...
Метка админа:

 
Кошкин
УДАЛЕН

Сообщений: 80
список всех сообщений
clons
Сообщение № 43550 показать отдельно Май 04, 2016, 05:31:41 AM
ответ -только после авторизации
автор: STR сообщение 43547:
А более древние структуры мозга не являются такими "гомункулусами" по отношению к более молодым? Насколько верна такая аналогия?

 

Суть работы нейронных сетей — за счёт архитектуры связей нейронов и весов их связей, преобразовать входящее возбуждение в исходящее, по мере его прохождения по сети от входа к выходу. Возбуждение поступая на нейроны на входе распределяется по всей сети, так как все нейроны в сети взаимосвязаны. В результате возбуждение обобщается на нейронах сети само с собою (конвергенция и дивергенция). Из-за чего в контексте структуры сети какие-то составляющие рецепторного возбуждения масштабируются, какие-то нивелируются, то есть в условиях выделяются некие «эффективные» признаки, что соответствующим образом отражается на выходе сети.

 

Это, например, значит, что ближе ко входу сети эти признаки ещё выделены слабо, то есть нижние слои сети распознают в условиях что-то общее и приблизительное, а верхние уже уточняют всё окончательно. То есть уровень абстракций постепенно повышается от уровня к уровню (абстракций — потому что из «реального» рецепторного сигнала выделяются некие составляющие). Очевидно также, если сеть изменить — например, изменить архитектуру сети, веса связей или количество нейронов, то возбуждение будет обобщаться само с собой уже по-другому. То есть сеть всегда работает как одно целое, любое изменение более или менее отразиться на выходе. Почему, например, если к одной нейронной сети присоединить ещё одну сеть, то получится одна новая нейронная сеть.

 

В то же время разные нейроны в зависимости от их положения в сети, их связей с другими участками сети и конкретной конфигурации рецепторного сигнала, по-разному участвуют в преобразовании рецепторного возбуждения. То есть в сети есть участки разного опыта в составе общей функции. Например, как написано выше, ближе ко входу сети будет один опыт, ближе к выходу другой.

Но тем не менее понятно, что ни один нейрон сам по себе не обладает опытом распознавания чего-либо общего или частного — все нейроны только принимают и передают возбуждение, а те или иные «специфические» функции возникают у них только в составе конкретной сети, и только потому, что нейроны находятся в той или иной её части. Следовательно, специфические внутрисетевые функции любого нейрона принадлежат всей сети сразу и не могут быть строго на этом нейроне локализованы. Другими словами, можно говорить только о большей или меньшей локализации какого-либо опыта/функций в пространстве сети, но не о строгом его разделении. Обратные связи добавят сети связности, усилив взаимозависимость нейронов.

 

Как видите, в сети нет места для гомункулусов, нейронная сеть всегда одно целое.

***

 

То же происходит и в ячейках Бенара, и в любой самоорганизующейся системе. Возникший порядок в динамике элементов задаёт элементам специфические внутрисистемные функции, которые элемент не имеет сам по себе. Которые «размазаны» по всей системе, так как в ином случае упорядоченная организация системы не смогла бы поддерживаться.

Другими словами, в упорядоченном состоянии у системы возникает «новое качество» — система превращается в «целое», так как, чтобы динамика элементов системы была согласованной, они должны быть обобщены. Что в принципиальном смысле можно связать с появлением сознания, эмерджентность которого — это эмерджентность порядка, обобщающего уровень отдельных элементов системы. Например, считается, что механизм внимания связан с селективной синхронизацией ансамблей нейронов. К примеру, нейроны зрительной коры, рецептивное поле которых содержит объект внимания, синхронизированы сильнее, чем нейроны, реагирующие на объекты вне внимания.

 


Метка админа:
Спасибо за это сообщение! Благодарность от: Маск
 
Маск
УДАЛЕН

Сообщений: 39
список всех сообщений
clons
Сообщение № 43555 показать отдельно Май 05, 2016, 10:03:33 PM
ответ -только после авторизации
автор: Кошкин сообщение 43550:
Например, считается, что механизм внимания связан с селективной синхронизацией ансамблей нейронов. К примеру, нейроны зрительной коры, рецептивное поле которых содержит объект внимания, синхронизированы сильнее, чем нейроны, реагирующие на объекты вне внимания.

Кошкин, где об этом почитать по подробней? Дай ссылку, плиз. Или сам напиши, у тебя отлично получается.


Метка админа:

 
Кошкин
УДАЛЕН

Сообщений: 80
список всех сообщений
clons
Сообщение № 43558 показать отдельно Май 06, 2016, 01:39:25 AM
ответ -только после авторизации
автор: Кошкин сообщение 43550:
Другими словами, в упорядоченном состоянии у системы возникает «новое качество» система превращается в «целое», так как, чтобы динамика элементов системы была согласованной, они должны быть обобщены. Что в принципиальном смысле можно связать с появлением сознания, эмерджентность которого это эмерджентность порядка, обобщающего уровень отдельных элементов системы. Например, считается, что механизм внимания связан с селективной синхронизацией ансамблей нейронов. К примеру, нейроны зрительной коры, рецептивное поле которых содержит объект внимания, синхронизированы сильнее, чем нейроны, реагирующие на объекты вне внимания.

С самоорганизацией получилось слишком загадочно. Самоорганизация как этап перехода от хаоса к порядку или как динамика уже самоорганизованных систем (гомеостаз) ограниченно предсказуема ввиду сильной нелинейности, но принципиальных загадок в самоорганизации нет. Интенсивное взаимодействие системы со средой приводит систему в состояние неравновесия. Это значит, что в системе постоянно возникают флуктуации, вызывающие активную хаотическую динамику элементов системы. В какой-то момент на разных концах системы случайно возникают совпадающие сильные флуктуации, предположим, закручивающие движение элементов в одну сторону. Тем самым они подчиняют себе динамику окружающих элементов, те других, и так все элементы системы фактически одновременно и со всех концов системы приходят в упорядоченное движение. К которое, естественно, коррелирует с условиями: интенсивностью взаимодействия со средой, свойством самих элементов, формой сосуда, если речь о жидкости, и т. п..

 

В итоге теперь уже все другие флуктуации, возникающие в системе и противоположные возникшему движению, будут подавляться количеством двигающихся согласованно элементов. Тем самым, за счёт взаимодействия со средой, поставляющей энергию, порядок будет поддерживаться сколько бы большой система ни была. При воздействии на систему, за счёт того, что её существование построено на хаосе, неравновесии и флуктуациях, реакции системы будут нелинейными, то есть реагировать система будет с одной стороны упорядоченно, с другой, в зависимости от того, как сложится ситуация с флуктуациями в данный момент — что просчитать невозможно.

 

Увеличение интенсивности взаимодействия со средой приведёт к увеличению количества и силы флуктуаций, соответственно, к разрушению старого порядка и хаосу или к появлению нового порядка — более сложного, так как, помимо «случайной», «закономерная» составляющая самоорганизации — это распределять энергию по системе, и простой порядок с этим не справится. Есть более частные составляющие явления самоорганизации, но принципиально они описанного не меняют.

 

То есть ничего загадочного, «сознательного» в самоорганизации как таковой вроде бы нет, кроме «подозрительного» совпадения эмерджентности порядка и эмерджентности психического восприятия, и того, что и упорядоченная активность нейронов, и сознание есть в мозге. Плюс ещё одно «подозрительное совпадение» в виде описанной выше ситуации с селективной синхронизацией нейронов. Если сознание связано с упорядочением активности нейронов, то самая яркая часть сознаваемого очевидно должна быть связана с наиболее синхронизированными нейронными ансамблями. Что и наблюдается в действительности.

 

В итоге вывод, вероятно: сознание как внутренний системный фактор взаимодействия множества элементов, «качественно» отличается от любой наблюдаемой реальности — системы можно наблюдать только снаружи. И потому в той же степени «качественно», то есть «принципиально», невозможно приблизиться к пониманию «сущности» сознания.

 

автор: Mack сообщение № 43555:
Кошкин, где об этом почитать по подробней? Дай ссылку, плиз. Или сам напиши, у тебя отлично получается.

Синхронизация (нейробиология), а также статья — там своими словами, и её обсуждение — там есть другие ссылки.


Метка админа:

 
usr
Пишет без ограничений, редактирует историю - unlimited

Сообщений: 521

Оценок: 2
список всех сообщений
clons
Сообщение № 43559 показать отдельно Май 06, 2016, 01:31:57 PM
ответ -только после авторизации

Кошкин, дайте какую-нибудь математическую модель нейросети для меня (поиграть).


Метка админа:

 
Кошкин
УДАЛЕН

Сообщений: 80
список всех сообщений
clons
Сообщение № 43572 показать отдельно Май 08, 2016, 12:05:14 AM
ответ -только после авторизации

У меня нет ничего на примете. Но, думаю, всё есть в книге «Нейронные сети. Полный курс» — ссылка на неё есть на первой странице этого обсуждения.  


Метка админа:
Спасибо за это сообщение! Благодарность от: usr
 
1 2 3 4 Статистика:
Всего Тем: 1921 Всего Сообщений: 47810 Всего Участников: 5152 Последний зарегистрировавшийся: Vladimir1945
Страница статистики форума | Список пользователей | Список анлимитов
Последняя из новостей:
Схемотехника адаптивных систем - Путь решения проблемы сознания.

Создан синаптический коммутатор с автономной памятью и низким потреблением
Ученые Северо-Западного университета, Бостонского колледжа и Массачусетского технологического института создали новый синаптический транзистор, который имитирует работу синапсов в человеческом мозге.

Тематическая статья: Целевая мотивация

Рецензия: Статья П.К.Анохина ФИЛОСОФСКИЙ СМЫСЛ ПРОБЛЕМЫ ЕСТЕСТВЕННОГО И ИСКУССТВЕННОГО ИНТЕЛЛЕКТА
Пользователи на форуме:

Из коллекции изречений:
>>показать еще...