Тема форума: «Бот на ГО»

У меня так и работает в моей рефлекторной версии. Оказалось достаточным фиксировать удаление/приближение к зоне комфорта как состояние стало хуже/стало лучше, что в принципе можно перефразировать как цель выполнения рефлекса не достигнута или достигнута. В данном случае цель - приближение к зоне, и в конечном итоге попадание в нее. А при попадании оказывается, что целей больше нет и оценка рефлексии теряет смысл: можно дергаться как угодно, если это не выводит из зоны комфорта.

Это простейший уровень реагирования для которого достаточно определять внешнее воздействие как понижающее или повышающее текущий уровень базовой потребности. Прямая аналогия - пищевое поведение, при голоде запускающее контекст поиска корма, при сытости ничего не запускающее (лень), при чрезмерном обжорстве - срыгивание. Даже при такой примитивной оценке можно накапливать личный опыт и делать простейшее прогнозирование, что в прицнипе логично: как то же умудряются существовать примитивные животные.

А вот чтобы сделать прогнозирование более глубоким и точным нужна соответственно более точная оценка внешнего воздействия - ассоциации второго уровня, построение дерева понимания. Это формирование внутреннего мира как отражения реальности, чтобы можно было прокручивать ситуации в голове и прикидывать последствия. В моем понимании главный вектор развития нервной системы - улучшение качества и глубины прогнозирования.

Для построения само-адаптирующейся системы в общем случае нужен следующий минимальный набор:

1. Система гомеостаза - группа базовых параметров, меняющих свои значения по какому то алгоритму при внешних/внутренних воздействиях.
2. Сенсорная система - распознаватели внешних/внутренних воздействий
3. Система значимости - определитель значимости распознанных воздействий, степени их воздействия на базовые параметры
4. Система оценки внутреннего состояния - определитель плохо/норма/хорошо
5. Система оценки выполнения рефлекса - определитель стало лучше/стало хуже
6. Рефлекторная система - база рефлексов, регулирующих изменения базовых параметров
7. Система формирования рефлексов - алгоритмы модификации и создания новых рефлексов

Детекция новизны в простейшем случае - отсутствие готового рефлекса для распознанных сенсорами комбинации признаков. В итоге делаем шаги в последовательности:

1. заводим глобальные переменные - базовые параметры
2. создаем базу первичных сенсоров-распознавателей и алгоритмы выделения из внешнего воздействия распознанных сенсорами примитивов
3. формируем базу значимостей и связываем ее с примитивами, чтобы каждый распознанный примитив или их комбинация имели количественную оценку +/- степени воздействия на базовый параметр, уменьшая или увеличивая его
4. создаем алгоритм определения текущего состояния системы плохо/норма/хорошо
5. создаем алгоритм определения состояния системы после выполнения рефлекса стало хуже/стало лучше
6. формируем базу удачных рефлексов, выполняя их и проверяя их успешность через п. 5
7. создаем алгоритм блокировки/модификации/создания нового рефлекса.

Вместо базы значимостей примитивов можно в простейшем случае добавить специальные сенсоры, определяющие степень воздействия по шкале: негативное/позитивное и либо фиксированную величину воспринятой порции воздействия, либо дополнительный алгоритм ее определения по каким то доп. признакам. То есть максимум, что можно вытянуть при 1 уровне абстрагирования через первичные сенсоры - определить общий фон негатив/позитив. Для более точного нужен второй уровень - ассоциации каждого примитива и их комбинаций. Например в случае с ботом слово "горячий" должно буквально "обжигать" бота, в отличии от первого варианта, когда каждое сообщение сопровождается указанием его тона, который и определяет значимость, а ее степень можно найти например по кол-ву символов в сообщении.

Алгоритм создания нового рефлекса в простейшем случае это импритинг. Про 4, 5 подробно уже говорилось.

Чтобы системе самостоятельно ставить цель ей нужны базовые потребности, в простейшем случае это может быть энергобаланс. Например зашить роботу следить за уровнем заряда аккумулятора. И от этого будет строиться все стратегии его поведения - поддержка оптимального уровня зарядки. То есть даже в самом простом случае всегда должна присутствовать хотя бы одна базовая потребность, удовлетворение которой автоматически формирует первичную базовую цель.

Начинаю готовить материл для сверх-популяризации представлений по индивидуальной адаптивности в виде лендинг-страницы.

Вот анимация про Дерево: fornit.ru/an-tree-1

Проблема в том, как на пальцах показать дикую сложность при том, что сами принципы реализации очень просты.

При этом нужно еще скопировать активности ветки Плохо в ветку Хорошо. Это про ситуацию с голодом, который активировал ветку Плохо, а при достижении корма активировалась ветка Хорошо. Но рефлекс поедания был активирован в погашенной ветке, стало быть найдя корм животное тут же потеряет к нему интерес. Стало быть  активацию контекста поедания нужно перебрасывать в ветку Хорошо.

Меня как БД-шника сразу настораживает такое копирование данных из одной таблицы в другую, что явно сигналит об избыточности в структуре данных, что нарушает принцип оптимизации. Явно схема не оптимизирована. И действительно, ее можно свести к обычному дереву с одним стволом, а базовые эмоции Плохо-Норма-Хорошо вывести отдельно. И тогда активация рефлексов будет происходить при активации уникального узла + активация базовой эмоции. То есть к каждому узлу на самом деле привязано три рефлекса, по числу базовых эмоций, которые и активируются соответственно текущей активной эмоции. При этом данные узла могут повторяться (слово "привет" может встречаться в самых разных ветвлениях), но ID его уникальный. Так же и рефлекс через его ID может быть привязан многократно к разным узлам, чтобы интерес к еде не пропадал при ее достижении.

В принципе программно можно реализовать и через три ствола дерева, но это как то не комильфо, схематично все таки правильнее, чтобы не было вышеназванных вопросов, отображать дерево с одним стволом и отдельными сенсорами базовых эмоций, так понятнее. Принципиальная схема и блок-схема кода могут сильно отличаться.

Если показывать схему формирования лучей снежинки - будет дико сложно и непонятно. А если показать принцип ее фрактального построения, указать входные параметры - все становится очень просто и очевидно.

Я буду еще отдельно рисовать фрагменты дерева для статьи, чтобы было все понятно или, все же, перерисую анимацию.

Никакая активность под Плохо не копируется под ветку Хорошо. Под всеми базовыми эмоциями есть узлы Голоден и жажда.

Если произвольно активировалось Хорошо, а есть дефицит глюкозы, то этот дефицит активируется под той базовой эмоцией, которая будет включена, в данном случае под Хорошо.

Никакие автоматизмы (непонятно, почему ты говоришь про рефлексы на стороне произвольности?) не копируются, а остаются на концах своих веток. Если под Хорошо в узле Голоден не окажется автоматизма Поедание, то при переактивации Дерева тварь сразу перестанет есть и начнет рекогносцироваться типа что делать, сформирует, наконец-то пробное действие Поедание, оно, конечно, будет вполне удачным и станет привычным автоматизмом.

Схема активации дерева

Здесь понятно опущены модели произвольности и показана только одна базовая потребность с одним значением, но по схеме видно, что вполне можно представить схему в виде обычного дерева. Хотя можно и в виде трехголового.

Вот даже на таком уровне - трудности: Плохо, Хорошо и Норма могут активироваться одновременно, да еще одновремнно запускаться автоматизмы 1-3.

Я пытался показать дерево на этом конструкторе, но все погрязло в синапсах.

Так что все окончательно будет проясняться на уровне страницы-лендинга со всеми наглядными пособиями.

Для этого сценарий пишется. Просто там надо указать, чтобы не тыкали руками, а жали только кнопку запуска сценария.

Схема, чтобы работала при любой попытке нажиманий, не имеет смысла, потому как и в реальности такого нет. Если ты искусственно через электроды начнешь стимулировать зоны мозга будет вигвам. Поэтому естественно там должен быть общий сценарий реагирования.

В принципе, если это не сложно, можно в форму редактор схемы добавить галку "Запретить ручную активацию" и выводить при ее нажатии где нибудь надпись при просмотре схемы: "Запуск только по сценарию". Тогда никто уже не сможет ничего там тыкнуть, только жать кнопку "Пуск".

Я кстати склоняюсь к тому, чтобы активацию состояний Плохо/Норма сделать по текущей активной базовой потребности а не по общей усредненной как решил поначалу. Потому как пропадает тогда смысл в переключении актуальности потребностей, а это однозначно должно быть. Сейчас вожусь с алгоритмом затухания при наложении Плохо/Хорошо и формировании Норма, все таки идея с затуханием кажется интересной.

Верно. 

Видимо придется вспоминать все там и дорабатывать. В принципе схема получилась вполне демонстрационной, только "Слабый голод" - лишнее потому как при получении еды и начала пиршества голод утихнет далеко не сразу (потому и переедают). Просто под Хорошо активируется Голод и идет уже поведение в контексте Хорошо, со своей спецификой хорошего настроения. а это могут быть совсем другие стереотипы поведения, чем под Плохо.

Вот это как раз сейчас пытаюсь осмыслить: это результат затухания активности или специальный механизм? Чем сильнее голод, тем сильнее переедаешь - и так всегда по умолчанию при переключении с одного контекста на его антагониста. И тут очевидно просится какая особенность схемотехники, приводящая к такому эффекту, например частичное наложение контекстов и интерференция. Потому, как если бы это касалось только некоторых стилей, тогда можно было бы списать на специальную адаптацию. А этот эффект судя по всему общий.

Датчики, что глюкозы достаточно в крови - сильно запаздывают потому как еда должна успеть разложиться и всосаться. С водой чуть лучше.

Перерисовал анимацию, теперь понятнее.

Если у тебя базовые эмоции это начальные узлы дерева, то их активация это по сути просто определение, в какой из трех веток активировался узел - получение головного родителя. Стало быть это не произвольная активация, ты не можешь активировать узел эмоции "Голод" с ветки "Хорошо", а потом активировать головной узел "Плохо". В какой ветке активировался узел, та базовая эмоция и будет. Если тебе нужна независимая активация базовых эмоций, тогда их надо выносить отдельно от дерева.

Вообще, базовые эмоции это текущее состояние актуального жизненного параметра. В моей схеме это нахождение в зоне комфорта (Норма) или выход из нее (Плохо). А эмоция Хорошо - заход в зону комфорта. И это определяется для текущего актуального жизненного параметра - у которого максимальное удаление от зоны комфорта (максимально плохое состояние). Система поочередно решает проблемы жизненных параметров, за счет чего и происходит переключение фокуса по списку и соответственно веткам дерева.

А теперь представим, что дерево сгенерило еще один временный жизненный параметр сразу сдвинув его уровень вне зоны, и он добавился в общий список. Он тут же станет актуальным и его оценка Плохо/Норма переключит фокус на соответствующую ветку дерева. Система начнет решать новую задачу, оценивая результат по той же схеме стало лучше/стало хуже/попал в зону. И как решит - удалит из базового списка. То есть целеполагание это просто создание временных жизненных параметров и добавление их в список. Такая схема ничего не рушит в прежней, а лишь немного усложняет его, придавая новый уровень.

Правда, если временный параметр удаляется - то каскадно надо удалять и все построенные под его решение ветки дерева и автоматизмы. Тогда получается, если его переводить в неактуальные и потом, если нужно, опять активировать.

Функции произвольности - вне Дерева. Реально ты можешь вызвать у себя произвольную базовую эмоцию, ну, м.б. с некоторой сноровкой, а вот артисты могут заплакать или зарадосться в любой момент, это - медицинский факт.

Я не про функции, переключающие фокус на узлы дерева, а про определение состояния плохо/норма/хорошо. Это ведь у тебя родительские узлы для дочерних узлов плохих/нормальных/хороших эмоций. Если ты активировал произвольно хорошу эмоцию - значит у тебя автоматически определилось состояние хорошо. А просто активировать например состояние плохо нет смысла - ты зашел в головной узел дерева и что потом? Тебе нужна конкретная эмоция, какой то дочерний узел, а не головной. Произвольно активируются они, а головные узлы базовых эмоций просто определяются как конечный родительский активной ветки.