GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.24 (112)<< < Пред. | След. > >>   Поиск:  
 Автор Тема: На: Об одном подходе к решению задачи создания СИИ
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 1:42
Сохраню это здесь, приведенные рассуждения о целеполагании имеют прямое отношение к предлагаемому подходу.

Автор: Михайло
Вообще обсуждать, что там происходит у живых существ, это неблагодарное дело, лучше ограничиться общими представлениями, иначе можно свалиться в бредогенерацию и псевдонауку.


Даже если ограничиваться лишь общими представлениями, для того, чтобы разговор о целях был содержательным необходимо различать:

- общую низкоуровневую цель, используемую непосредственно в управлении действиями;

- "цель для себя", т.е. то, что принимает за свою цель данное существо на основе своей высокоуровневой модели мира;

- "цель извне", т.е. то, что приписывает данному существу в качестве его цели внешний наблюдатель (по результатам изучения внешних проявлений его деятельности);

- промежуточную цель существа, к которой он стремится для достижения своей общей низкоуровневой цели.

Без четкого разделения различных трактовок понятия "цель", указания того, какой смысл мы вкладываемой в это понятие в том или ином случае нам не избежать бесконечной путаницы.
[Ответ][Цитата]
гость
78.25.123.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 2:00
все-таки нужно как-то отделываться от этой 'целеподчиняющей' заразы.. в базисе лежит не низкоуровневая цель, а МЕХАНИЗМ самовоспроизводства, механизм потребностей - нет цели удовлетворять потребности, есть ВЫНУЖДЕНИЕ, ПРИНУЖДЕНИЕ, система не может не удовлетворять потребности (иначе системная целостность нарушится). В базисе могут лежать ЭВРИСТИКИ (эвристическая природа интеллекта) - типо а давайте промоделируем мезанизм потребностей в системе ии, ради повышения ее аутентичности.. А слой целенаправленной активности появляется только поверх базы. Цель удовлетворить потребность это не исходный механизм интеллекта - исходный механизм это ассимиляция событий, которые приводят к редукции потребностного напряжения. Только потом 'мотив cдвигается на цель' и активация потребности обеспечивает вызов образов возможных целей.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 2:52
Для того, чтобы была понятней моя точка зрения приведу две пространные цитаты.

Первая из Вайнцвайг М.Н., Полякова М.П. Механизм мышления и моделирование его работы в реальном времени // Интеллектуальные процессы и их моделирование. М.: Наука, 1987.

"Инстинктивное поведение не использует при своей организации никакие внешние механизмы мотивации. Это, однако, не имеет места для других уровней. В основе условнорефлекторного и сознательного поведения лежат ранее испытанные эмоции или сформированные на инстинктивном уровне побуждения.

Эмоция - это величина, способная принимать как положительные, так и отрицательные значения и характеризующая меру получаемого в данный момент удовольствия или неудовольствия. Она является основной оценкой качества состояния организма и отношения к нему внешней среды. Посредством формирования желаний или нежеланий совершения тех или иных событий эмоции определяют цели будущего поведения, которое направлено на максимизацию некоторого их интеграла. Эмоции возникают, т.е. становятся не равными нулю, в ответ на совершение тех или иных событий. Как уже говорилось, они делятся на первичные, не зависящие от состояния памяти, и вторичные, значения которых определяются ассоциациями с содержимым памяти. Получаемое в данный момент времени удовольствие или неудовольствие определяется суммарным значением всех соответствующих этому моменту первичных и вторичных эмоций.

Первичные эмоции возникают в результате изменения во времени значений жизненно важных параметров, таких, как температура тела, давление крови, количество в ней кислорода или сахара и пр. Каждому из таких параметров r соответствует значение нормы ro.

По мере удаления текущего значения r от нормы или приближения к ней формируется отрицательная или соответственно положительная аддитивная компонента эмоций Эtr, которая может быть представлена в виде

Эtr = (r-r0)(k-lr'),

где r'- производная от r по времени, k и l - некоторые положительные коэффициенты, которые в первом приближении можно считать постоянными.

Первичные эмоции согласованы с безусловнорефлекторными действиями в том смысле, что последние часто приводят к избавлению от отрицательных или достижению положительных первичных эмоций. Это, однако, не означает, что механизм безусловных рефлексов управляется первичными эмоциями - он действует самостоятельно по принципу стимул-реакция. Безусловные рефлексы и первичные эмоции являются, по существу, различными выходами одного и того же устройства (сенсорного анализатора), различными следствиями одних и тех же условий. "
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 2:57
А это уже из другого источника:

"Задание метацели нормальных интеллектуальныхустройств с помощью эмоций

1. На протяжении всего времени своего существования, нормальное интеллектуальное устройство стремится к одной и той же цели. Эту цель будем называть метацелью. Какие бы текущие задачи не пришлось решать устройству, решение любой из них не может быть для него метацелью, а может быть лишь средством ее достижения.

2. Метацель нормального интеллектуального устройства не может быть задана в виде символьного описания некоторой многокомпонентной ситуации, к существованию которой устройство должно стремиться, потому, что при этом неизбежно возникают неразрешимые противоречия, принимающие порой форму парадоксов (главное из этих противоречий сводится к тому, что устройство, способное к свободному саморазвитию и потому не имеющее точно очерченных ограничений в своем интеллектуальном развитии, не будет строго придерживаться своей формально описанной цели, и наоборот).

Метацель нормального устройства может быть задана только как задача максимизации значения некоторой, одной-единственной, количественной характеристики мира (переменной метацели). Приращения переменной метацели должны быть реальными событиями, т.е. быть абсолютно объективными.

3. Для описания реально существующего нормального устройства, как и для описания любого другого реального объекта, могут быть привлечены количественные характеристики, которые либо поддаются измерению, либо в принципе допускают измерение. Одна из таких характеристик устройства обладает особыми свойствами и называется эмоцией. Эмоция нормального устройства может находиться не менее чем в трех разных состояниях.

4. У живых существ, эмоция вырабатывается в результате взаимодействия различных реальных величин (таких, как температура тела, давление крови и содержание в ней глюкозы и кислорода, и т.д.) характеризирующих состояние организма. Для большинства живых существ, вполне пригодно следующее определение из [2]: “Эмоция - это величина, способная принимать как положительные, так и отрицательные значения и характеризующая меру получаемого в данный момент удовольствия или неудовольствия. Она является основной оценкой качества состояния организма и отношения к нему внешней среды”. Чрезвычайно важным здесь является то, что в результате взаимодействия множества, имеющих самую разную природу, реальных величин, получается лишь одна величина, состояние которой можно отразить лишь одним числом (пригодным для обозначения количества), благодаря чему, процедура сравнения между собой различных состояний живого существа, может быть сведена к процедуре сравнения различных чисел, обозначающих состояние этой величины, и потому завершиться получением однозначного результата .

5. Величина эмоции, испытываемой нормальным интеллектуальным устройством в текущий момент времени, отражается соответствующим натуральным числом, записываемым в специальный регистр, называемый регистром эмоции. Будем считать, что нормальное устройство испытывает эмоцию, которую принято называть “отрицательной”, в тех случаях, когда число записанное в регистр эмоции недостаточно велико (т.е. оно меньше некоторого другого, заранее указанного, числа).

6. Как и у некоторых живых существ, метацель нормального устройства может сводиться к тому, чтобы величина эмоции была возможно большей в ближайшем будущем. Либо, метацель нормального устройства может быть такой же, как и у некоторых разумных существ и заключаться в том, чтобы к некоторому моменту в будущем, сумма, всех испытанных устройством эмоций, была максимально большой. В этом случае, как пишут авторы [2]: “Посредством формирования желаний или нежеланий совершения тех или иных событий эмоции определяют цели будущего поведения, которое направлено на максимизацию некоторого их интеграла.”"
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 2:59
И еще, до кучи:

"Двухступенчатый механизм эмоции

1. Величина эмоции вырабатывается в результате сложения величин первичной эмоции и вторичной эмоции (см. [2]).

2. Первичная эмоция зависит от количественных характеристик материальных объектов являющихся частью устройства. Текущее состояние этих объектов определяется предшествующими состояниями внешней среды.

3. Универсальность первичной эмоции заключается в том, что при всем разнообразии возможных состояний внешней среды, не может быть такого состояния, на которое не выработалась бы первичная эмоция (во всяком случае, вплоть до разрушения тела). Поэтому, те или иные значения эмоции являются сигналами, позволяющими живым существам ориентироваться в самых разнообразных ситуациях и осуществлять чрезвычайно гибкое поведение.

4. Вторичная эмоция отражает состояние внутренних информационных процессов. Вторичные эмоции значительно слабее первичных эмоций.

Соотношение между средней вторичной и средней первичной эмоциями, показывает степень интровертности устройства.

5. Нормальное устройство может привести свою эмоцию в желательное состояние (то, какое состояние эмоции желательно, определяется его метацелью), только воздействуя на внешнюю среду, потому что состояние самой значимой составляющей эмоции, т.е. первичной эмоции, зависит только от состояния внешней среды. Именно это обстоятельство принуждает устройство к активным внешним действиям. В тех абсолютно недопустимых случаях, когда у устройства появляется возможность изменять величину эмоции не опосредованно, а напрямую (например, у некоторых живых существ это может происходить при химической или электрической самостимуляции центра удовольствия расположенного между гипоталамусом и лимбической системой), его интеллект будет разрушаться, вследствие того, что искусственно создаваемые этим устройством приращения к величине метацели, будут неадекватны условиям внешней среды (такие приращения противоречат той концепции метацели, которая приводит к возникновению и существованию интеллекта).

6. Если эмоция некоторого нормального устройства напрямую зависит от эмоции другого устройства или живого существа, то будем считать, что оно использует двухступенчатый механизм эмоции.

7. Можно спорить, будет ли устройство, использующее двухступенчатый механизм эмоции, самостоятельной личностью, но то, что применение такого механизма позволяет обойти большинство аргументов Х. Дрейфуса, которые он привел в [4] для доказательства невозможности создания искусственных мыслящих устройств, представляется очевидным.

8. В качестве источника первичной эмоции могут быть использованы параметры самых разнообразных устройств и живых существ, но наиболее рационально, использовать для этого эмоцию человека непосредственно использующего нормальное устройство для решения своих задач. Такого человека, непосредственно взаимодействующего с нормальным устройством, будем называть оператором .

9. Простейшим передаточным звеном в двухступенчатом механизме эмоции, может быть специально предназначенный для этого цифровой регистр, являющийся частью нормального устройства. Величина числа, записанного в этот регистр, отражает величину первичной эмоции устройства.

10. Регистр первичной эмоции доступен устройству по чтению и абсолютно недоступен по записи. Оператору этот регистр доступен по записи.

11. Чем большее удовлетворение испытывает оператор от работы нормального устройства, тем большее число он записывает в его регистр первичной эмоции."
[Ответ][Цитата]
гость
78.25.123.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 3:40
обратили внимание на "эмоции определяют цели будущего поведения, которое направлено на максимизацию некоторого их интеграла"? поведение направлено на цель, Но оно направлено 'на самом деле' на нормализацию (а не максимизацию) более сложно устроенного функционала чем просто дельта в компараторе.

когда вы говорите о 'метацели', то это совсе не то, что цель в узком (михайловом) понимании. Опять же максимизация это заужение - отчего не минимакс? - точнее, кажется, говорить о нормализации (тем более 'нормальное устройство'). Только абстрактный рациональный агент максимизирует полезность, реальный агент довольствуется субмаксимумами (и из-за неспособности поставить строго задачу на максимизацию ('всевозможную') и из-за наличия 'иррационального' компонента в мотивах).

пассаж про Дрейфуса не понятен - эмоциональный механизм это т.ск. эмоциональный интеллект (механизм выработки решений на основе эмоциональных оценок), но это еще не достаточно 'мыслящее устройство'.. хотя, классики, конечно, писали об единстве интеллекта и аффекта..
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 10:10
Изменено: 13 апр 17 10:48
Цитата:
Автор: гость
обратили внимание на "эмоции определяют цели будущего поведения, которое направлено на максимизацию некоторого их интеграла"?


Обратил. Много лет тому назад обратил, задолго до прочтения Вайнцвайга.

Цитата:
Автор: гость
поведение направлено на цель, Но оно направлено 'на самом деле' на нормализацию (а не максимизацию) более сложно устроенного функционала чем просто дельта в компараторе.


Все верно. Это я понял достаточно давно. Цель ЕИ - это максимизация суммы первичных
положительных эмоций (минус отрицательные).
Больше ЕИ ничего не знает о целеполагании, да это ему и не нужно.

Но! дело все в том, что "поставщиком" этих первичных эмоций является сома, биологический организм-носитель этого ЕИ. Причем, эта сома устроена таким образом (тут эволюция с естественным отбором постарались), что она генерирует положительные сигналы находясь в тех состояниях, которые благоприятны для биологического вида нашего ЕИ.

И таким образом получается, что ЕИ стремясь к получению положит. оценок в конечном счете стремится к достижению той цели, которая в первую очередь ему диктуется его сомой. А поскольку сома существует в реальном мире, взаимодействуя с населяющими его объектами - как живыми, так и неживыми - тот тут все еще на несколько порядков становится сложнее.

А в том, что ЕИ способен руководствоваться лишь такой предельно простой низкоуровневой целью как получение макс. удовольствия и мин. боли можно легко убедиться с помощью прямых экспериментов. Это - медицинский факт.

PS поставщиком низкоуровневых положит./отриц. сигналов могут служить и оценщик информационных процессов проистекающих в ЕИ (вторичные эмоции). Но на данном этапе создания СИИ их лучше пока вообще не касаться.

Цитата:
Автор: гость
когда вы говорите о 'метацели', то это совсе не то, что цель в узком (михайловом) понимании.


Именно поэтому я и предложил использовать понятие цели с указанием одного из четырех смыслов которые могут быть в него вложены, когда мы говорим о СИИ.

Цитата:
Автор: гость
Опять же максимизация это заужение - отчего не минимакс? - точнее, кажется, говорить о нормализации (тем более 'нормальное устройство').


На мой взгляд, максимизации (или минимизации обратной величины) вполне достаточно.

Цитата:
Автор: гость
пассаж про Дрейфуса не понятен - эмоциональный механизм это т.ск. эмоциональный интеллект (механизм выработки решений на основе эмоциональных оценок), но это еще не достаточно 'мыслящее устройство'.. хотя, классики, конечно, писали об единстве интеллекта и аффекта..


Среди множества аргументов Дрейфуса одним из наиболее известных является тот, в котором невозможность создания СИИ обосновывается отсутствием у последнего индивидуального социального, психологического и биологического опыта, т.е. опыта становления личности.

При применении двухступенчатого механизма эмоций, когда целями СИИ становятся цели взаимодействующего с ним человека-оператора (стремление к тому, чтобы уже он получал максимум удовольствия/минимум боли, это возражение - как и целый ряд других - автоматически снимается.

При использовании СИИ с двухступенчатым механизмом эмоций он может рассматриваться как очередная, еще одна, теперь уже кремниевая сверхновая кора, наросшая над неокортексом.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 13 апр 17 10:25
Изменено: 13 апр 17 10:26
Цитата:
Автор: гость
обратили внимание на "эмоции определяют цели будущего поведения, которое направлено на максимизацию некоторого их интеграла"?


Кстати говоря, эта идея о максимизации первичных эмоций (положит.-отриц.) лежит в основе такого известного формализма как марковский процесс принятия решений ((Markov decision process (MDP)).

Который, в свою очередь, лежит в основе такого бурно развивающегося направления в ИИ как обучение с подкреплением (Reinforcement Leaning (RL)). На мой взгляд, направления наиболее перспективного и естественного.

Интеграл очень часто аппроксимируют суммой - удобно и практично. У меня в проге СПИ тоже юзается сумма.
[Ответ][Цитата]
гость
78.25.121.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 14 апр 17 6:33
Т.> Цель ЕИ - это максимизация суммы первичных положительных эмоций (минус отрицательные).

разве вы как крыса со вживлеными в области позитивного подкрепления гипоталамуса электродами постоянно нажимаете на кнопку самостимуляции? Вам же важна не величина внутреннего подкрепления, а временная СТРУКТУРА подкрепления (причем гетерогенных).
разве такой 'маньячный' интеллект будет правильным? каждая новая порция позитивной эмоции (приведенной) обесценивается, девальвируется, ее системный эффект угасает. Разве мыслима только логика наращивания аккумулированной положительной эмоции все большей ценой? отчего не рассмотреть логику ценности не величины эмоции, а величины ПЕРЕПАДА? Один раз 10 единиц позитива менее ценно чем десять раз по единице.. переход от слабого удовольствия к умеренному менее ценен чем от слабого негатива к нейтральности или от нетральности к слабому позитиву..
вообще, нормализацию можно рассматривать тоже как экстремализацию - минимизацию отклонения от нормы. Но суть, кажется, что полезнее не сверхценой минимизировать, а добраться до области допустимых значений около нормы. Важно не огромное удовольствие, а сам факт возникновения хоть каких удовольствий (набора удовольствий).

> Это - медицинский факт

нет, медицинский факт в том, что волевым усилием можно терпеть боль (внутренняя механика блокирования безусловных болевых рефлексов). Чувство боли и соотв. нег. эмоции перекрываются эмоциями доводов терпеть боль - но перекрытие это своеобразное - актуально эти отложенные эмоции вознаграждения за терпение не проявляются на уровне текущего сознания (боль все равно доминирует - появляется дополнительное волевое измерение в структуре эимоций-как-регуляторов).
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 14 апр 17 8:43
Цитата:
Автор: гость
разве вы как крыса со вживлеными в области позитивного подкрепления гипоталамуса электродами постоянно нажимаете на кнопку самостимуляции? Вам же важна не величина внутреннего подкрепления, а временная СТРУКТУРА подкрепления


Мне - как и любому ЕИ - при выборе действий важна лишь будущая сумма.

Цитата:
Автор: гость
каждая новая порция позитивной эмоции (приведенной) обесценивается, девальвируется, ее системный эффект угасает.


Все одинаковые новые порции равноценны.

Цитата:
Автор: гость
Разве мыслима только логика наращивания аккумулированной положительной эмоции все большей ценой?


Никакой аккумуляции не происходит.

Цитата:
Автор: гость
отчего не рассмотреть логику ценности не величины эмоции, а величины ПЕРЕПАДА? Один раз 10 единиц позитива менее ценно чем десять раз по единице.. переход от слабого удовольствия к умеренному менее ценен чем от слабого негатива к нейтральности или от нетральности к слабому позитиву..


А затем ввести новую линейную шкалу эмоций, в которой бы ранжировались все эти переходы, et cetera...

Цитата:
Автор: гость
Важно не огромное удовольствие, а сам факт возникновения хоть каких удовольствий (набора удовольствий).


При выборе действий важна лишь будущая сумма.

Что касается огромности удовольствия...
Вообще говоря, у меня есть подозрение, что в эмоциональной системе целеполагания можно обойтись всего лишь двумя значениями величин эмоций - условно говоря, 0 и 1.

Если допустить, что восприятие действительности дискретно (c квантом равным ~20ms)/
и что в каждом из этих дискретов могут быть получены либо 0 либо 1, то степень благоприятности состояния может оцениваться интегрально, как сумма подкреплений полученная, скажем, за ~1 сек.


Цитата:
Автор: гость
нет, медицинский факт в том, что волевым усилием можно терпеть боль (внутренняя механика блокирования безусловных болевых рефлексов). Чувство боли и соотв. нег. эмоции перекрываются эмоциями доводов терпеть боль - но перекрытие это своеобразное - актуально эти отложенные эмоции вознаграждения за терпение не проявляются на уровне текущего сознания (боль все равно доминирует - появляется дополнительное волевое измерение в структуре эимоций-как-регуляторов).


То есть, Вы сперва говорите, что я неправ - а затем приводите доводы подтверждающие мою точку зрения?!
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 14 апр 17 8:50
Изменено: 14 апр 17 8:58
ХУДОЖЕСТВЕННОЕ ЭССЕ ПО ТЕМЕ (не мое)

http://blog.stratoplan.ru/brain-chemicals-3-years/

"Первые химические неприятности

95% всех решений происходит в рептильном и лимбическом мозгу.

А мы адресуемся в своих речах, письмах и презентациях к человеческому мозгу, который очень хорошо научен и умеет говорить НЕТ. Он просто сохраняет нас от изменений. Вдумайтесь — ваш мозг мешает вам изменяться… то есть он думает, что защищает вас от изменений. И чем больше у вас мозга, чем больше в нем опыта, тем для вас хуже. Умные люди умеют защищаться. От всего.
Какие события или ситуацию вызывают (то есть становятся триггерами) тех или иных гормонов?

Допаминовые (или дофаминовые) триггеры
Ситуации, в которых мы ждем чего-то приятного или неизвестного, но с ожидаемым позитивным разрешением. Длительность воздействия: 2 минуты.

Окситоциновые триггеры
Ощущение защищенности, единения, любви, рождения ребенка. 6 минут на всё про всё, а потом надо снова что-то думать или подкреплять.

Кстати, многие курильщики сидят не на никотине, а на окситоцине. То есть привыкают не к никотину, а к социальному окружению курильщиков — поговорить, сделать перерыв.

Серотониновые триггеры
Превосходство, повышение статуса, победа, узнаваемость и признание. Целых 24 часа этого чудесного прихода. Сутки для победителя. Сутки на разграбление города.

Эндорфиновые триггеры
Чуть меньше, около 4 часов купает нас в этом удовольствии понимание, что ты просто жив, существуешь и вообще есть! Пояснимся. Примеров много.

Если сначала было больно, а потом на волне адреналина отпустило.
Искренние смех, слезы или ярость — просто для справки, все в одной строке по силе воздействия.
Мышечное удовольствие: массаж, например.
Яркие звуки, музыка, ритм (постойте, постойте, это же клуб?)
Воспоминание о всем перечислено выше тоже может сработать.

Триггеры кортисола (или кортизола)

Разделение мамы и ребенка
Развод или измена супруга
Потеря статуса после увольнения
Социальная изоляция (тишина)
Когда вас обманули
Ощущение перенесенного вреда, потери, страхи.

Есть мысли, сколько может жить такая штука?

3 года. ТРИ $%^! года.

Привет эволюция и все пережитые нашими предками боли и разочарования: туда не ходи — укусят, сюда не влезай — упадешь, всегда ел зеленые плоды — вот и жуй, не отравишься. Мозг очень восприимчив именно к кортизолу, потому что это помогало нам выживать как биологическому виду. Мы не очень быстро бегаем, не очень круто летаем, но выжили. Кортизол и мозг, плотно на него подсевший. Так было надо.

Вдумайтесь. Кортизол живет в нас 3 года. И заставляет ваш мозг тормозить. Заставляет ваш мозг уберегать вас. Наказали? Не рыпайся. Уволили? Не высовывайся. Мозг очень быстро учится."
[Ответ][Цитата]
LiveBaster
Сообщений: 247
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 15 апр 17 3:51
Цитата:
Автор: Траян
А в том, что ЕИ способен руководствоваться лишь такой предельно простой низкоуровневой целью как получение макс. удовольствия и мин. боли можно легко убедиться с помощью прямых экспериментов.

Попробуйте создать модель Айболита, в рамках этой теории:

"И горы встают перед ним на пути,
И он по горам начинает ползти,
А горы всё выше, а горы всё круче,
А горы уходят под самые тучи!

«О, если я не дойду,
Если в пути пропаду,
Что станется с ними, с больными,
С моими зверями лесными?

И сейчас же с высокой скалы
К Айболиту слетели орлы:
«Садись, Айболит, верхом,
Мы живо тебя довезём!»

И сел на орла Айболит
И одно только слово твердит:
«Лимпопо, Лимпопо, Лимпопо!»"
[Ответ][Цитата]
гость
78.25.120.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 15 апр 17 4:20
Т.> важна лишь будущая сумма.

вы сверхупрощаете - упрощенная модель будет работать, но будет работать 'с отклонениями'.
решающая процедура более сложная - учитывается и неопределенность ожидаемого вознаграждения - решается дилемма большого вознаграждения с большой неопределенностью и меньшего с меньшей, общая проблематика выбора в условиях неопределенности и риска. Рациональны разные критерии выбора, реальная система реализует некий гибридный процесс выбора (адаптивный критерий).

> Все одинаковые новые порции равноценны.

нет, даже собственно внутреннее подкрепление имеет разную ценность в разных внутренних контекстах. Удовольствие от каждой новой рюмки водки зависит от текущей компании (даже если пока не зависит от уже выпитого)..

> Никакой аккумуляции не происходит.

? cумма просто слишком простой оператор для накопления

> подтверждающие мою точку зрения?!

да не спорю я, я только пытюсь обратить ваше внимание на заведомые упрощения (упрощая учитывайте 'цену' упрощения).
[Ответ][Цитата]
бессмертный сложный
Сообщений: 408
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 15 апр 17 4:22
Изменено: 15 апр 17 4:22
Цитата:
Автор: Траян

Вдумайтесь. Кортизол живет в нас 3 года. И заставляет ваш мозг тормозить. Заставляет ваш мозг уберегать вас. Наказали? Не рыпайся. Уволили? Не высовывайся. Мозг очень быстро учится."
Тут какая то ошибка, кортизол сам по себе не оказывает такого сложного психотропного эффекта, его пьют и колют как противовоспалительное, при ревматизмах, колитах и тд. С нейромедиаторами всё обстоит куда сложнее чем "дофамин-кайф, адреналин-страх", это как если сказать про компьютер, что если ток идет в основном по светлым проводкам, то компьютер работает с видео, а если по темным то с текстом.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 15 апр 17 7:57
Цитата:
Автор: LiveBaster
Попробуйте создать модель Айболита, в рамках этой теории:


Про все это - мотивацию, волю, планирование - немного выше Хмур написал: "Чувство боли и соотв. нег. эмоции перекрываются эмоциями доводов терпеть боль - но перекрытие это своеобразное - актуально эти отложенные эмоции вознаграждения за терпение не проявляются на уровне текущего сознания (боль все равно доминирует - появляется дополнительное волевое измерение в структуре эимоций-как-регуляторов)...
[Ответ][Цитата]
 Стр.24 (112)1  ...  20  21  22  23  [24]  25  26  27  28  ...  112<< < Пред. | След. > >>