GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.28 (112)<< < Пред. | След. > >>   Поиск:  
 Автор Тема: На: Об одном подходе к решению задачи создания СИИ
гость
188.170.75.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 2:36
Т.> некую d(R1,R2).

ну, в общем-то и сами суммы можно не стремиться 'точно' посчитать, а использовать частные суммы и оценки хвостов, которые вообще говоря сильно дисконтированы.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 3:48
Изменено: 17 май 17 9:08
Как мне представляется, идея дисконта (как идея искусственного уменьшения значимости удаленных во времени членов суммы)в СИИ не катит.

Она хорошо работает в ML и, в частности, в RL, но лишь при решении очень ограниченных модельных задач. Поскольку используется она от безысходности, как некий ad hoc прием (искусственно придуманная временная затычка проблемы).

Для СИИ это непригодно потому как дисконт означает уменьшение значения будущего, превращение его в серую, маловыразительную перспективу, о достижении успехов (или избежании наказаний) в которой особенно заморачиваться и не стоит.

А ведь важнейшей отличительной особенностью СИИ как раз является умение заботиться о будущем.

В ЕИ, кстати говоря, судя по всему такого дисконта нет, есть размытие вероятностей получения подкрепления - это да, а вот уменьшения его значимости нет. Иначе люди бы не думали о Рае и Аде, и прочих аспектах своего сверх-длительного существования.

И не мечтали бы люди о будущем, не расписывали бы его себе в столь ярких тонах, когда будущее событие, порой очень и очень отдаленное (свадьба, диплом, дембель, выигрыш миллиона, новая квартира, турпоездка, выход на пенсию) выглядит более насыщенно и сочно, чем текущая повседневность.

[Ответ][Цитата]
r
Сообщений: 837
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 15:01
Изменено: 17 май 17 15:03
Цитата:
Автор: Траян
сейчас решение проблемы с многошаговым прогнозированием видится совсем другим.
Да кто из нас не ошибался.
Но тут оно дело-то какое. Арифметика (как основной и единственный инструмент (в вашем случае)) не применима во многошаговом прогнозировании.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 15:22
Изменено: 17 май 17 15:24
Цитата:
Автор: r
Арифметика (как основной и единственный инструмент (в вашем случае)) не применима во многошаговом прогнозировании.


Почему? Гёдель не велит?

[Ответ][Цитата]
Victor G. Tsaregorodtsev
Сообщений: 3187
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 15:52
Цитата:
Автор: Траян
Здесь речь идет о том, не нужно пытаться решить проблему многошагового прогнозирования(планирования) стараясь найти некий универсальный метода сравнения любых двух стратегий S1 и S2 между собой.

По всей видимости, в такой постановке эта задача неразрешима в принципе. Так как для ее решения в предельно общем случае необходимо уметь находить отдельно суммы R1 и R2 матожиданий подкреплений на бесконечном горизонте (при сколь-нибудь сложных стратегиях объем вычислений становится неподъемным, там рост по экспоненте).

А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?

Как нас учит одна из классиков от фантастики, "Основой стратегии ... является не выбор какого-то одного пути к победе, а создание таких условий, чтобы все пути вели к ней. В идеале. Вашу смерть я использую одним способом, успех - другим."
[Ответ][Цитата]
гость
188.170.83.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 18 май 17 2:45
Т.> в СИИ

дык если про сии, то и модель d(R1,R2)-расчета может казаться не очень адекватной.. эвристический интеллект на стадии 'предварительного решения вопроса' (ваша идея вложенных пространств развертывающегося решения вовсе не требует обоснования через [w,d,c]) ориентируется вначале на некие глобальные характеристики обобщенных вариантов альтернатив действия (напр. по показателям времени, степени знакомства, возможным рискам (не сливая выигрыши и потери в единую сумму), степени неопределенности, общей сложности).
как бы эвристический интеллект придет к определенному решению без того, чтобы ультрарационализировать через W(S1)*d(S1,S2)..

кстати, в еи встроены 'иррациональности' вроде склонности выбрать более желанное (ваша 'забота о будущем', образ желанного как бы приближен (не дисконтирован)), а не 'объективно ценное', наверное не просто так - это некий адаптивный субоптимум на почве того, что 'объективные полезности-вознаграждаемости' определить однозначно трудно.
[Ответ][Цитата]
kondrat
Сообщений: 4026
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 18 май 17 15:18
Цитата:
Автор: Victor G. Tsaregorodtsev


А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?

Как нас учит одна из классиков от фантастики, "Основой стратегии ... является не выбор какого-то одного пути к победе, а создание таких условий, чтобы все пути вели к ней. В идеале. Вашу смерть я использую одним способом, успех - другим."

Это сработает, если Вы - Бог.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 0:56
Изменено: 19 май 17 1:00
Еще раз зафиксирую для себя текущее видение следующего этапа развития СПИ.
(не хочется терять столь трудно и редко добываемое состояние ясности).

Итак: Предполагается, что все новые стратегии (модели мира, личности) создаются всего лишь изменением, модификацией, усовершенствованием уже имеющейся стратегии (модели мира, личности).

Каждое такое изменение сводится либо к замене каких-то отдельных частей, либо к добавлению новых.

Ясно, что если исходная стратегия очень проста, то ее изменение может выглядеть как замена всей этой стратегии на новую. Но это не так - новые стратегии не могут создаваться с нуля, на пустом месте.

Формально процесс модернизации стратегий можно представить следующим образом:
пусть k1,k2,... kn - отдельные компоненты стратегии P.
продукционные правила позволяющие изменять P могут выглядеть следующим образом:
если А>B, то существует k(n+1);
если a=b, то k2=kx и т.д.

Конечно же, при реализации такого подхода в агента придется вкладывать предустановленную онтологию (кучу априорных знаний), т.е. сделать то, чего я все время пытался избежать. Но судя по всему, без предустановленной онтологии (в виде декларативных либо процедуральных знаний) нельзя обойтись в принципе.

Утешением может послужить то обстоятельство, что при таком подходе (изменения имеющегося) объем вкладываемой онтологии будет на порядки меньше того, который пришлось бы вкладывать в агента способного строить стратегии "с нуля".

И самое главное - при этом удастся обойтись без разбора разного рода "вечных", "проклятых" философских вопросов.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 0:59
Цитата:
Автор: Victor G. Tsaregorodtsev
А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?


Одно дополняет другое, имхо.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:21
Цитата:
Автор: гость
... это некий адаптивный субоптимум на почве того, что 'объективные полезности-вознаграждаемости' определить однозначно трудно.


Если рассматривать ЕИ как сочетание сознания и подсознания, то ЕИ находит суммы будущих вознаграждений (с той или иной степенью приближения) всегда, причем, сравнительно легко и быстро.

Это видно хотя бы из того, что ЕИ =(сознание+подсознание) никогда, ни в каких ситуациях - сколь неожиданными, экзотичными и даже шокирующими бы не были - ЕИ не "зависает" не уходит в "аварийный останов" и прочее.

Может притормозить одна из составляющих (сознание), перераспределиться управление в пользу подсознания - но в целом аппарат мышления не выключится, не остановит свою работу - нацеленную на максимизацию суммы подкреплений.

В любой ситуации будет выполняться процедура выбора действия (бездействие - тоже действие), а это значит, что в любой ситуации происходит вычисление суммы.

Причина того, почему Еи оказывается способным всегда определять 'объективные полезности-вознаграждаемости' кроется в особенностях организации процессов получения подкреплений/первичных эмоций.
[Ответ][Цитата]
rrr3
Сообщений: 11857
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:24
Цитата:
Автор: Траян
(не хочется терять столь трудно и редко добываемое состояние ясности).

Так далеко не уехать от начальной точки... следует перманентно "терять" и перманентно "добывать" "состояние ясности"..., но новые, более ясные "состояния ясности"...
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:36
Цитата:
Автор: rrr3
Так далеко не уехать от начальной точки... следует перманентно "терять" и перманентно "добывать" "состояние ясности"..., но новые, более ясные "состояния ясности"...


Полностью согласен.
[Ответ][Цитата]
NO.
Сообщений: 10700
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 3:17
Цитата:
Автор: Траян
В любой ситуации будет выполняться процедура выбора действия (бездействие - тоже действие), а это значит, что в любой ситуации происходит вычисление суммы.

Почему суммы-то? Думать обычно приходится о каких-то системах, а там как раз везде умножение, нужно соединять в целое не суммируемые вещи. Суммированием обычно занимается просто цикл, там ничего умного не нужно.
[Ответ][Цитата]
гость
188.170.81.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 3:35
конечно в базисе 'интеллекта' не сумматоры, а аплификаторы, композиции.. не даром же ранее говорилось про неаддитивные меры.. операционность не сразу регуляризируется в алгебраичность (пусть и не вполне дефадзифицированную).. не сразу нелинейность приводит к квазилинейным суперпозициям..
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 4:42
Изменено: 19 май 17 4:47
Цитата:
Автор: NO.
Суммированием обычно занимается просто цикл, там ничего умного не нужно.


Бинго!
Очень хорошее и правильное замечание. Попадание в яблочко.

Но Вы забегаете вперед.

Обсуждением роли циклов в общем рабочем процессе ЕИ, их месте, функциях, значении и пр. (а они там встречаются буквально на каждом углу), я предполагал заняться несколько позже.
[Ответ][Цитата]
 Стр.28 (112)1  ...  24  25  26  27  [28]  29  30  31  32  ...  112<< < Пред. | След. > >>