GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.81 (112)<< < Пред. | След. > >>   Поиск:  
 Автор Тема: На: Об одном подходе к решению задачи создания СИИ
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 1:38
Изменено: 07 окт 18 1:44
Вернемся теперь к нашим баранам. К задаче 1 этапа обучения из описанного выше примера.
"1 этап.
Обучение агента производится путем подачи ему на вход сочетаний вида:
SA, SБ, SВ, SГ, SД, SЕ, SЖ, SЗ .... и т.д. - на второй позиции буквы русского алфавита, которым мы будем обучать агента.
Смысл здесь такой. Учитель подает агенту сообщения
Скажи "А", Скажи "Б", Скажи "В", Скажи "Г", Скажи "Д", Скажи "Е", Скажи "Ж", Скажи "З" ..." и т.д.

Начиная обучаться агент СПАЙ параллельно использует сразу несколько форм обучения.
Про слабую все понятно, просто заполняется таблица вход-выход-вероятность подкрепления.

Постепенно, совершая те или иные ответные действия набирается необходимая статистика, которая используется при выборе действий (для простоты будем считать что выбираются, те которые с максимальной вероятность дадут "+")

Как можно будет видеть дальше, поначалу - на самых первых шагах - агент при выборе своих действий использует результаты слабого обучения. Tabula rasa - ничего не попишешь.

Посмотрим теперь как обстоит дело при сильном. При сильном строится новое знание отображающее какую-то особенность мира, генерящего обучающую выборку.

Перед этим система создания новых предположений/гипотез/знаний регистрирует содержащуюся в обучающей выборке особенность

(про то, как происходит нахождение различных особенностей - отдельный разговор, это очень интересная и плодотворная тема, касающаяся таких вещей, как интуиция, инсайт, сознание и прочее).

В нашем случае регистрируется следующая очевидная особенность. Во всех наиболее актуальных кейсах при получении "+" раздражитель S остается неизменным, следующие за ним продолжения могут представлять собой разные сочетания пар букв, но на выходе получается один и тот же результат т.е. "+".
Отсюда строится предположение о том, что все такие сочетания следующие за S имеют нечто общее.
Этим общим может быть некий таинственный - и не поддающийся прямому наблюдению, т.е. существующий скрытно, за кулисами событий - объект Z, появляющийся каждый раз, когда возникает сочетание приводящее к "+".

Именно совместное существование объектов S и Z является причиной появления "+".

Когда знание о возникновении/существовании Z только строится, т.е. является абсолютно новым, ни разу не проверенным на практике, ему изначально приписывается минимум
определенности, т.е. вероятность равную 0.5.

Как и знанию о том, что совместное существование S и Z приводит к "+".
(S,Z)->"+" p=0.5

Т.е. поначалу это совершенно бесполезные, заведомо непригодные для применения знания (их вероятность слишком близка к 0.5).

Но затем, по мере проверки их на полученных опытных данных, приписываемые им вероятности перевычисляются. А поскольку в рамках данного примера они будут всегда подтверждаться, то постепенно будет происходить поляризация их вероятностей к 1.

При достижении же определенного значения этой вероятности, эти знания окажутся в глазах агента предпочтительнее знаний содержащихся в таблице слабого обучения (напомню, что агент всегда выбирает наиболее вероятные знания).

Важно!
Поляризация этих, самостоятельно построенных агентом знаний происходит намного быстрее, чем знаний слабого обучения. По той простой причине, что встречаться на практике и перевычисляться они будут намного чаще (в нашем случае в ~32 раза), поскольку имеют более общий характер.

PS Я здесь описал суть используемого агентом СПАЙ приема сильного обучения в предельно упрощенном, даже несколько утрированном виде. Хотя, вряд ли и это поможет. Не думаю, что суть дела ухватят хотя бы два человека с данного форума. В лучшем случае.

PPS Кому интересно, могут поломать головы над природой объекта Z. Что из имеющегося в реальном мире может ему соответствовать.
[Ответ][Цитата]
Разум_Возмущёный
Сообщений: 488
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 2:32
Изменено: 07 окт 18 2:38
На само деле критиковать и тявкать "изподлавки" легко. Бороцца-искать на порядок труднее. Как грица, Ломать - не строить. Выстоит Траян под огнем деструктивной критики - молодец. Расплачется и убежит - слабак. Вон Джордано Бруно надо было сначала сжечь чтобы потом наградить... посмертно.
[Ответ][Цитата]
гость
188.170.75.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 3:52

Т.> В момент создания нового знания достоверность оного имеет минимум определенности, т.е. вероятность его правильности равна 0.5.

тут есть нюанс. C одной стороны в байесовском процессе начальная (априорная) инициация в принципе не важна, неудачной нициацией можно только замедлить процесс, а с другой стороны - практически - неудачная инициация может и вовсе оборвать процесс - по типу что если опасное действие допускается априори весомым знанием (которое еще не успело достаточно откорректироваться), то байесовские корректировки данной системы могут и не продолжиться далее. Младенцы рождаются с некоторыми предустановками и смещениями - скажем, есть некоторое врожденное чувство глубины и будучи на краю младенец (в среднем) не стоит и не тестирует гипотезу упаду-не_упаду по принципу равных возможностей.

> Не думаю, что суть дела ухватят хотя бы два человека

вот не стоило этого говорить, не стоило.. то ли траяныч ляпнул не подумав, то ли зазвездился наш друг траяныч, забронзовел с чего-то, чаек ударил в голову..

> сразу несколько форм обучения.

это перспективно

> все такие сочетания следующие за S имеют нечто общее.

тут речь идет об известном из онтопсихолингвистики. Вообще тут про сами основы знаковой функции - конечно, это элемент 'настоящего' глубокого обучения ('сильного' обучения). Сама преднастройка умственной машинки младенца (интуиция языка на уровне базовых лексических функций) подразумевает что если образуется нейроансамбль соответсвующий звуковому комплексу (единству) х в паттерне Sx->x, то он изначально имеет широкие потенциальные возможности к асоциации с другими ансамблями, которые активируясь и отбираясь будут формировать содержание-значение данного звукового
имени. ПРедустановленная архитектура сопряжения акустических и образно-визуальных (напр.) карт. Образно-визуальные карты поначалу не особо дифференцированы и поддерживают дискриминацию 'глобальных' признаков. ТИпа как ребенок словом 'зац' будет обозначать и игрушку-зайца, и похожую мехом/текстурой живую собаку и мамину шубу. - Тут поправка к рассужудению траяна - имени x будет ставиться в соотвествие поначалу некий чувственный комплекс Z, которому будут соответсвовать некие внешние объекты zi. При корректировках, вхождении структуры x-Z-zi в разные контекты будет выделеться
более определенное соответсвие x-z*.

как говорят онтопсихолингвисты ребенок делает для себя открытие - вещи имеют имена. Можно сделать замечание о природе лексического взрыва - когда возникает ситуация что предметы {zi}\z* остались без имени - а объектные файлы, пакеты знаний про них уже открыты - и тем самым они будут требовать себе имени (как бы двунаправленная активность связывания и дифференцировки связей между картами имен и картами значений (напр. визуальных образов)), внутренний фактор акселерации и мотивации развития лексической функции.

(тут можно вспомнить про систему освоения языка CELL про которую писал потапов - опора акустического и визуального каналов друг на друга значительно облегчало обучение и делало 'осмысленным' оперирование именем в конкретной ситуации.)
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 6:24
Изменено: 07 окт 18 6:49
Цитата:
Автор: Разум_Возмущёный
Простой вопрос. Реально работающая компьютерная программа есть?

Есть.
Цитата:
Автор: Разум_ВозмущёныйДай потестить.

Не вижу пока в этом никакого смысла.

Цитата:
Автор: Разум_Возмущёный
Как раз проверим ее на комбинаторку. Посмотрим как она осилит задачку размером с шахматную доску.

Приблизительно так же, как программа AlphaGo/Zero (https://habr.com/post/343590/), о которой Вы, судя по Вашим камланиям с бубном возле комбинаторной стены, и слыхом не слыхали.

Так же как AlphaGo программа spAI (СПАЙ) справляется с комбинаторикой за счет нахождения во входных паттернах наиболее важных, определяющих элементов, которые учитываются в дальнейшем. И элементов вторичных, пустяковых - которыми можно пренебречь.
Отделение важного от второстепенного - ключ к успеху.

Так же как в AlphaGo в программе spAI процесс обучения базируется на парадигме RL.

Так же как в AlphaGo в программе spAI используется общая идея атомарных знаний (ценность которых корректируется по мере накопления опыта.

Серьезное отличие AlphaGo от программы spAI в том, что она реализуется на параллельно вычисляющих нейросетях. Я - по целому ряду причин - на этапе разработки и отлаживания программы пока предпочитаю последовательно вычисляющую платформу.

Хотя перевести spAI на нейросети вполне реально. Для эмуляции вычислений производимых spAI просто следует эмулировать атомарные знания отдельными нейронами нейросети, веса нейронов будут эмулировать величины вероятностей знаний, перевычисляться эти веса будут не по достаточно произвольным правилам НС, а по байесу.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 6:31
Изменено: 07 окт 18 6:51
Цитата:
Автор: гость
> Не думаю, что суть дела ухватят хотя бы два человека

вот не стоило этого говорить, не стоило.. то ли траяныч ляпнул не подумав, то ли зазвездился наш друг траяныч, забронзовел с чего-то, чаек ударил в голову..

Вы, Виктор - а кто еще? Луарвику эта тема неинтересна, NO уже нет...

Будем реалистами: средний интеллектуальный уровень форума на самом деле очень и очень низок.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 6:40
Изменено: 07 окт 18 6:41
rr3, я же несколько раз просил Вас не мусорить в данной теме.
свою точку зрения Вы высказали, и не раз, и даже не один десяток раз - может, хватит уже засорять топик бессодержательными/псевдо-многозначительными сообщениями?

Без обид, но в дальнейшем я просто буду удалять Ваши посты не читая.
[Ответ][Цитата]
Luarvik.
Сообщений: 17287
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 6:53
Цитата:
Автор: Разум_Возмущёный
Ну да, выпав с небоскреба.)))
Человек сам часть природы. Не понятно кого Лу хочет здесь набмануть, себя или окружающих?

У Вас, мягко говоря и грубо выражаясь, какое-то... э-э-э... примитивное понятие о свободе.
[Ответ][Цитата]
Разум_Возмущёный
Сообщений: 488
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 7:04
Изменено: 07 окт 18 7:41
Цитата:
Автор: Траян
Разум_Возмущёный потестить.
Не вижу пока в этом никакого смысла.

Слабак!

Классическая "Угадайка"

Дана некая рекурентная последовательность букв А и B (всего 1000 символов):

AABAABAABBABAABBABABBBBBAABBAAABBBBBAABAAABBBABBBBBBAAAABBBAAAAAAABBBBBBBBBBAAABBBAAABAABBBABBAABABA
BBBABBBBABABAAABBBBABAABABABAAAAABABBBBBBBBABABABABABBBBABAAAABBBABAABAAABBAABABBABABBAABBBBABABBAAA
BBAABBBBBBAABABABABAABBAABBAABABAABBBBBABAABBBAAAABAAABBABBAABAAABABAABBABBBBABBBABABABBBAABBAABBBAB
BBABBBAABBBABABAABBBABAAAAABBBBABBABBBAAAABBAAABAABABAABABBAABBABAAABAAABABBABAABABBBABAABBAAABABBAA
AAAABABAABAABABBBBBABBBBAAABBAAABBABBBABBAAAABBBBAABAABBBAABABBAAABAAAABBABBBBBBBAABBBAAABBABABAABAB
AAAABAAAABAABABBABBBBBABABBBAAABABBBAABAAAABBBBBABBABABABAAABABBBBABBAABBBAABBBBBAAAAABBBAABAABABABB
AABABBBBAABABBBAAAAABABABBABBAABBAAAABBABABBABBBABAAABABABBBBBBABAAABBBAABBABBBAABABAAABBABAAAAAABBA
ABAABAAABAAAAABAABBABBABAABBBBAABBABABABBAAAABABBBABBABAAABBAAAABAABBBBBBBABBBAAABBBBAAAAAABBBABBABB
AAABABAAABAABBAABAAAAABBABAABAABBBBABBBBBAAABABABABBABAAAABABAAAAAAABABBABBABBBBAABBBBAAABAAABBBBBBA
BBAAABBBABABBABABAAAABBAABBABBAAAAABBAAAAAAAABBABBABBABABBBABABBBBAAAABABABAABAAAABABBAABAABBAAAAABA


Изначально содержание последовательноси неизвестно.
Читаем букву за буквой слева-направо постепенно раскрывая содержание послания.

Задача: Прочухать систему и предсказать следующую букву перед её прочтением.

При случайном "угадывании" вероятность правильных ответов P = ~50%. При интеллектуальном - чем P > 50% тем больше IQ системы. Не делим последовательность на обучающую и тестовую. Статистика ответов считается с первого символа. Т.е. последовательность и обучающая и тестовая одновременно. Последовательность немного зашумлена (10% символов с ошибкой в системе). Все как в жизни.)))

[Ответ][Цитата]
гость
188.170.73.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 8:30
не требуется ли здесь специализированный криптологический интеллект для восстановлекия/реконструкции рекуррентного генератора последовательнрости? наличие высокой доли примеси ошибок генерации не слишком ли затрудняет задачу? (можно ли правильно восстановить рекуррентную функцию если много искажений? - какова связь между сложностью генератора, длиной последовательности, уровнем шума и сложностью (поисковой) аосстановления?) насколько вообще осмысленно полагать подобные задачи ('cлепые') задачами на общий интеллект? в какой связи они находятся с задачами индукции грамматики?

вопрос для РВ - какие методы решения подобных задач вы можете описать? можете ли указать источники, где более-менее систематически обсуждаются подобные вопросы?
[Ответ][Цитата]
гость
188.170.73.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 8:37
вообще вопрос - если последовательность рекуррентная (напр. псевдослучайная), до имеет ли она иное содержание кроме процедуры генерации?
[Ответ][Цитата]
гость
188.170.73.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 8:46
Т.> NO уже нет.

как-то вы не критичны к вбросам.. cкажем, 25ого сент. олег светился не только у когнитивистов, но и в группе в контакте московского центра исследования сознания. очень хочется надеяться что это было самолично.
[Ответ][Цитата]
Luarvik.
Сообщений: 17287
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 10:02
Изменено: 07 окт 18 10:03
Цитата:
Автор: Траян
На мой взгляд, разница между слабым и сильным ИИ как раз и заключается в разных стилях обучения. Тем, какой объем неявных знаний о скрытых закономерностях, тайных пружинах развертывающихся перед ним событий, завуалированных объектах играющих в этих событиях те или иные роли, агент оказывается способен извлечь из предлагаемых ему примеров и прямо декларируемых сведений - с одной стороны. И тем, насколько правильно он организует эти знания в новую модель мира - с другой.


"На мой взгляд, разница между слабым и сильным ИИ как раз и заключается в разных стилях обучения."(Траян)

- как сие обосновывается ?

(Вы верите, что ИИ можно обучением развить до СИИ, при том, что ИИ - вообще не интеллект, а из ничего, как известно, и получается ничего, сколько в него ни вбухивай.
Между ИИ и СИИ нет ничего(!) общего - во всестороннем и взвешенном понимании этого факта и скрыта самая большая проблема...
Ваша тема представляла бы некий определенный интерес, если б Вы хотя бы попытались предварительно ответить на вопрос о т.н. "минимальном интеллекте", но глаза боятся, а руки делают, "процесс идет", только вот... куда ?)
[Ответ][Цитата]
Разум_Возмущёный
Сообщений: 488
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 07 окт 18 10:04
Изменено: 07 окт 18 14:15
Цитата:
Автор: гость
не требуется ли здесь специализированный криптологический интеллект для ...

Угадайка - каноническая задача ИИ. Это, своего рода, Дизъюнктивная Нормальная Форма Интеллекта очищенная от шелухи. По моей личной классификации это Интеллектуальная Машина 1-го рода. Если тестируемый ИИ не решает Угадайку - это не ИИ.
[Ответ][Цитата]
Траян
Сообщений: 1063
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 08 окт 18 0:52
Изменено: 08 окт 18 0:55
Цитата:
Автор: Разум_Возмущёный
Слабак!
Классическая "Угадайка"

Как раз на задачах подобного типа я и отлаживал многие используемые в СПАЙ приемы индуктивного обучения.
Более того, здесь, на страницах этого топика я выкладывал отчет о экспериментах с применением биполярки при обучении/экстраполяции на реальных текстах ЕЯ - заведомо содержащих скрытые регулярности(не помню, как я эту игру тогда назвал, угадайка или нет: пороетесь - найдете).

Предлагаемый Вами тип задач действительно является крепким орешком для вероятностных приемов обучения, использующих понятия "испытания" и "исхода испытания", поскольку они содержат то, что называется тенденциями.
В эту стену я и сам упирался несколько лет.

Преодолеть данное затруднение удалось путем введения принципа относительности (не имеющего ничего общего со СТО Эйнштейна). Т.е. путем введения возможности взглянуть на картину глазами другого наблюдателя (движущегося, зачастую сразу по многим осям/пространствам).
Для такого наблюдателя общая картинка "замораживается", и он может себе позволить задействовать вероятности в полный рост.

Чуть подробнее обо всем этом - в "Одном подходе..."
[Ответ][Цитата]
гость
188.170.72.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 08 окт 18 1:12
РВ> Если тестируемый ИИ не решает Угадайку - это не ИИ.

не очень понятно. Простую, особенно регулярную последовательность 'расколоть' легко,
АВАВАВ.. последовательность типа ААВААВААВ.. уже труднее представить как рекуррентную, логическая функция текущего состояния от предшествующих уже нетривиальная, но дело очень облегчится если применить эвристику суперзнаков: ААВ=С и seq=CCC.. оказывается тривиально рекуррентной. Но оперирование эвристиками (напр. выявление шаблонов) не гарантирует решения. Cпрашивается, а вообще в общем случае задача имеет решение, алгоритмически разрешима, и при каких ограничениях разрешима и при каких нет. Если агент не выполняет требований к тому, чтобы задача была разрешима, то точно ли сказать что этот агент не Инт. особенно если этот агент ПОНИМАЕТ что для него эта задача не разрешима, способен как-то ослабить требования задачи - напр. будет искать локальные регулярности, исследовать условные статистики, выделять какие-то особенности в последовательности и прочая.

потом, последовательность АВААВАААВААААВАААААВ.. вроде не является рекуррентной, но ее можно расколоть - почему вы ограничиваетесь рекуррентными последовательностями?

и общий вопрос - система может не быть 'богом', решающим действительно трудные 'угадаечные' задачи, но достаточное ли это основание чтобы не полагать ее интеллектом (не божественным, но 'cильным' для решения того круга задач которые возникают в его жизненном мире)?
[Ответ][Цитата]
 Стр.81 (112)1  ...  77  78  79  80  [81]  82  83  84  85  ...  112<< < Пред. | След. > >>