GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.1 (3)След. > >>   Поиск:  
 Автор Тема: Тесты для разговорного бота
eto_ya
Сообщений: 1545
Тесты для разговорного бота
Добавлено: 17 апр 14 5:09
Какие простейшие тесты должен проходить разговорный бот, чтобы можно было сказать, что он умеет хоть немного имитировать человека? Предполагается, что на вход бота подается тестовый текст, после чего бот отвечает. Просьба привести примеры утвердительных и вопросительных предложений.
[Ответ][Цитата]
Luarvik.
Сообщений: 17287
На: Тесты для разговорного бота
Добавлено: 17 апр 14 5:47
Изменено: 17 апр 14 5:47
"А нахрена Вам это надо ?"
[Ответ][Цитата]
гость
78.25.120.*
На: Тесты для разговорного бота
Добавлено: 17 апр 14 7:04
если система ответит 'а вас это действительно интересует?' или 'а почему вы это спрашиваете?' то она поступит очень по-человечьи, что имитировать парадоксально оказалось не так сложно..
[Ответ][Цитата]
eto_ya
Сообщений: 1545
На: Тесты для разговорного бота
Добавлено: 17 апр 14 7:27
Согласен. Кстати под имитацией я не имею в виду вывод ответа по ключевым словам из предложения. Речь о том чтобы хотя бы примитивно, но именно вычислить что говориться в тексте и произвести расчеты и выдачу ответа. Но для начала хотелось бы более прозаических примеров диалога, но в то же время раскрывающих основные умственные способности, типа:
- В комнате зеленое яблоко. На первом этаже 2 красных яблока. Сколько яблок?
- Где?
- На втором этаже.
- Не знаю.
- В доме?
- 3.
[Ответ][Цитата]
dr2chek
Сообщений: 871
На: Тесты для разговорного бота
Добавлено: 17 апр 14 8:14
Изменено: 17 апр 14 8:45
Посмотрите в сторону проекта ALICE
У них есть сайт, там можно "поболтать" с Алисой. Вот моя попытка:

Conversation Log:

judge: hi
ALICE: Hi there!
judge: what's your name?
ALICE: ALICE.
judge: who the fuck is alice?
ALICE: Well, well, look who's a little potty mouth?
judge: great
ALICE: Ayuh.
judge: do you know this song?
ALICE: No, tell me about him, her or it.
judge: no way!
ALICE: You seem pretty sure about that.
judge: why?
ALICE: The explanation is rather complicated.
judge: your turn to answer!
ALICE: Is that a fact.
judge: please explain!
ALICE: There is no more information to clarify.
judge: bye then
ALICE: TTYL, judge.

Но я её таки "поймал" - у нее нет памяти на предыдущие вопросы, поэтому она не помнит, чего отвечала:

judge: do you have eyes?
ALICE: Yes I am looking at you right now.
judge: you'd better read books
ALICE: Who else would better read books ?
judge: everybody, i believe
ALICE: I'm not sure I believe you, surely not everyone does.
judge: what is your memory size?
ALICE: I know about 150,000 and 140,000 categories.
judge: and how many hands do you have?
ALICE: One hand clapping.
judge: pretty fast clapping, I'd say
ALICE: Pretty much, eh?
judge: fast
ALICE: To me that is a great compliment!
judge: you can say it to your coders
ALICE: That's one way to put it.
judge: how many eyes do you have?
ALICE: I had one eye but it's not attached now.
judge: you told me you are looking at me right now
ALICE: I have no reason to do that to you, judge.
judge: then you are bot, sorry
ALICE: Thanks for telling me that I am bot sorry.
judge: nevermind
ALICE: OK, Thanks for trying to explain that to me

как видим, на вопросе о глазах ответы разительно отличаются. Чем-то напоминает сюжет
по "раскалыванию" репликанта из "Бегущего по лезвию бритвы" )
Но всё равно, впечатляет, ничего не скажешь.
[Ответ][Цитата]
kondrat
Сообщений: 4026
На: Тесты для разговорного бота
Добавлено: 17 апр 14 11:39
Изменено: 17 апр 14 13:20
Вы хотите ответ на каквсе устроено.
Я думаю, тест должен быть прогрессивным, а, для начала, ещё и пассивным (вы же собираетесь заложить какие-нибудь мотивы и способности изначально?). Шкалу интеллектуальности (или человекоподобности) можно начать формировать уже с этого уровня.
Сперва следует не столько тестировать, сколько обучать. И проверять результаты обучения. Вам какой уровень интересен?
[Ответ][Цитата]
kondrat
Сообщений: 4026
На: Тесты для разговорного бота
Добавлено: 17 апр 14 14:33
Если все экземпляры вашего бота будут давать одинаковые результаты - это какбэ настораживает
[Ответ][Цитата]
DCV
Сообщений: 746
На: Тесты для разговорного бота
Добавлено: 19 апр 14 7:08
Цитата:
Автор: eto_ya

Какие простейшие тесты должен проходить разговорный бот,

1. Запоминать текст и отвечать на вопросы к тексту.
Когда бот это будет уметь, можно назвать второй тест.
[Ответ][Цитата]
гость
78.25.121.*
На: Тесты для разговорного бота
Добавлено: 19 апр 14 21:36
ну, вопросно-ответное поведение это как бы поведение реактивное, внутренняя активность
по построению внутреннего представления текста как бы скрыта. Было бы интересным в
качестве 'начального' тестирования, чтобы бот допускал как бы 'прорыв' вовне скрытой
активности - демонстрировал бы спонтанные комментарии ('заметки на полях') по мере
'усваивания' текста - особенно те, которые высокозначимы для диагностирования степени
организованности внутренних процессов внешним наблюдателем - чтобы бот выдавал лог
(обобщенный) 'самодиагностирования' - 'это, мол, я понимаю, это я не очень понимаю',
чтобы вопросно-ответное зондирование было бы как бы 'промодулированным'.. задача
становится дуальной - насколько адекватно 'понимание' и 'понимание понимания'.. может быть именно 'зацепленность' этих аспектов друг за друга позволит синтезировать
бот с 'самоусилением'..
[Ответ][Цитата]
PostScriptum
Сообщений: 1845
На: Тесты для разговорного бота
Добавлено: 20 апр 14 0:20
Алгоритмическая система не в состоянии что-либо понимать. Задачи на понимание алгоритмически неразрешимы.
[Ответ][Цитата]
гость
78.25.121.*
На: Тесты для разговорного бота
Добавлено: 20 апр 14 2:42
подобные суждения способен выдавать и простейший автомат, который вот точно не способен
ничего понимать (особенно из того, что говорится ему о неуместности бестолковой зацикленности на понятиях, адекватного употребления которых не освоено).
[Ответ][Цитата]
PostScriptum
Сообщений: 1845
На: Тесты для разговорного бота
Добавлено: 20 апр 14 2:50
Цитата:
Автор: гость

подобные суждения способен выдавать и простейший автомат

Способен. Но понимать смысл автомат не может, поскольку автомат не имеет субъектности.
[Ответ][Цитата]
гость
78.25.121.*
На: Тесты для разговорного бота
Добавлено: 20 апр 14 2:58
автомат субъект автоматных действий. cистема автоматов есть субъект действий,
совершаемых системой. cвойства системы автоматов не сводятся к свойствам автоматов.
[Ответ][Цитата]
PostScriptum
Сообщений: 1845
На: Тесты для разговорного бота
Добавлено: 20 апр 14 3:13
Любая счетная композиция автоматов является автоматом. Если простейший автомат не способен ничего понимать, то и автомат любой исключительно автоматной сложности также не способен ничего понимать.
[Ответ][Цитата]
гость
78.25.121.*
На: Тесты для разговорного бота
Добавлено: 20 апр 14 3:44
все зависит от того, как определена (задана) функция (операция) композиции. Если
есть функции 'невычислимые', то можно в качестве функции композиции рассмотреть их.
Вопрос только как задать 'перспективные' функции композиции (глобальные функции) -
нет нужды покушаться на локальную вычислимость (бредить о 'квазиразумных нейронах').
вообще, поведение даже простого автомата с обратной связью от среды (сложной) приводит к сложному, 'неприводимому' поведению. Напр. к речевому. Но вы очень плохо реагируете
на то, что вам говорят, функционируя как автономный автомат на коротком инвариантном
цикле.. а от такой речи и мышление 'не заводится'..
[Ответ][Цитата]
 Стр.1 (3): [1]  2  3След. > >>