?

Log in

No account? Create an account

Компьютерная лингвистика

Новостная лента www.solarix.ru

Previous Entry Share Next Entry
Посимвольная генерация ответа в чатботе - иногда это похоже на детский лепет, реально
kelijah
Просматриваю результаты валидации для нейросетевой модели генерации ответа чатбота по заданной предпосылке (факту) и вопросу. Что бросилось в глаза - много ошибок в "детском стиле", когда примерно подобран ритмический рисунок или чередование гласных и согласных ответа, причем длина слов передана достаточно правильно. Дети обычно так и говорят, когда еще не вполне овладели языковыми средствами, но вырабатываемое миндалиной ожидание негативных последствий ошибки не выросло до блокирующего уровня.

Кстати, касательно чередования гласных и согласных не грех вспомнить, что марковские процессы возникли 100 с лишним лет назад именно как результат изучения статистики чередования букв в Евгении Онегине, о чем есть даже небольшой абзац в вики:

Сам Марков для иллюстрации своих результатов исследовал зависимость в чередовании гласных и согласных в первых главах «Евгения Онегина» и «Детских годов Багрова-внука»

Далее - избранные результаты валидации с ошибками генерации. Premise - это найденная релевантная предпосылка, question - заданный вопрос, model answer - требуемый эталонный ответ, pred. answer - сгенерированный сеткой ответ:

--------------------------------------------------
premise      =тайский кот приглашает даму в гости
question     =в гости кто приглашает даму
model answer =тайский кот
pred. answer =лайский кот  <-- ERROR!
--------------------------------------------------
premise      =женя удивленно смотрит на тимура
question     =на кого женя смотрит
model answer =на тимура
pred. answer =на тюмура  <-- ERROR!
--------------------------------------------------
premise      =талантливый поэт создает правила
question     =создает правила какой поэт
model answer =талантливый
pred. answer =тачантиивый  <-- ERROR!
--------------------------------------------------
premise      =лесник мельком посмотрел на сына
question     =на кого мельком лесник посмотрел
model answer =на сына
pred. answer =на мына  <-- ERROR!
--------------------------------------------------
premise      =лицо викниксора налилось кровью
question     =налилось кровью что
model answer =лицо викниксора
pred. answer =лицо викликсора  <-- ERROR!
--------------------------------------------------
premise      =маленькие британцы ищут новую семью
question     =что маленькие британцы ищут
model answer =новую семью
pred. answer =говую демью  <-- ERROR!
--------------------------------------------------
premise      =девчонки ждут заботливых родителей
question     =девчонки кого ждут
model answer =заботливых родителей
pred. answer =заботливых ходителяй  <-- ERROR!
--------------------------------------------------
premise      =талантливый поэт создает правила
question     =создает какой поэт правила
model answer =талантливый
pred. answer =тавантиивый  <-- ERROR!
--------------------------------------------------
premise      =горынычи быстро двигались
question     =двигался кто быстро
model answer =горынычи
pred. answer =борыньчи  <-- ERROR!
--------------------------------------------------
premise      =в среду с утра был легкий морозец
question     =какая погода была в среду утром
model answer =легкий морозец
pred. answer =варкай морглор  <-- ERROR!




  • 1
Да --- "уси и гудки". :)

  • 1