Клавдия Осенникова. Качественный диалог. Как мы тестируем Алису и умные устройства

Это уже не научная фантастика: голосовые технологии появляются в нашей жизни. Теперь не кажется чем-то необычным, придя домой, попросить умную колонку включить свет и приятную музыку, а занимаясь домашними делами — поболтать с ней о погоде или поиграть во что-нибудь. При этом хочется, чтобы общение с голосовым помощником было не только развлечением, но и помогало с повседневными задачами человека. Все эти требования к голосовому помощнику обязывают нас строго следить за качеством и тщательно тестировать новые функции: не забыть охватить все возможные варианты, учитывать особенности устройства, в котором живёт ассистент. Из доклада вы узнаете: — как мы тестируем голосовые сценарии Алисы на всех уровнях и генеративные модели; — как тестировать взаимодействия между сложной структурой бэкендов; — что такого неочевидного есть в тестировании умных девайсов; — какие инструменты мы используем при тестировании, как Алиса учится чему-то новому и как нам приходится каждый день учиться новому при её тестировании ;) Презентация: Codefest: