一種基于端到端基于語音的對話代理

美國專利商標局（USPTO）授予Microsoft的一項新專利表明，該公司正在開發(fā)能夠反映用戶對話風格和/或面部表情的對話代理。專利- 語言風格匹配代理 -于2020年9月3日授予Microsoft，并以發(fā)明者Daniel J McDuff，Kael R. Rowan，Mary P Czerwinski，Deepali Aneja和Rens Hoegen稱號。

隨著語音識別和生成對話模型的發(fā)展，諸如聊天機器人和虛擬代理之類的對話界面正變得越來越流行。盡管這種自然語言的交互導致了人機交互的發(fā)展，但這種交流大多是單調的且受約束的。因此，這些對話最終只是事務性的，并不是很自然。

這項新的專利技術旨在帶來一種基于端到端基于語音的對話代理，該對話代理可以進行更自然，多輪回的對話，從而與用戶的對話風格和面部表情保持一致。

被實現(xiàn)為僅語音的代理或用臉部體現(xiàn)的會話代理可以與用戶的語音和面部表情匹配?？梢酝ㄟ^識別用戶語音的韻律特征并為具有相同或相似特征的虛擬代理合成語音來實現(xiàn)會話代理的語言樣式匹配。用戶的面部表情可以通過具體化的對話代理的臉部來識別和模仿。虛擬代理的發(fā)言可以基于預定的腳本響應和由機器學習技術生成的開放式響應的組合。與用戶的會話風格和面部表情保持一致的會話代理可能會被認為更值得信賴，更容易理解，

對話代理可以是純音頻的，也可以是體現(xiàn)的，這意味著它具有看起來像在說話的“臉”。在這兩種實現(xiàn)方式中，代理可以使用機器學習技術，并以自然且可理解的方式響應用戶的話語，從而整體上改善人機交互。