11月15日消息，京東云旗下言犀近日在國(guó)際上影響力最廣泛的任務(wù)型對(duì)話數(shù)據(jù)集MultiWOZ上以103.4的分?jǐn)?shù)斬獲端到端任務(wù)型對(duì)話生成排行榜第一。

MultiWOZ數(shù)據(jù)集端到端任務(wù)型對(duì)話回復(fù)生成榜單（榜單自下而上），圖源：京東科技黑板報(bào)，下同

據(jù)悉，MultiWOZ數(shù)據(jù)集是國(guó)際上影響力最廣泛的任務(wù)型對(duì)話數(shù)據(jù)集，由劍橋大學(xué)提出，聚焦大規(guī)模多領(lǐng)域多輪次的任務(wù)型對(duì)話。MultiWOZ數(shù)據(jù)集中70%的對(duì)話是包括2-5個(gè)領(lǐng)域的多領(lǐng)域?qū)υ挘亲匀徽Z(yǔ)言處理領(lǐng)域最經(jīng)典，挑戰(zhàn)性最高的數(shù)據(jù)集之一。言犀本次參與的是端到端任務(wù)型對(duì)話生成任務(wù)。

由于其具有挑戰(zhàn)性的設(shè)置，MultiWOZ任務(wù)型對(duì)話數(shù)據(jù)集一經(jīng)發(fā)布吸引了全球眾多高校和科研機(jī)構(gòu)的參與，包括來(lái)自清華大學(xué)，香港科技大學(xué)，微軟研究院，亞馬遜，DeepMind以及Salesforce等多個(gè)研究小組。

本次言犀團(tuán)隊(duì)提出的Mars模型，創(chuàng)新性地利用語(yǔ)義感知的對(duì)比學(xué)習(xí)方法來(lái)增強(qiáng)對(duì)話上下文表征與對(duì)話狀態(tài)和對(duì)話策略之間的關(guān)系建模，從而使對(duì)話系統(tǒng)更好地完成任務(wù)。除了總評(píng)分，Mars模型在三個(gè)分項(xiàng)評(píng)價(jià)指標(biāo)Inform, Success和BLEU也分別以89.9、78.0、19.9排名第一。

作為業(yè)內(nèi)首個(gè)大規(guī)模商用的智能客服系統(tǒng)，言犀支撐了京東客戶服務(wù)全鏈條和全生命周期，日均生成1000萬(wàn)對(duì)話，服務(wù)京東5.8億用戶和17.8萬(wàn)商家。

在文本生成領(lǐng)域，言犀目前可以實(shí)現(xiàn)短文、長(zhǎng)文的生成，依靠領(lǐng)域性大模型K-PLUG，可以實(shí)現(xiàn)短文本和長(zhǎng)文本的自動(dòng)生成。目前言犀商品文案生成模型已經(jīng)覆蓋了京東的3000多個(gè)三級(jí)品類，累計(jì)生成文案30億字，應(yīng)用于京東發(fā)現(xiàn)好貨頻道、搭配購(gòu)、AI直播帶貨等，累計(jì)帶來(lái)超過(guò)3億元GMV。

在語(yǔ)音生成領(lǐng)域，言犀使用基于端到端網(wǎng)絡(luò)結(jié)構(gòu)的聲學(xué)模型，對(duì)于音調(diào)，音量，時(shí)長(zhǎng)等信息進(jìn)行了顯式建模，同時(shí)使用了基于對(duì)抗神經(jīng)網(wǎng)絡(luò)的神經(jīng)網(wǎng)絡(luò)聲碼器，可以合成非常自然的并且高質(zhì)量的語(yǔ)音，只需要30分鐘訓(xùn)練數(shù)據(jù)可以生成定制化精品音色，同時(shí)只需要10句話就可以實(shí)現(xiàn)高質(zhì)量的小樣本音色克隆。目前言犀語(yǔ)音合成API日均調(diào)用量超過(guò)20億次，支持中文、英文、泰語(yǔ)，廣東話、成都話等各類方言、音色。

在數(shù)字人生成領(lǐng)域，言犀面部動(dòng)作方面通過(guò)自研的3DNeuralRender神經(jīng)渲染器，可以高保真地合成主播面部細(xì)節(jié)。動(dòng)作上，言犀研發(fā)的動(dòng)作合成方案，基于RIFE插幀多插入點(diǎn)的快速動(dòng)作過(guò)渡，可以讓數(shù)字人的動(dòng)作更加流暢自然；互動(dòng)中，2D及超寫(xiě)實(shí)、高精度3D數(shù)字員工驅(qū)動(dòng)方案，可以實(shí)現(xiàn)音唇精準(zhǔn)同步。言犀目前擁有100+數(shù)字人形象，廣泛的應(yīng)用于政務(wù)、金融、零售直播等領(lǐng)域。

在數(shù)字孿生領(lǐng)域，京東云利用數(shù)字孿生技術(shù)對(duì)產(chǎn)線和制造工藝進(jìn)行仿真優(yōu)化，縮減現(xiàn)實(shí)世界中的調(diào)優(yōu)試錯(cuò)環(huán)節(jié)，進(jìn)而降低產(chǎn)業(yè)成本，提升產(chǎn)業(yè)效率。