欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

多模態(tài)實(shí)體識別模型訓(xùn)練方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)與流程

文檔序號:40594922發(fā)布日期:2025-01-07 20:35閱讀:來源:國知局

技術(shù)特征:

1.一種多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,包括以下步驟:

2.如權(quán)利要求1所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,通過文本實(shí)體向量、語音實(shí)體向量以及對比學(xué)習(xí)方法訓(xùn)練初始模型,得到目標(biāo)多模態(tài)實(shí)體識別模型,包括:

3.如權(quán)利要求2所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,在計(jì)算所述文本實(shí)體向量與語音實(shí)體向量中屬于相同實(shí)體標(biāo)簽的兩個(gè)token之間的差異程度之前,還包括:

4.如權(quán)利要求2中所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,通過反向傳播算法優(yōu)化初始模型的參數(shù),包括:

5.如權(quán)利要求2所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,在得到目標(biāo)多模態(tài)實(shí)體識別模型之后,還包括:

6.如權(quán)利要求1所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,通過多層transformer編碼器對所述語音特征進(jìn)行編碼,得到語音特征向量,包括:

7.如權(quán)利要求1所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法,其特征在于,將所述文本數(shù)據(jù)經(jīng)過詞嵌入與位置嵌入處理得到文本嵌入特征,包括:

8.一種多模態(tài)實(shí)體識別模型訓(xùn)練裝置,其特征在于,所述多模態(tài)實(shí)體識別模型訓(xùn)練裝置包括:

9.一種多模態(tài)實(shí)體識別模型訓(xùn)練設(shè)備,其特征在于,所述多模態(tài)實(shí)體識別模型訓(xùn)練設(shè)備包括存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器上并可以在所述處理器上運(yùn)行的多模態(tài)實(shí)體識別模型訓(xùn)練程序,所述多模態(tài)實(shí)體識別模型訓(xùn)練程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一項(xiàng)所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法的步驟。

10.一種計(jì)算機(jī)存儲(chǔ)介質(zhì),其特征在于,所述存儲(chǔ)介質(zhì)上存儲(chǔ)有多模態(tài)實(shí)體識別模型訓(xùn)練程序,所述多模態(tài)實(shí)體識別模型訓(xùn)練程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一項(xiàng)所述的多模態(tài)實(shí)體識別模型訓(xùn)練方法的步驟。


技術(shù)總結(jié)
本發(fā)明涉及人工智能領(lǐng)域,公開了一種多模態(tài)實(shí)體識別模型訓(xùn)練方法,通過獲取語音數(shù)據(jù)與文本數(shù)據(jù),分別對語音數(shù)據(jù)和文本數(shù)據(jù)進(jìn)行特征處理。語音數(shù)據(jù)經(jīng)過分幀處理及傅里葉變換得到語音特征,并通過編碼器進(jìn)行編碼,生成語音特征向量;文本數(shù)據(jù)則通過詞嵌入與位置嵌入生成文本嵌入特征,隨后通過解碼器處理生成文本特征向量。語音特征向量經(jīng)過CTC層處理生成語音實(shí)體向量,文本特征向量經(jīng)過CRF層處理生成文本實(shí)體向量。通過對文本實(shí)體向量、語音實(shí)體向量以及對比學(xué)習(xí)方法進(jìn)行訓(xùn)練,優(yōu)化初始模型,獲得目標(biāo)多模態(tài)實(shí)體識別模型。本發(fā)明通過將語音數(shù)據(jù)和文本數(shù)據(jù)同時(shí)處理,多模態(tài)實(shí)體識別模型能夠捕捉不同模態(tài)之間的互補(bǔ)信息,提升模型對實(shí)體的識別能力。

技術(shù)研發(fā)人員:于鳳英,王健宗,程寧
受保護(hù)的技術(shù)使用者:平安科技(深圳)有限公司
技術(shù)研發(fā)日:
技術(shù)公布日:2025/1/6
當(dāng)前第2頁1 2 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會(huì)獲得點(diǎn)贊!
1
昌图县| 盱眙县| 铜鼓县| 保山市| 台山市| 庆城县| 平乡县| 鄂托克前旗| 科尔| 聂荣县| 门源| 昭觉县| 福清市| 宣化县| 平凉市| 辽宁省| 股票| 千阳县| 石家庄市| 萨迦县| 紫阳县| 绵阳市| 巴中市| 沙坪坝区| 新源县| 永城市| 无棣县| 凌源市| 天门市| 曲水县| 德阳市| 康平县| 郧西县| 静宁县| 繁昌县| 溆浦县| 诏安县| 昭苏县| 安泽县| 晋宁县| 白城市|