本發(fā)明涉及人工智能，尤其涉及一種流程圖的評(píng)審方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、目前，在專項(xiàng)規(guī)劃和設(shè)計(jì)方案材料中，對(duì)流程圖內(nèi)容的高精度解析和評(píng)審需求，都是通過人工進(jìn)行，從而導(dǎo)致流程圖的評(píng)審效率低。

技術(shù)實(shí)現(xiàn)思路

1、本發(fā)明提供一種流程圖的評(píng)審方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)，用以解決現(xiàn)有技術(shù)中流程圖的評(píng)審效率低的缺陷，實(shí)現(xiàn)提高流程圖的評(píng)審的準(zhǔn)確性和效率。

2、本發(fā)明提供一種流程圖的評(píng)審方法，包括如下步驟：

3、在接收到用戶上傳的待評(píng)審流程圖的情況下，將所述待評(píng)審流程圖的預(yù)置問題輸入至視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的流程圖信息；所述預(yù)置問題用于指導(dǎo)所述視覺語(yǔ)言模型對(duì)所述待評(píng)審流程圖進(jìn)行解析；

4、根據(jù)所述流程圖信息，確定所述待評(píng)審流程圖的評(píng)審提問；

5、將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果；

6、其中，所述視覺語(yǔ)言模型是對(duì)圖像數(shù)據(jù)和文本數(shù)據(jù)進(jìn)行聯(lián)合訓(xùn)練得到的。

7、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述流程圖信息包括文本信息、顏色信息、符號(hào)信息、箭頭信息、圖像結(jié)構(gòu)信息、圖像關(guān)系信息和視覺元素中的至少一項(xiàng)；所述顏色信息包括文本顏色信息、符號(hào)顏色信息和線條顏色信息。

8、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述圖像結(jié)構(gòu)信息包括流程節(jié)點(diǎn)的布局方式和層次結(jié)構(gòu)；所述圖像結(jié)構(gòu)信息是基于以下方式確定：

9、識(shí)別所述待評(píng)審流程圖中的流程節(jié)點(diǎn)；

10、根據(jù)所述流程節(jié)點(diǎn)的位置信息，確定所述流程節(jié)點(diǎn)的空間分布；

11、根據(jù)所述流程節(jié)點(diǎn)的空間分布，確定所述布局方式；

12、根據(jù)所述流程節(jié)點(diǎn)之間的之間的嵌套關(guān)系和分組關(guān)系，確定所述層次結(jié)構(gòu)。

13、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述圖像關(guān)系信息包括流程節(jié)點(diǎn)之間的依賴關(guān)系和順序關(guān)系；所述圖像關(guān)系信息是基于以下方式確定的：

14、識(shí)別所述待評(píng)審流程圖中的箭頭；

15、根據(jù)所述箭頭的方向和類型，確定所述待評(píng)審流程圖中流程節(jié)點(diǎn)之間的所述依賴關(guān)系和所述順序關(guān)系。

16、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述根據(jù)所述流程圖信息，確定所述待評(píng)審流程圖的評(píng)審提問，包括：

17、對(duì)所述流程圖信息進(jìn)行切片，得到所述待評(píng)審流程圖的文本條目；

18、將所述待評(píng)審流程圖的名稱與所述文本條目進(jìn)行拼接，得到所述待評(píng)審流程圖的評(píng)審提問。

19、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果，包括：

20、在所述評(píng)審提問為內(nèi)容評(píng)審提問的情況下，將所述內(nèi)容評(píng)審請(qǐng)求輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的內(nèi)容評(píng)審結(jié)果；

21、在所述評(píng)審提問為結(jié)構(gòu)評(píng)審提問的情況下，將所述結(jié)構(gòu)評(píng)審請(qǐng)求輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的結(jié)構(gòu)評(píng)審結(jié)果；

22、所述評(píng)審結(jié)果包括所述內(nèi)容評(píng)審結(jié)果和所述結(jié)構(gòu)評(píng)審結(jié)果。

23、根據(jù)本發(fā)明提供的一種流程圖的評(píng)審方法，所述將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果之后，還包括：

24、對(duì)所述內(nèi)容評(píng)審結(jié)果和所述結(jié)構(gòu)評(píng)審結(jié)果進(jìn)行內(nèi)容整合，生成所述待評(píng)審流程圖的綜合評(píng)審結(jié)果。

25、本發(fā)明還提供一種流程圖的評(píng)審裝置，包括如下模塊：

26、解析模塊，用于在接收到用戶上傳的待評(píng)審流程圖的情況下，將所述待評(píng)審流程圖的預(yù)置問題輸入至視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的流程圖信息；所述預(yù)置問題用于指導(dǎo)所述視覺語(yǔ)言模型對(duì)所述待評(píng)審流程圖進(jìn)行解析；

27、評(píng)審提問模塊，用于根據(jù)所述流程圖信息，確定所述待評(píng)審流程圖的評(píng)審提問；

28、評(píng)審模塊，用于將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果；其中，所述視覺語(yǔ)言模型是對(duì)圖像數(shù)據(jù)和文本數(shù)據(jù)進(jìn)行聯(lián)合訓(xùn)練得到的。

29、本發(fā)明還提供一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述程序時(shí)實(shí)現(xiàn)如上述任一種所述流程圖的評(píng)審方法。

30、本發(fā)明還提供一種非暫態(tài)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如上述任一種所述流程圖的評(píng)審方法。

31、本發(fā)明提供的流程圖的評(píng)審方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)，通過在接收到用戶上傳的待評(píng)審流程圖的情況下，將待評(píng)審流程圖的預(yù)置問題輸入至視覺語(yǔ)言模型，得到視覺語(yǔ)言模型輸出的待評(píng)審流程圖的流程圖信息；預(yù)置問題用于指導(dǎo)視覺語(yǔ)言模型對(duì)待評(píng)審流程圖進(jìn)行解析；根據(jù)流程圖信息，確定待評(píng)審流程圖的評(píng)審提問；將評(píng)審提問輸入至視覺語(yǔ)言模型，得到視覺語(yǔ)言模型輸出的待評(píng)審流程圖的評(píng)審結(jié)果；其中，視覺語(yǔ)言模型是對(duì)圖像數(shù)據(jù)和文本數(shù)據(jù)進(jìn)行聯(lián)合訓(xùn)練得到的。本發(fā)明通過自動(dòng)化和智能化地解析和評(píng)審流程圖，減少了對(duì)專業(yè)人員的依賴，從而減少了人力成本，同時(shí)，提高流程圖評(píng)審的準(zhǔn)確性和效率。

技術(shù)特征：

1.一種流程圖的評(píng)審方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的流程圖的評(píng)審方法，其特征在于，所述流程圖信息包括文本信息、顏色信息、符號(hào)信息、箭頭信息、圖像結(jié)構(gòu)信息、圖像關(guān)系信息和視覺元素中的至少一項(xiàng)；所述顏色信息包括文本顏色信息、符號(hào)顏色信息和線條顏色信息。

3.根據(jù)權(quán)利要求2所述的流程圖的評(píng)審方法，其特征在于，所述圖像結(jié)構(gòu)信息包括流程節(jié)點(diǎn)的布局方式和層次結(jié)構(gòu)；所述圖像結(jié)構(gòu)信息是基于以下方式確定：

4.根據(jù)權(quán)利要求2所述的流程圖的評(píng)審方法，其特征在于，所述圖像關(guān)系信息包括流程節(jié)點(diǎn)之間的依賴關(guān)系和順序關(guān)系；所述圖像關(guān)系信息是基于以下方式確定的：

5.根據(jù)權(quán)利要求1所述的流程圖的評(píng)審方法，其特征在于，所述根據(jù)所述流程圖信息，確定所述待評(píng)審流程圖的評(píng)審提問，包括：

6.根據(jù)權(quán)利要求1所述的流程圖的評(píng)審方法，其特征在于，所述將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果，包括：

7.根據(jù)權(quán)利要求6所述的流程圖的評(píng)審方法，其特征在于，所述將所述評(píng)審提問輸入至所述視覺語(yǔ)言模型，得到所述視覺語(yǔ)言模型輸出的所述待評(píng)審流程圖的評(píng)審結(jié)果之后，還包括：

8.一種流程圖的評(píng)審裝置，其特征在于，包括：

9.一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時(shí)實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述流程圖的評(píng)審方法。

10.一種非暫態(tài)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述流程圖的評(píng)審方法。

技術(shù)總結(jié)
本發(fā)明提供一種流程圖的評(píng)審方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)，涉及人工智能技術(shù)領(lǐng)域，該方法包括：在接收到用戶上傳的待評(píng)審流程圖的情況下，將待評(píng)審流程圖的預(yù)置問題輸入至視覺語(yǔ)言模型，得到視覺語(yǔ)言模型輸出的待評(píng)審流程圖的流程圖信息；預(yù)置問題用于指導(dǎo)視覺語(yǔ)言模型對(duì)待評(píng)審流程圖進(jìn)行解析；根據(jù)流程圖信息，確定待評(píng)審流程圖的評(píng)審提問；將評(píng)審提問輸入至視覺語(yǔ)言模型，得到視覺語(yǔ)言模型輸出的待評(píng)審流程圖的評(píng)審結(jié)果；其中，視覺語(yǔ)言模型是對(duì)圖像數(shù)據(jù)和文本數(shù)據(jù)進(jìn)行聯(lián)合訓(xùn)練得到的。本發(fā)明通過自動(dòng)化和智能化地解析和評(píng)審流程圖，減少了對(duì)專業(yè)人員的依賴，從而減少了人力成本，同時(shí)，提高流程圖評(píng)審的準(zhǔn)確性和效率。

技術(shù)研發(fā)人員：潘文碩,袁明明,王凱,王濤,梁秉豪
受保護(hù)的技術(shù)使用者：浪潮通信信息系統(tǒng)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/23