基于多模態(tài)融合模型的平板顯示視覺舒適度預(yù)測方法、系統(tǒng)
本發(fā)明涉及顯示技術(shù)與人機(jī)交互交叉領(lǐng)域,提供基于多模態(tài)融合模型的平板顯示視覺舒適度預(yù)測方法、系統(tǒng),其中方法包括:步驟一、采集原始圖像集,針對每一原始圖像,運(yùn)用生成對抗網(wǎng)絡(luò)模型將輸入的隨機(jī)序列轉(zhuǎn)換為增強(qiáng)素材,再將增強(qiáng)素材和原始圖像按預(yù)設(shè)比例融合,獲得若干新圖像;步驟二、采集生理特征和物理特征,獲得訓(xùn)練樣本;步驟三、基于堆疊集成框架訓(xùn)練多模態(tài)融合模型;步驟四、輸入測試數(shù)據(jù),獲得視覺舒適度預(yù)測結(jié)果。本發(fā)明旨在解決平板顯示視覺舒適度預(yù)測領(lǐng)域高質(zhì)量標(biāo)注樣本稀缺、單一模態(tài)分析耦合關(guān)系缺失、場景適配性差的問題。
南京工業(yè)大學(xué)
2021-01-12