受量子啟發的視頻情感分析框架

自動識別以視頻或文字表達的整體情緒可能對廣泛的應用很有用。例如，它可以幫助公司或政黨篩選大量在線內容，并了解公眾對他們的產品，服務，活動或計劃的看法。

帕多瓦大學，開放大學和哥本哈根大學的研究人員最近推出了一種基于量子物理學理論的視頻情感分析新框架。這個框架在Elsevier的Information Fusion雜志上發表的一篇論文中提出，融合了不同類型的視頻功能并分析了它們之間的復雜交互。

該研究人員小組進行的研究是QUARTZ(量子信息訪問和檢索理論)項目的一部分，該項目是由歐盟的MarieSk?odowskaCurie Actions計劃資助的一項更廣泛的研究工作。QUARTZ項目的主要目的是探索量子力學在設計有效信息檢索系統(例如Web搜索引擎)中的潛在用途。

“作為QUARTZ項目的一部分，我們一直在解決許多問題，從純粹的理論問題到實驗研究，”進行這項研究的研究人員之一Qiuchi Li告訴TechXplore。“我們最近的研究扎根于這兩個領域，因為它考慮了代表多模式信息的基本問題，并通過科學實驗檢驗了所提出方法的有效性。”

在過去的十年左右的時間里，發現量子理論框架在解釋人類認知的某些方面比經典的概率論理論具有許多優勢。盡管具有這些優點，但到目前為止，研究人員僅開發了一些有效的量子啟發模型，這些模型可以在認知任務上實現人類的表現。

Li和他的同事在研究中著手開發一種量子啟發模型，該模型在情感分析任務上表現良好，通常由人類完成。他們的總體目標是確定這樣一個框架是否可以實現人類可比的性能。

“我們以前為基于文本的情感分析建立了模型，但是本文著重于多峰環境中的情感分析，并提出了一種量子驅動方法來解決多峰融合的關鍵任務，”李解釋說。“就像其他多模態情感分析系統一樣，提出的模型接受話語的多模態特征，并預測其情感作為輸出。”

李和他的同事開發的框架基于許多功能來分析視頻，包括文本，視覺和聽覺元素。與依靠人工神經網絡(ANN)的傳統最新模型相反，新框架從與量子物理學理論相一致的角度分析視頻內容。