可以創作詩歌的語言生成系統

在過去的幾十年中，研究人員開發了越來越先進的人工智能(AI)工具和計算技術，可以在各種環境中應用。其中，可以產生書面或口頭語言的技術引起了極大的關注，特別是隨著新語音助手，機器人和新交互設備的引入。

科羅拉多大學(University of Colorado)-科羅拉多斯普林斯分校和德魯里大學的研究人員最近開發了一種獨特的語言生成系統，該系統可以產生富有創意的詩歌。他們的系統在arXiv上預先發表的一篇論文中介紹，是對GPT-2(由OpenAI開發的一種預先訓練的語言模型)的微調改編。

加州大學科羅拉多斯普林斯分校的教授Jugal Kalita負責最近的這項研究，從他在賓夕法尼亞大學畢業的那一天開始，過去30年來一直在進行自然語言生成的研究。他于1988年發表的有關自然語言生成的第一篇論文旨在遵循一組基本規則，制作可能出現在典型期刊中的文字段落。最近，在自然語言處理(NLP)的人工神經網絡技術進步的啟發下，卡利塔(Kalita)教授和他的學生開始開發深度學習技術，以生成簡短的文章，對話和富有創意的寫作。

“研究自動詩歌生成這一主題的想法是在2019年夏季初提出的，當時密蘇里州德魯里大學的科羅拉多大學科羅拉多斯普林斯分校的暑期實習生Brendan Bena對自動生成歌曲表現出興趣。歌詞。” Kalita教授告訴TechXplore。“他最初想研究一種系統，試圖模仿歌曲歌詞引起的情緒。”

由于大多數歌曲歌詞均受版權保護，因此尋找大型數據集來訓練歌詞生成深度學習模型可能非常具有挑戰性。因此，Bena和Kalita教授決定開發一種用于詩歌生成的深度學習工具。然而，他們沒有像大多數以前的詩歌研究那樣，專注于詩歌的結構或節奏等特征，而是探索了其更具情感和創造力的方面。