Facebook現在描述自動生成的照片描述中的操作

在Facebook今天在紐約舉辦的機器學習@Scale會議上，Facebook宣布它正在增強機器生成的照片描述，這些描述可以在屏幕閱讀器中找到，例如適用于iOS的VoiceOver。

現在，您可以使用瀏覽器的網絡上的檢查元素功能在沒有屏幕閱讀器的情況下查看說明，并將考慮所捕獲的操作。例如，如果看到一組人在照片中敲擊，則標題可能指定人們正在演奏樂器，而不是簡單地提及人和鼓。具體來說，有12個新動作可以包含在照片的自動替代文本中，Facebook應用機器學習總監JoaquinQuiñoneroCandela在博客文章中寫道。

這聽起來可能不是一個很大的變化。但對于那些依賴屏幕閱讀器來收集有關正在發生的事情的人 - 例如盲人 - 這些變化可能有助于他們更好地了解他們的Facebook好友在新聞Feed中分享的內容。畢竟，人們在他們發布的照片??旁邊包含的文字并不總能完美地說明正在發生的事情。

Facebook于去年4月首次推出了自動替代文字。這是Facebook利用人工智能的幾種方式之一。Apple，Google，Twitter和其他公??司也試圖在他們的服務中使用AI。微軟甚至致力于在Word和PowerPoint中使用AI自動制作圖像標題。

但除此之外，Facebook還想出了一種新方法來查找符合最終用戶搜索條件的照片。

“換句話說，在搜索'黑色襯衫照片'時，系統可以”看到“照片中是否有黑色襯衫，并根據該襯衫進行搜索，即使照片沒有標記該信息。使用Facebook的自動圖像分類器，就像AAT示例中使用的分類器一樣，您可以想象有人可以搜索他或她的朋友共享的所有照片，以根據圖像內容查找特定的照片，而不是依賴在標簽或周圍的文字上，“QuiñoneroCandela寫道。

該功能尚未生效，但一旦實現，它將為您提供更好的方式，讓您在Facebook的大量數據圖上找到您想要的內容。隨著2013年推出的圖搜索工作，Facebook試圖讓人們使用自然語言來找到合適的人; 通過視覺搜索，它完全是關于圖像。從那里，人們可以預見Facebook稍后會出現相關視頻。