AI Benchmark評估智能手機的神經網絡性能

芯片制造商高通，華為和聯發科有什么共同之處?所有這三種市場硬件架構都可以加速計算機視覺，自然語言處理以及智能手機，平板電腦和其他移動設備中的其他機器學習任務。麻煩的是，這些是對經驗基準測試的挑戰，這可能使開發人員難以針對特定平臺優化算法。

蘇黎世聯邦理工學院的研究人員正試圖通過一款名為AI Benchmark的Android設備新應用程序來解決這個問題，他們希望這將成為一個普遍接受的測試套件。它今天在谷歌Play商店推出 ，適用于任何運行Android 4.1或更高版本的手機。

“由于沒有關于此的信息(目前，所有AI算法都在服務器上遠程運行，而不是在您的設備上運行，除了集成在手機固件中的一些內置應用程序)，我們決定開發我們自己的工具，將清楚地顯示每個設備的性能和功能，“AI研究員和開發人員Andrey Ignatov告訴TechCrunch。

AI Benchmark通過一系列開源算法評估智能手機的性能，這些算法可執行圖像分類，面部識別，圖像超分辨率以及照片增強，分割和去模糊。它甚至測試了無人駕駛汽車中使用的神經網絡的性能，研究人員預測這種神經網絡最終可能會在與智能手機相媲美的芯片上運行。

隨著應用程序按照自己的步調進行操作，它會生成算法輸出的可視化，并吐出一個分數，該分數會影響片上系統和可用RAM的速度。(一般來說，神經網絡越大，處理它所需的RAM就越多。)

以下是表現最佳者的部分列表及其相關分數。AI Benchmark網站上提供了完整列表：

華為P20 Pro - 6397

OnePlus 6 - 1875年

索尼Xperia XZ2 - 1664

三星Galaxy S9 + - 1494

Razer電話 - 1470

三星Galaxy S9 - 1446

OnePlus 5T - 1440

OnePlus 5 - 1416

三星Galaxy Note 8 - 1408

Xiaomi Mi Mix 2 - 1405

那么頂級智能手機如何比較呢?伊格納托夫將該團隊的初步調查結果概括為“既有趣又荒謬”。

他說，高通芯片加速了與所有Android版本不兼容的量化或壓縮神經網絡。不使用該公司專有的Snapdragon軟件開發的典型網絡無法利用其Hexagon DSP AI加速芯片，盡管Ignatov指出，如果實施“適當的驅動程序” ，這樣的網絡 可能會受益。

“[如果]你正在開發一款使用AI的應用程序，除非你只為他們的處理器開發它，否則你不會對Snapdragon的SoC進行任何加速，”Ignatov說。

另一方面，華為的麒麟神經處理單元(NPU)提供了出色的性能 - 神經網絡的加速度幾乎是10倍 - 但與量化神經網絡不兼容。華為表示將在今年晚些時候提供支持。(Ignatov指出，華為P20和P20 Pro是市場上唯一運行Android 8.1 Oreo的手機，可為應用程序提供AI加速。)

至于三星的Exynos陣容和聯發科技的NeuroPilot AI平臺，結果有點混亂。

三星的處理器僅支持從Android 8.1開始的人工智能加速，并且由于功耗優化和節流，性能變得“顯著” - 在某些情況下高達50%%。

與此同時，聯發科的芯片組 - 少數支持量化和普通神經網絡的芯片組 - 在三星和華為的硬件方面表現優異。

“總結：Snapdragon - 理論上可以提供良好的結果，但缺乏驅動力; 華為 - 現在非常出色，最有可能在最近的將來; 三星 - 現在沒有加速支持(很可能這會很快改變，因為他們現在正在開發他們自己的AI芯片)，但功能強大的CPU; Mediatek - 中檔設備的良好效果，但絕對沒有突破，“Ignatov告訴TechCrunch。