武漢肺炎（COVID-19、新冠肺炎）疫情讓臉部解鎖功效低下高尚的頭，當口罩成為出門必備品，解鎖手機時總要閱歷“臉部辨識掉敗→輸出暗碼”的費事進程，忍不住讓人紀念起指紋辨識。
為了優化臉部解鎖體驗，本年稍早創業者 Danielle Baskin 推出帶臉部資訊的口罩，透過擷取用戶臉部資訊，然后印在口罩外側，用戶就算戴口罩也可拼成完備的臉。
▲ 但有點驚悚。（Source：Danielle Baskin）
不外產物解鎖勝利率不明白，且沒有大批樣本證實有效。那要怎樣讓臉部辨識不再被口罩攪擾？
一些網友逐漸發明，跟著戴口罩時候愈來愈久，手機好像由一次次解鎖掉敗找到“經歷”，漸漸能辨識勝利戴著口罩的主人。
靠這思緒，一些科技網紅也分享更有用的教程，如戴口罩反復解鎖，臉部辨識不勝利就馬上輸出暗碼，輪迴這舉措 30 分鐘擺佈，手機便能辨識戴口罩的本身了。
▲ 戴口罩勝利臉部解鎖。（Source：Farhad Usmanoff）
不外網友透露表現，分歧機型的“進修”速率紛歧，有人重復 20 分鐘便勝利，但有人重復上千次，手機仍沒法辨識戴口罩的人。
為什麼會湧現這類環境？謎底和手機 AI 進修本領有關。
深度iphone google 搜尋 紀錄進修利器──NPU
假如有存眷近兩年的手機揭櫫會，肯定會發明手機廠商引見 SoC 芯片時，都邑重點提到 NPU 進級。
NPU 就是神經收集處置器。手機芯片一樣平常分為幾個功效區，揭櫫會常提到的有 3 個：一是善於處置繁停工作和發號指令的 CPU，二是善於圖形處置的 GPU，再來就是善於處置人工智能義務的 NPU。
固然 NPU“占地”沒有 CPU 和 GPU 年夜，但本領卻不容疏忽，手機的伶俐水平就靠它了。
練習手機辨識戴口罩的人，便重要回功于 NPU 的本領。鏡頭捕獲到臉部后，CPU 和 GPU 會在極短時候前端處置圖片，然后 NPU、GPU 偵測擷取特征，最后 CPU、GPU 和 NPU 配合完成臉部辨識分類。539多少
得益于日趨強盛的運算力，全部進程能到“無感”水平。我們拿起手機的剎時，上述流程便處置終了。
NPU 的參加，讓手機熟悉分歧狀況的你。早上剛起床時，即使浮腫，手機也曉得這就是你，乃至被馬蜂蟄了、嘴巴腫成“噴鼻腸”，手機依舊能辨識你。
以是經由定量練習后，手機便可“無懼口罩”認出你了。
假如只靠算法，CPU 和 GPU 也能合營進修，但錯誤謬誤是服從低且功耗年夜。據《汽車電子與軟件》引見，CPU 和 GPU 需應用數千條指令完成神經元處置，NPU 只需一條或幾條就能完成。
▲ NPU 進修服從頗高。（Source：Android Authority）
別的平等功耗下，NPU 效能是 GPU 的 18 倍，可看出 NPU 深度進修的處置服從方面有顯著上風。
說到這不得不提 NPU 的任務道理。NPU 的進修服從高，不是由於喝了“紅牛”，而是在電路層摹擬人類神經元和突觸，應用深度進修指令集，直接處置年夜範圍的神經元和突觸。透過凸起權重殺青貯存和盤算一體化，NPU 一條指令就能勝任以往 CPU 和 GPU 的上千條指令。
打個不精確的比方，就像電商的倉儲、物流一體化，進步送貨服從，當天買當天就能拿到商品。
NPU 并不雞肋
中國最早研討 NPU 的企業當屬冷武紀。2017 年揭櫫的麒麟 970 芯片，就采用冷武紀 NPU 架構，麒麟 970 也為天下首款舉措端 AI 芯片。
華為透露表現整合 NPU 單位的麒麟 970，相較 4 個 Cortex-A73 焦點處置一樣的 AI 義務時，擁有約 50 倍能效和 25 倍效能上風。例如記憶辨識速率可達約每分鐘 2 千張，遠高于業界水準。
11 天后，iPhone 8 / 8 Plus、iPhone X 帶著 A11 仿生芯片問世，蘋果透露表現這是有史以來最強盛、最伶俐的芯片。
A11 Bionic 是蘋果首款以“仿生”定名的處置器，也是蘋果第一款增援 AI 加快的處置器。好比臉部辨識，神經收集引擎讓 A11 增援速率高達每秒 6 千億次運算辨識。
也是從這年開端，愈來愈多廠商器重手機 AI 本領宣揚。如華為主打的 AI 拍照、超等夜景、隔白手勢等功效；iPhone 引覺得傲的 Face ID、人像景深、Deep Fusion（深度融會）等功效，都依靠 NPU 的本領。
▲ 華為 AI 手勢操控。
2019 年 6 月開端，麒麟 810 揭櫫，華為開端應用自研達芬奇架構的手機 AI 芯片。達芬奇架構的奇妙的地方在于各單位分工清楚，可有更高效的 AI 盤算。
據《電子產物天下》引見，達芬奇架構焦點的 3D Cube、Vector 向量盤算單位、Scalar 純量盤算單位等，都539影片分析各自信責分歧運算并列化盤算模子，配合包管 AI 盤算高效處置，殺青高算力、高能效、靈巧可裁剪的特徴。
剛停止的 Mate 40 系列揭櫫會，華為誇大麒麟 90刑法26800 芯片 NPU 進級達到芬奇架構 2.0 版本，算力翻倍。AI 盤算本領更強同時，效能提拔 15%，收集實行效能也提拔 20%。
蘇黎世聯邦理工學院的 AI Benchmark 榜單，麒麟 9000 摘得 Android 陣營桂冠，分數是高通驍龍 865+ 兩倍多。
▲ AI Benchmark 榜單。
至于麒麟 9000 也退化到每秒 2 千張的速率。揭櫫會重點展現的 AI 隔白手勢、AI 靈動熄屏幕、AI 字幕等，也都是 NPU 本領的閃現。尤其“智感付出”功效，當手機感測到掃碼盒時，便會主動湧現付款碼頁面，趁熱打鐵完成付出。
▲ 華為智感付出。（Source：VDGER）
第四代 iPad Air 揭櫫時，蘋果也誇大 NPU 本領精進。比擬 A12 仿生處置器，A14 仿生新一代神經收集引擎讓機械進修效能快達兩倍。
超高的機械進修速率，讓 A14 仿生芯片殺青超等畫素功效，搭配 pixelmator 應用，縮小裁切后照片，畫素會主動補充，讓照片更清楚。
反應到 iPhone 12 系列，盤算拍照本領也絕後改良。舉個例子，耽誤拍照時，手機遇主動盤算被攝物體，假如是拍車流，手機遇主動下降快門速率，讓車燈出現拖影感，畫面活動感更強。
新一代 iPhone 在 Deep Fusion、HDR 影片等方面，與 iPhone 11 比擬都有肉眼可見的變更，都得益于 A14 強盛的 AI 盤算本領。
我們可等待 NPU 什麼？
固然舉措端 NPU 近兩三年才開端年夜力宣揚，但相干概念在 2013 年就已湧現。
其時高通盼望透過仿照人腦的盤算架構，減少平凡機械運算與人腦的差距，這類透過摹擬神經元的運算處置器，高通稱為“Zeroth”。
▲ 高通引見 Zeroth。
高通 Zeroth 芯片，運算架構仿照人類生物神經細胞的運作形式，是年夜腦架構層面。NPU 則是仿照年夜腦功效層面，兩者偏向紛歧樣。高通沒有參加自力 NPU 年夜軍，保持人工智能引擎 AI Engine 的偏向。
高通驍龍 845 揭櫫時，某些外界聲響品評高通沒有適應 NPU 趨向，以致于 AI 本領落后。高通進階副總裁兼舉措營業總司理 Alex Katouzian 回應，固然沒有自力神經收集引擎單位，但采用更彈性的機械進修架構（AI Engine），通用平台內最好化焦點，疏散于 CPU、GPU、DSP 等每個單位，可針對分歧舉措終端機供應彈性呼叫遍地理單位。
可以如許懂得：NPU 的偏向是分工明白，每個單位的集約化水平較高；高通 AI Engine 的偏向是“有任務年夜家一路做”。
直到采用第五代多核人工智能引擎 AI Engine 驍龍 865 系芯片揭櫫時，高通仍舊沒有踏入 NPU 之道。
▲ 高通誇大 865 的 AI 本領（左下方）。
不外現實應用，高通驍龍 865 的進修本領依舊值得確定。如近半個月應用搭載高通驍龍 865+ 的 vivo X50 Pro+ 時，天天解鎖十次擺佈，已能勝利辨識戴口罩的主人了。
但從材料看，AI 進修本領落后麒麟 9000 和 A14 不少。NPU 一次次用數據證實本身的 AI 氣力，高通下一代 AI Engine 可否力挽狂瀾，還需等 875 系列芯單方面世能力曉得。
人工智能期間盼望看到的場景是，手機不再主動回利用戶需求，而是能自動剖析、感測用戶需求，并事後供應相干辦事的伶俐裝配。
▲ Mate 40 系列 AI 本領展現。
這方面各家廠商還都在起步階段。如利用建議，現在最好的筆者以為是小米。透過時候和場景等身分剖析，每次都能“猜到”想開啟的軟件，并伶俐排序在最顯眼的地位。Mate 40 系列增援的“智感付出”更走在 AI 前端，也給人們更多想像空間。
除了手機，NPU 也漸漸利用到平板電腦、筆電等舉措端。蘋果近日揭櫫的 M1 芯片就擁有 16 核 NPU，每秒可實行 11 兆次運算，將機械進修速率提拔 11 倍，這是傳統 PC 難以企及對比。
搭載 M1 芯片的 MacBook 系列、Mac mini 將有哪些應用體驗變更，頗令人等待。
現在的軟件生態下，舉措端 CPU 和 GPU 提拔對用戶一樣平常應用來說感觸感染不強，如 iPhone XS 和 iPhone 12 比擬，利用流利性差未幾，會影響用戶體驗的，就是機械進修本領變更，也是為什麼要存眷 NPU 進展。
（本文由 愛范兒 受權轉載；首圖起源：pixabay）
延長瀏覽：
NEC 人臉辨識技巧再進級，戴口罩也能精準偵測
AI 耳機靠臉部肌肉輪廓“竊看”臉色，戴口罩也遮不住辨識精確率達 88%
研討：戴上口罩，年夜部門臉部辨識算法就掉效
i88 手機 版
2020-11-18 14:09:00