什么是“真AI相機”

原標題:什么是“真AI相機”

從去年開始,AI(人工智能)概念在手機行業(yè)大行其道,并且與消費者最關(guān)注的拍照功能結(jié)合起來。一時間,各大手機廠商不約而同地發(fā)布了多款號稱搭載了“AI相機”的智能手機,造成了手機市場魚龍混雜的局面。

在老冀看來,所謂“AI相機”,無非就是將AI(人工智能)技術(shù)用在智能手機上面,讓消費者在用手機的“相機”功能拍照和拍視頻的時候,不需要具備太多的專業(yè)知識,也不再需要設置繁瑣的拍照參數(shù),甚至能在光線不佳的環(huán)境下,就能夠做到心想事成,拍到滿意的效果。也只有這樣的相機,才能稱得上是“真AI相機”。

老冀認為,既然智能手機是給消費者拿來用的,那么到底什么是“真AI相機”,當然首先是消費者說了算。那么,消費者到底如何來判斷呢?老冀認為,如今的消費者對于手機相機提出了“三個更”的要求:更清晰、更美麗、更精準。

一、更清晰

先說拍照。對于消費者來說,只要是旗艦機,其相機配置都不會太差,在正常的日光下拍出來的效果其實差別是不大的,都能夠?qū)⒄掌牡孟衲敲椿厥隆?/p>

真正對相機提出挑戰(zhàn)的是另外兩種常見的場景,一種是目標運動的時候,另一種則是晚上。這個時候,如果沒有AI功能的加持,普通消費者很容易拍糊,

真AI相機能夠運用智能降噪技術(shù),拍運動目標的時候能夠做到細節(jié)清晰無拖影。此外,真AI相機還能調(diào)動影像噪點消除技術(shù),保留暗光下的細節(jié),即使是夜拍的時候也能夠再現(xiàn)真實。

再說拍視頻,消費者同樣也有兩大痛點:一個是背景太亂造成主角不突出,另一個則是直播時因為網(wǎng)絡不通暢導致畫面出現(xiàn)馬賽克,消費者希望強調(diào)的部分看不清楚,而不重要的部分卻喧賓奪主。

對于第一個痛點,真AI相機能夠利用AI技術(shù)進行邊緣精準辨別,背景虛化智能鎖焦,從而實現(xiàn)實時的高畫質(zhì)背景虛化視頻。

第二個痛點也引起了大部分第三方應用平臺的重視,它們?yōu)榱俗屩辈ギ嬅?、視頻通話的畫面清晰,在低帶寬或者網(wǎng)絡不好的情況下,采取“卡頓畫面”或者“連接不成功”來阻止用戶看到“馬賽克臉”。

但是,這不過是一種“頭痛醫(yī)頭腳痛醫(yī)腳”的偷懶辦法,并不能夠從根本上解決問題。如今,真AI相機的AI焦點直播功能,可以同時從B端和C端解決畫面問題,讓網(wǎng)紅直播時的畫面更清晰,還不用占用高帶寬。

二、更美麗

對于中國消費者特別是女性消費者來說,拍照并不是個簡單的照片質(zhì)量的問題,還是要在微信群、朋友圈等社交媒體上Show出美麗的問題。因此,我們才看到了有各種自拍神器、P圖軟件的大行其道。

如今,有了真AI相機的加持,愛美的女性消費者還能夠更進一步,實現(xiàn)360度無死角的美麗。具體來說,真AI相機能夠通過AI為人像留色,讓處在主角C位的自己顯得最迷人。

過去很多P圖軟件只擅長把臉P得更好看,結(jié)果身體的比例反而顯得更不協(xié)調(diào)。而真AI相機則具備了AI美體功能,能夠更協(xié)調(diào)地優(yōu)化你的身材,幫助你的傲人身姿苗條入鏡。

三、更精準

我們看到,很多主打“AI相機”概念的智能手機都加入了“智能場景”等功能,能夠自動識別拍攝的物體到底是花草、天空還是食物等,從而匹配最適合的拍攝方案。不過在實際使用的時候,“AI相機”卻經(jīng)常出現(xiàn)識別錯誤的窘境,例如將你吃的清炒荷蘭豆識別成花草,給它進行“加綠”處理,結(jié)果更不像美食了。

真AI相機則不會犯這種低級錯誤,它能夠做到更精準的識別,不僅能夠?qū)崿F(xiàn)多個物體的同時和實時識別跟蹤,還能夠?qū)崿F(xiàn)對人臉表情的檢測和精準判斷。

更有意思的是,真AI相機有著更為強勁的AI算力,結(jié)合更好的算法,能夠精準識別多人的快速移動姿態(tài)。這樣當一個團隊有多人同時做舞蹈動作的時候,就能夠?qū)崟r跟蹤每個人的姿態(tài),實現(xiàn)更有趣的人機互動應用。

因此,只有當消費者的拍照和拍視頻體驗達到了以上的“三更”(更清晰、更美麗、更精準),這樣的手機相機才能夠被稱為“真AI相機”。

那么,接著問題就來了:除了通過拍照時的直觀感受、圖片對比的直觀感受來識別“真AI相機”之外,是否還有更客觀的標準,就像評價手機性能的GeekBench、3DMark、安兔兔、魯大師等評分軟件那樣,不服跑個分?

可惜的是,面對AI芯片復雜而不斷迭代的運算模型和跳出傳統(tǒng)框架的算力邏輯,傳統(tǒng)評分軟件對AI芯片的測試方法顯得力不從心。

幸好還有專門的AI跑分軟件ETHZ AI Benchmark(蘇黎世跑分)。顧名思義,“蘇黎世跑分”是由蘇黎世聯(lián)邦理工學院研發(fā)的,測試的是通過不同的智能手機在運行相同的AI運算時,因為硬件和軟件的差異所最終體現(xiàn)出的速度快慢差別。

由于蘇黎世聯(lián)邦理工學院的人工智能實驗室在全球機器視覺、深度學習和機械工程等方面都有著深厚的積累,如今蘇黎世跑分已經(jīng)得到了芯片和手機廠商的廣泛認可,成為評判AI能力的關(guān)鍵指標。

而且,蘇黎世跑分的8大項核心測試均與“AI相機”的AI能力直接相關(guān),包括:

1. MobileNet-V1神經(jīng)網(wǎng)絡的目標識別/分類

2. 對象識別/初始分類-V3神經(jīng)網(wǎng)絡

3. 人臉識別

4. 圖像去模糊

5. 基于CPU、NPU、DSP的VG-19神經(jīng)網(wǎng)絡圖像超分辨率

6. 僅在CPU上的SRGAN神經(jīng)網(wǎng)絡的圖像超分辨率

7. 語義圖像分割

8. 照片增強

舉例來說,其中測試4、5、6、8主要測試包括圖形去模糊、多元化的圖像超分辨率和圖形增強,這個部分中ResNet架構(gòu)和CNN將會發(fā)揮重大的作用,由于涉及到圖片的重構(gòu)、模擬、訓練和補充,不僅需要消耗極大量的浮點運算和視覺還原(涉及在GPU或特制AI加速器上運行神經(jīng)網(wǎng)絡),還對設備在CPU、GPU、NPU(APU)等提出了相當大的協(xié)作處理能力,通常要求每秒高達200-5000 GMACs的運算能力,如果不是定位高端芯片或設備基本很難完成這一項。

由此可見,蘇黎世跑分能夠在很大程度上檢測到底什么才是“真AI相機”。老冀發(fā)現(xiàn),一直倡導“真AI相機”的聯(lián)發(fā)科技已經(jīng)發(fā)布了三大評價標準,分別是:

1. Sensor像素尺寸≥1.55μm。例如索尼的IMX586, IMX378, IMX380等。手機幾乎已經(jīng)取代了部分相機的場景應用,中高端手機的像素尺寸這些年也做到越來越大。單個像素的尺寸越大,感光能力更好,擁有更廣的動態(tài)范圍,對攝影來說,使用更多光線拍攝是無可替代的。老冀大膽預測,今年的智能手機會出現(xiàn)更多、更大尺寸的“底”,繼續(xù)升級手機相機。

2. 蘇黎世跑分≥21000分。AI性能決定了AI功能的表現(xiàn),21000分是性能分水嶺。在此腰部標準之上,我們看到了目前市場上比較搶眼的主打AI功能的手機芯片,如高通驍龍855、聯(lián)發(fā)科技Helio P90、華為麒麟980。在當下的AI風潮之中,今年會有更多的芯片擁有強大的AI性能,這個腰部分數(shù)標準可能會升到更高。

3. 三核ISP技術(shù)。ISP是手機芯片中負責圖像信號處理的單元,可以對圖像進行降噪、色彩補償、效果優(yōu)化等。簡單說,ISP就是把前端圖像傳感器傳輸?shù)男盘栕龊笃谔幚?,將電流信號重新排列組合,輸出一張更為優(yōu)質(zhì)的照片,好的ISP可以將成像質(zhì)量提高10-15個百分點。手機的ISP一般會集成在芯片處理器中,芯片級ISP的優(yōu)點是性能穩(wěn)定、功耗可以得到良好的控制。當下,手機的攝像像素越來越高,抓拍、夜拍、高清、甚至4K攝像,手機對ISP的處理性能要求越來越高。三核ISP可以通過硬件偵測人臉、實現(xiàn)更復雜的降噪處理、全像素多核對焦、通過硬件實時提供景深信息等,聯(lián)發(fā)科技的獨家技術(shù)支持三核ISP同時開啟,ISP性能更強,處理圖像的能力也就更強。

由此可見,聯(lián)發(fā)科技分別從相機性能、圖像處理性能、AI性能三個方面為“真AI相機”設置了不低的門檻。目前來看,市面上能夠同時達到這三項標準的智能手機,除了要搭載聯(lián)發(fā)科技Helio P90、海思麒麟980、驍龍855等AI性能強大的處理器, 同時還要搭配好的傳感器,就連去年9月蘋果發(fā)布的最新款iPhone XS系列其實也沒能達標,實在是屈指可數(shù)。

老冀判斷,2019年智能手機行業(yè)將會出現(xiàn)兩大熱點,一個是5G,另一個就是真AI相機。從目前來看,5G手機在今年還很難大規(guī)模普及;而隨著聯(lián)發(fā)科技Helio P90等具備強大AI能力的移動平臺的推出,今年“真AI相機”卻有望在旗艦機上普及,不僅重新定義新高端,還會徹底顛覆用戶的使用體驗。

免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2019-01-24
什么是“真AI相機”
我們看到,很多主打“AI相機”概念的智能手機都加入了“智能場景”等功能,能夠自動識別拍攝的物體到底是花草、天空還是食物等,從而匹配最適合的拍攝方案。

長按掃碼 閱讀全文