新智駕按:2020 年 8 月 7 日,全球人工智能和機(jī)器人峰會(huì)(CCF-GAIR 2020)正式開幕。CCF-GAIR 2020 峰會(huì)由中國(guó)計(jì)算機(jī)學(xué)會(huì)(CCF)主辦,香港中文大學(xué)(深圳)、雷鋒網(wǎng)聯(lián)合承辦,鵬城實(shí)驗(yàn)室、深圳市人工智能與機(jī)器人研究院協(xié)辦。
本次峰會(huì)智能駕駛專場(chǎng)上,威盛電子高級(jí)技術(shù)總監(jiān)唐亮,為與會(huì)者們帶來了一場(chǎng)精彩紛呈的“產(chǎn)學(xué)研整合-推動(dòng)下一代智能駕駛?cè)瞬排囵B(yǎng)”報(bào)告。
實(shí)際上,威盛電子在車載領(lǐng)域,憑借嵌入式及計(jì)算機(jī)視覺領(lǐng)域的研究成果做了大量關(guān)于智能駕駛方面的工作,主要針對(duì)商用車隊(duì)、礦卡、巴士等車型,以車載AI系統(tǒng)及車載AI雙鏡頭監(jiān)控儀為硬件基礎(chǔ),配套DMS駕駛員監(jiān)控、ADAS輔助駕駛、SVS全景環(huán)視、傳感器融合等軟件算法,并針對(duì)學(xué)校發(fā)展有威盛任我行智駕科研平臺(tái)。
基于威盛任我行智駕科研平臺(tái)原型無人車系統(tǒng),在封閉園區(qū)指定范圍內(nèi),可以做到自動(dòng)行駛抵達(dá)目的地。同時(shí)通過激光雷達(dá)、超聲波雷達(dá)、慣性導(dǎo)航等,已經(jīng)可以自主避障,實(shí)現(xiàn)了 L4 級(jí)別的自動(dòng)駕駛。
同時(shí),唐亮稱目前相關(guān)技術(shù)人才培養(yǎng),很多大學(xué)都處于科普階段,目前中國(guó)的人工智能領(lǐng)域人員缺口是 500 萬,威盛希望通過自己的努力,借助威盛任我行智駕科研平臺(tái)以及系統(tǒng),幫助百萬學(xué)子走入 AI 和自動(dòng)駕駛產(chǎn)業(yè)。
以下是唐亮的演講全文,雷鋒網(wǎng)新智駕進(jìn)行了不改變?cè)獾木庉嫞?/p>
大家好,我是威盛電子的唐亮。我今天介紹的題目是“產(chǎn)學(xué)研整合-推動(dòng)下一代智能駕駛?cè)瞬排囵B(yǎng)”,主要介紹威盛任我行智駕科研平臺(tái)。演講內(nèi)容包括三部分:一是介紹威盛電子;二是介紹威盛電子在人工智能方面做的工作;三是介紹威盛任我行智駕科研平臺(tái)。
完成從傳統(tǒng)嵌入式平臺(tái)到人工智能嵌入式平臺(tái)轉(zhuǎn)變
威盛電子成立于 1987 年,是嵌入式平臺(tái)及解決方案提供商。公司總部在 1992 年從美國(guó)遷至臺(tái)灣臺(tái)北市。CEO 是陳文琦,目前有 2000 多名員工,擁有專利 6000 多個(gè)。
國(guó)內(nèi)在北京、深圳、上海、臺(tái)北等地設(shè)有研發(fā)中心,國(guó)外在美國(guó)奧斯丁和福利蒙特市設(shè)有研發(fā)中心,東京有銷售分部。
威盛電子 1987 年成立至今,從最底層的 CPU、GPU、芯片組設(shè)計(jì),到自行研發(fā)嵌入式主板,最后成功研發(fā)嵌入式系統(tǒng)。如今把計(jì)算機(jī)視覺、人工智能結(jié)合進(jìn)來做終端智能化工作,一路走來將近 30 多年的歷程。
30 多年的時(shí)間,最初威盛主要涉及領(lǐng)域都在 PC 領(lǐng)域,主做系統(tǒng)設(shè)計(jì)、I/O 集成、無線網(wǎng)絡(luò)連接等。最近十年我們集中在人工智能方向,結(jié)合深度學(xué)習(xí),增加了很多人工智能功能,完成了從傳統(tǒng)嵌入式平臺(tái)到人工智能嵌入式平臺(tái)轉(zhuǎn)變的過程。
如今威盛人工智能工作很多是在視覺方面,基于 GPU 的積累,視覺上主要做物體識(shí)別,應(yīng)用于智能工廠,比如硅片識(shí)別、流水線瑕疵產(chǎn)品的識(shí)別等。
視覺領(lǐng)域自然少不了人臉識(shí)別,所以威盛做了大量關(guān)于人臉識(shí)別方面的努力,很多產(chǎn)品已經(jīng)落地。語音方面,不論是在線還是離線語音處理,也已落地了很多項(xiàng)目,尤其在智能家居、智能醫(yī)療方面有很多實(shí)際項(xiàng)目落地。
車載領(lǐng)域,借用嵌入式領(lǐng)域的工作成果和視覺研究成果,在輔助駕駛方面的工作主要針對(duì):DMS、駕駛?cè)松矸葑R(shí)別、ADAS 方面,已有 Mobile360 系列產(chǎn)品落地。
威盛電子人工智能主要集中在邊緣端,目的是為實(shí)現(xiàn)終端智能化,在智能制造、智能醫(yī)療、智能商務(wù)、智能交通等各個(gè)領(lǐng)域都有人工智能方面的產(chǎn)品落地。
為什么開發(fā)威盛任我行智駕科研平臺(tái)?
與學(xué)校、廠商合作過程中,需要把代碼、項(xiàng)目、技術(shù)移交給對(duì)方,如果僅僅把源代碼給對(duì)方,這樣做很可能無法順利交接,原因在于開發(fā)流程、編譯環(huán)境以及使用習(xí)慣不同,中間缺乏一個(gè)完整的系統(tǒng)做這件事。
基于這些因素,為方便輸出技術(shù),威盛借助在人工智能領(lǐng)域的經(jīng)驗(yàn)積累,開發(fā)出任我行智駕科研平臺(tái)。該平臺(tái)功能包括:用戶管理、代碼管理、開發(fā)測(cè)試、編譯環(huán)境、自動(dòng)部署等一系列的流程工具,同時(shí)也包括人工智能模型訓(xùn)練、模型優(yōu)化、自動(dòng)標(biāo)注等人工智能方面的基礎(chǔ)工具。
對(duì)外接口一方面是面向用戶操作的人機(jī)界面,可以在該平臺(tái)做編譯、開發(fā)等工作。另一方面是對(duì)終端的訪問接口,可以實(shí)現(xiàn)終端的管理、數(shù)據(jù)上傳、數(shù)據(jù)分析以及自動(dòng)更新等。
在底層,平臺(tái)同樣提供了跨平臺(tái)的部署能力,可以部署到私有服務(wù)器上,也可以部署到公有云上,并提供擴(kuò)展功能。
借助這套人工智能開發(fā)平臺(tái),可以很好地把威盛技術(shù)結(jié)合在一起,輸出到科研學(xué)校、科研單位或者合作伙伴。
任我行智駕平臺(tái)有一部分是車載視覺開發(fā)平臺(tái)??蓪④囕d視覺的:硬件、軟件、代碼、SDK,平臺(tái)相結(jié)合。硬件部分,車載視覺控制器采用高通 820 的芯片,可以接到 9 個(gè)攝像頭,實(shí)現(xiàn)人工智能、視頻拼接等操作,利用平臺(tái)可以開發(fā)智能座艙等。如果只是想在小的領(lǐng)域做研發(fā),比如需要做 ISP 性能提升調(diào)整,有了這個(gè)平臺(tái)一兩天時(shí)間就可以完成部署。
有了車載視覺開發(fā)平臺(tái)就可以開發(fā)關(guān)于自動(dòng)駕駛方面功能,如:道路交通標(biāo)志識(shí)別、盲點(diǎn)監(jiān)測(cè)、前車防撞預(yù)警、3D 環(huán)視/行車記錄等。
除在應(yīng)用層開發(fā),該套系統(tǒng)也能調(diào)整人工智能模型、物體檢測(cè)、行人檢測(cè)、面部檢測(cè)、調(diào)整模型和訓(xùn)練素材。
DMS 作為駕駛員行為監(jiān)測(cè)系統(tǒng),通過圖像輸入,對(duì)面部、身體形態(tài)分割,把信息輸入到深度卷積神經(jīng)網(wǎng)絡(luò),識(shí)別各種不同的行為,并分析這是危害駕駛還是安全駕駛。有了 DMS,就可以實(shí)現(xiàn)深度神經(jīng)網(wǎng)絡(luò)的圖像識(shí)別功能,捕獲司機(jī)駕駛行為并自定義報(bào)警,目前已經(jīng)可以識(shí)別 十幾種駕駛行為。
環(huán)視系統(tǒng)作為現(xiàn)在的標(biāo)配,當(dāng)拿到統(tǒng)一模塊直接上車就可以使用。Tier 1 在這個(gè)領(lǐng)域已經(jīng)做的非常好,拿到完整的開發(fā)包,可以自己調(diào)整,最多接 9 路攝像頭,正常的話接 4 路就可以了,前后左右。有些攝像頭數(shù)據(jù)拿過來可以做標(biāo)定工作,通過拼接了解整個(gè)流程,做任何想要做的事情。有了 SVS 代碼,也可以了解計(jì)算機(jī)視覺動(dòng)態(tài)拼接是怎么實(shí)現(xiàn)的,了解關(guān)鍵點(diǎn)在哪里,如想在里面做小的調(diào)整,這些可以進(jìn)行實(shí)現(xiàn)。
ADAS 領(lǐng)域有很多輔助功能,基于此,威盛在開發(fā)平臺(tái)上開放了接口,便于學(xué)習(xí)、了解。包括盲點(diǎn)檢測(cè)、前車防撞等,都是基于視覺、毫米波雷達(dá)等對(duì)物體距離、對(duì)物體的判斷,根據(jù)這些信息做邏輯分析。
基于任我行平臺(tái)實(shí)現(xiàn) L4 級(jí)別的自動(dòng)駕駛
當(dāng)下自動(dòng)駕駛大熱,前途也非常光明,研究自動(dòng)駕駛的公司非常多,但自動(dòng)駕駛研究的機(jī)構(gòu)用手指就可以數(shù)出來,沒有經(jīng)濟(jì)實(shí)力做相關(guān)研究很難,威盛所做的就是提供計(jì)算平臺(tái),結(jié)合代碼、控制器、無人車、傳感器,整體打包自動(dòng)駕駛開發(fā)平臺(tái)。
威盛電子開發(fā)的原形系統(tǒng)在封閉園區(qū)指定范圍內(nèi),可以做到自動(dòng)行駛抵達(dá)目的地。同時(shí)通過激光雷達(dá)、超聲波雷達(dá)、慣性導(dǎo)航等,已經(jīng)可以自主避障,實(shí)現(xiàn)了 L4 級(jí)別的自動(dòng)駕駛。
相關(guān)技術(shù)人才缺口巨大
威盛任我行智駕科研平臺(tái)的基礎(chǔ),是構(gòu)建在人工智能開發(fā)平臺(tái)之上,把自動(dòng)駕駛技術(shù)放進(jìn)去變成自動(dòng)駕駛開發(fā)平臺(tái),把車載視覺放進(jìn)去就是車載視覺開發(fā)平臺(tái),形成可供教學(xué)使用的開發(fā)平臺(tái)。
可以看到全中國(guó)的學(xué)校,最上層是 235 所科研院所(不含大學(xué)),593 所大學(xué)可以招收研究生,2956 所高等學(xué)府、1.01 萬所中專。大學(xué)包括大專在內(nèi),都是以理論知識(shí)為主,做科研的是少數(shù),更多是做科普。
威盛希望達(dá)到的效果并不僅僅是把平臺(tái)拿出去做科研,而是希望更多做技術(shù)方面的 AI 公司加入,把任我行平臺(tái)作為一個(gè)科普平臺(tái),通過開發(fā)平臺(tái)把威盛的技術(shù)變成標(biāo)準(zhǔn)化的開發(fā)包,供給學(xué)?;蚩蒲袡C(jī)構(gòu)使用。
通過標(biāo)準(zhǔn)化開發(fā)包的方式,幫助第三方教育機(jī)構(gòu)有能力開發(fā)基于人工智能的教案、教具,讓更多的人能夠接觸人工智能,學(xué)習(xí)人工智能。
目前中國(guó)的人工智能領(lǐng)域人員缺口是 500 萬,威盛目標(biāo)是希望通過智研平臺(tái)以及系統(tǒng),幫助百萬學(xué)子走入 AI 產(chǎn)業(yè),這個(gè)時(shí)間可能是 5 年、10 年,但這是威盛電子努力的方向,第一步先從自動(dòng)駕駛和輔助駕駛開始。
本文來源:雷鋒網(wǎng),作者:子健
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )