近日,NEC宣布開發(fā)了更易于提高識別精度的深度學習自動優(yōu)化技術。以往進行深度學習時,很難基于神經(jīng)網(wǎng)絡構造進行調(diào)整,所以無法在整個網(wǎng)絡進行最優(yōu)化的學習, 因而無法充分發(fā)揮其識別性。此次開發(fā)的技術, 可以基于其結構自動優(yōu)化神經(jīng)網(wǎng)絡學習的進度,從而輕松實現(xiàn)比以往更加精準的識別。
此技術的出現(xiàn),使得應用了圖像識別及聲音識別等深度學習技術的各個領域,均有望實現(xiàn)識別精度的進一步提高。例如,人臉識別和行為分析等視頻監(jiān)控識別精度的提高、基礎設施等點檢工作效率的提高,實現(xiàn)自動檢測災害、事故和災難等。
背景
近年來,深度學習的研究取得了飛躍性的進展。在圖像識別、聲音識別等廣泛領域內(nèi)得到了應用。深度學習使用具備深層構造的神經(jīng)網(wǎng)絡, 學習事先準備好的數(shù)據(jù)來實現(xiàn)高精度化。但是,如果數(shù)據(jù)被過度地學習,則會出現(xiàn)“過學習”的現(xiàn)象,即只能高精度地識別學習過的數(shù)據(jù),而未用于學習的數(shù)據(jù)的識別精度則降低。為了避免這種情況的發(fā)生,就需要使用“正則化”技術進行調(diào)整。
由于神經(jīng)網(wǎng)絡的學習過程因其結構而復雜多變,所以過去只能對整個網(wǎng)絡使用相同的正則化技術。結果出現(xiàn)了網(wǎng)絡各層有的過度學習,有的學習停滯等問題,因而很難充分發(fā)揮原有的識別性能。另外,由于手動調(diào)整各層的學習進度極為困難,所以對于逐層自動調(diào)整學習進度的需求呼聲很高。
此次開發(fā)的技術是基于神經(jīng)網(wǎng)絡的結構,逐層預測學習進度,并自動配置適合各層進展的正則化技術。通過此技術,在整個網(wǎng)絡中學習被優(yōu)化,并且可以將識別錯誤率降低約20%,改善識別精度。
各層神經(jīng)網(wǎng)絡中正則化技術自動設置示意圖
新技術的優(yōu)點
1、根據(jù)神經(jīng)網(wǎng)絡結構的自動學習優(yōu)化
基于神經(jīng)網(wǎng)絡的結構,我們預測每層的學習進度,并逐層自動設置適合于各層進展的正則化。據(jù)此,整個網(wǎng)絡的學習進度就得到了優(yōu)化,解決了過去各層過度學習和學習停滯的問題。在使用該技術的手寫數(shù)字數(shù)據(jù)的識別實驗中,識別錯誤率降低了約20%,識別精準度已經(jīng)得到明顯改善。
相對于學習數(shù)據(jù)量的識別錯誤率的變化
2、與以往相同的計算量下,輕松實現(xiàn)高精度
該技術僅在學習神經(jīng)網(wǎng)絡前實施一次,即可在與以往同等的學習計算量下輕松地實現(xiàn)高精度。
NEC集團致力于在全球范圍內(nèi)推進社會解決方案,提供安心、安全、高效、公平的社會價值,將先進的ICT技術與知識相融合,為實現(xiàn)更加光明、更加豐富多彩的高效社會盡一份力量。
(免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內(nèi)容或斷開相關鏈接。 )