IBM研發(fā)基于PCM的個(gè)性化AI芯片,算力是GPU百倍

時(shí)間:2018-09-11

來源:網(wǎng)絡(luò)轉(zhuǎn)載

導(dǎo)語:最近發(fā)表在Nature上的一篇論文中,IBMResearchAI團(tuán)隊(duì)用大規(guī)模的模擬存儲(chǔ)器陣列訓(xùn)練深度神經(jīng)網(wǎng)絡(luò)(DNN),達(dá)到了與GPU相當(dāng)?shù)木?。研究人員稱,這種“芯片”可以達(dá)到GPU280倍的能源效率,并在同樣面積上實(shí)現(xiàn)100倍的算力。這是在下一次AI突破所需要的硬件加速器發(fā)展道路上邁出的重要一步。

【中國傳動(dòng)網(wǎng) 行業(yè)動(dòng)態(tài)】 最近發(fā)表在Nature上的一篇論文中,IBMResearchAI團(tuán)隊(duì)用大規(guī)模的模擬存儲(chǔ)器陣列訓(xùn)練深度神經(jīng)網(wǎng)絡(luò)(DNN),達(dá)到了與GPU相當(dāng)?shù)木?。研究人員稱,這種“芯片”可以達(dá)到GPU280倍的能源效率,并在同樣面積上實(shí)現(xiàn)100倍的算力。這是在下一次AI突破所需要的硬件加速器發(fā)展道路上邁出的重要一步。

IBMResearch研究員StefanoAmbrogio之前擔(dān)憂:我們可以在一個(gè)比GPU更快的系統(tǒng)上進(jìn)行訓(xùn)練,但如果訓(xùn)練操作不夠精確,那就沒用。目前為止,還沒有證據(jù)表明使用這些新型設(shè)備和使用GPU一樣精確?!?/p>

但在上周發(fā)表在《自然》雜志上的一篇論文中(Equivalent-accuracyacceleratedneural-networktrainingusinganaloguememory),Ambrogio和他的同事們描述了如何利用全新的模擬存儲(chǔ)器和更傳統(tǒng)的電子組件組合來制造一個(gè)芯片,該芯片在運(yùn)行速度更快、能耗更少的情況下與GPU的精確度相匹配。

新的存儲(chǔ)技術(shù)難以訓(xùn)練深層神經(jīng)網(wǎng)絡(luò)的原因是,這個(gè)過程需要對每個(gè)神經(jīng)元的權(quán)重進(jìn)行上下數(shù)千次的刺激,直到網(wǎng)絡(luò)完全對齊。Ambrogio說,改變這些設(shè)備的電阻需要重新配置它們的原子結(jié)構(gòu),而這個(gè)過程每次都不相同。刺激的力度也并不總是完全相同,這導(dǎo)致神經(jīng)元權(quán)重不精確的調(diào)節(jié)。

因此,研究人員創(chuàng)造了“突觸單元”來解決這個(gè)問題,每個(gè)單元都對應(yīng)網(wǎng)絡(luò)中的單個(gè)神經(jīng)元,既有長期記憶,也有短期記憶。每個(gè)單元由一對相變存儲(chǔ)器(PCM)單元和三個(gè)晶體管和一個(gè)電容器的組合構(gòu)成,相變存儲(chǔ)器單元將重量數(shù)據(jù)存儲(chǔ)在其電阻中,電容器將重量數(shù)據(jù)存儲(chǔ)為電荷。

PCM是一種“非易失性存儲(chǔ)器”,意味著即使沒有外部電源,它也保留存儲(chǔ)的信息,而電容器是“易失性的”,因此只能保持其電荷幾毫秒。但電容器沒有PCM器件的可變性,因此可以快速準(zhǔn)確地編程。

當(dāng)神經(jīng)網(wǎng)絡(luò)經(jīng)過圖片訓(xùn)練后可以進(jìn)行分類任務(wù)時(shí),只有電容器權(quán)重被更新了。在觀察了數(shù)千張圖片之后,權(quán)重會(huì)被傳輸?shù)絇CM單元以長期存儲(chǔ)。認(rèn)為最終的芯片會(huì)被設(shè)計(jì)為與GPU協(xié)同工作的形式,以處理全連接層的計(jì)算,同時(shí)執(zhí)行其他任務(wù)。他還認(rèn)為處理全連接層的有效方法可以被擴(kuò)展到其它更廣泛的領(lǐng)域。

Ambrogio表示主要有兩種方向的應(yīng)用:將AI引入個(gè)人設(shè)備,以及提高數(shù)據(jù)中心的運(yùn)行效率。但明顯其更具吸引力的優(yōu)勢在于創(chuàng)造個(gè)性化的AI。

IBM2018市場戰(zhàn)略:

截至今年3月31日,IBM2018年第一季度的營收為191億美元,同比增長5%。繼上個(gè)季度后,再次結(jié)束連續(xù)22個(gè)季度下滑的局面,第二次實(shí)現(xiàn)營收增長。IBM預(yù)計(jì)到今年年底將達(dá)到400億美元的戰(zhàn)略要求。

IBM所謂的“戰(zhàn)略必要性”收入,即未來增長產(chǎn)品和服務(wù),例如云、認(rèn)知計(jì)算、沃森、分析、移動(dòng)和安全等業(yè)務(wù),在過去12個(gè)月中為收入377億美元,增長12%,占IBM收入的47%。

6月6日,透過2018IBM社交協(xié)作峰會(huì),IBM發(fā)布了一系列基于Watson技術(shù)的社交協(xié)作解決方案,并向業(yè)界展示了眾多深入各行業(yè)企業(yè)業(yè)務(wù)流程的成功案例。無論是醫(yī)藥、金融、制造業(yè)等傳統(tǒng)行業(yè),或是獨(dú)角獸級別的初創(chuàng)企業(yè),IBM企業(yè)社交協(xié)作已經(jīng)全面深入企業(yè)業(yè)務(wù)深水區(qū),成為其數(shù)字化轉(zhuǎn)型中不可或缺的助力

2018年,IBM在企業(yè)社交協(xié)作方面另一個(gè)值得期待的動(dòng)作就是即將推出DominoV10版本。據(jù)悉,輕代碼/無代碼應(yīng)用將是其主要特點(diǎn)。相信在輕量化無代碼的趨勢下,越來越多企業(yè)用戶可以脫離軟件開發(fā)商和較長的開發(fā)周期,更便捷更快速地應(yīng)用IBM多年積累的企業(yè)協(xié)作技術(shù)。

在過去幾年:在人工智能領(lǐng)域IBM簽下16000份合同、400份區(qū)塊鏈合同!在量子計(jì)算領(lǐng)域,也正與JP摩根大通和戴姆勒等伙伴合作實(shí)施多個(gè)項(xiàng)目的合作。

 

中傳動(dòng)網(wǎng)版權(quán)與免責(zé)聲明:

凡本網(wǎng)注明[來源:中國傳動(dòng)網(wǎng)]的所有文字、圖片、音視和視頻文件,版權(quán)均為中國傳動(dòng)網(wǎng)(m.u63ivq3.com)獨(dú)家所有。如需轉(zhuǎn)載請與0755-82949061聯(lián)系。任何媒體、網(wǎng)站或個(gè)人轉(zhuǎn)載使用時(shí)須注明來源“中國傳動(dòng)網(wǎng)”,違反者本網(wǎng)將追究其法律責(zé)任。

本網(wǎng)轉(zhuǎn)載并注明其他來源的稿件,均來自互聯(lián)網(wǎng)或業(yè)內(nèi)投稿人士,版權(quán)屬于原版權(quán)人。轉(zhuǎn)載請保留稿件來源及作者,禁止擅自篡改,違者自負(fù)版權(quán)法律責(zé)任。

如涉及作品內(nèi)容、版權(quán)等問題,請?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。

關(guān)注伺服與運(yùn)動(dòng)控制公眾號獲取更多資訊

關(guān)注直驅(qū)與傳動(dòng)公眾號獲取更多資訊

關(guān)注中國傳動(dòng)網(wǎng)公眾號獲取更多資訊

最新新聞
查看更多資訊

熱搜詞
  • 運(yùn)動(dòng)控制
  • 伺服系統(tǒng)
  • 機(jī)器視覺
  • 機(jī)械傳動(dòng)
  • 編碼器
  • 直驅(qū)系統(tǒng)
  • 工業(yè)電源
  • 電力電子
  • 工業(yè)互聯(lián)
  • 高壓變頻器
  • 中低壓變頻器
  • 傳感器
  • 人機(jī)界面
  • PLC
  • 電氣聯(lián)接
  • 工業(yè)機(jī)器人
  • 低壓電器
  • 機(jī)柜
回頂部
點(diǎn)贊 0
取消 0