資源描述:
《深度解析AI算力的現狀和趨勢.doc》由會員上傳分享,免費在線閱讀,更多相關內容在學術論文-天天文庫。
1、深度解析AI算力的現狀和趨勢 7月21日,“決勝算力時代”AI算力高端閉門分享會在北京天使匯極客咖啡舉辦。本次分享會由CSDN發(fā)起,由CTO俱樂部,深腦鏈、AI科技大本營和區(qū)塊鏈大本營協辦?! 》窒頃腁I算力的現狀和趨勢談起,并從硬件設計和算法優(yōu)化兩個層面切入,剖析算力提升的最新落地經驗和誤區(qū),最后針對算力成本居高不下的普遍現狀,引入算力的新型協作方式---借用區(qū)塊鏈生態(tài)的分布式協作,大幅降低企業(yè)算力成本?! ∫韵聻榧钨e分享內容簡介: ▌1.國科大數據挖掘與高性能計算實驗室負責人劉瑩教授發(fā)表了題為《基于異構并行計算的大數據分析與挖掘》的演講?! ?/p>
2、教授提到,單CPU的發(fā)展已經不能滿足實際應用的需求,AI時代必須要依靠并行計算。目前,并行計算的主流架構是異構并行計算平臺。除了科技巨頭和人工智能公司在做相關研究之外,她的團隊也在做基于異構并行環(huán)境的一些數據挖掘研究,也就是人工智能的一些算法,包括關聯規(guī)則、聚類到分類,而對于自動編碼機,推薦算法他們也做了異構并行資源,包含GPU集群上面的加速?! ∫詤f同過濾算法為例,它是一種非常重要的推薦系統算法,他們?yōu)榇嗽O計了兩個計算核,一個是計算相似度,一個是計算平均值,把這些核心計算全部都在GPU上進行計算來加速算法。他們團隊目前正在做的基于光學遙感圖像的艦船檢測與識別
3、項目就是在GPU加速下完成的,建模時間比CPU的速度提升了57倍?! PT鏈接: https://img-bss.csdn.net/201807241705592588.pdf ▌2.探智立方聯合創(chuàng)始人宋煜則介紹了AutoML,講述了其計算力的需求的分析與展望?! ∷赋觯珹utoML最核心的內容就是用計算力和數學方法自動做數據特征提取以及模型建模。 AutoML的整個過程需要大量的計算力,它對算力需求分為兩部分,第一部分是本身的模型評估,這與平時模型的訓練類似。第二部分是模型搜索,所以模型的搜索過程可能是對最優(yōu)解分布的估計,在估計完之后,過程拿到
4、的結果反過來會重新影響到參數,重新對最優(yōu)解分布范圍重新做一次估計?! ∷戊险J為,AutoML的發(fā)展最重要的一點是,用矩陣表達計算圖結構并且把所有圖操作變成矩陣運算,從而使得模型設計可以使用blas庫加速,以及針對特殊算法設計加速芯片?! 〃?.PerfXLab澎峰科技聯合創(chuàng)始人張先軼分享了主題為《InferXLite:輕量級深度學習推理框架》的內容?! 埾容W介紹了InferXLite輕量級深度學習推理框架以及配套的底層性能加速庫。他們關注在嵌入式端側的部署,比如無人機、智能攝像頭等。他主要從性能庫(BLAS、DNN庫等)和框架兩個維度講述了嵌入式AI性能
5、優(yōu)化。 針對深度學習優(yōu)化,他們主要為了解決四個問題:GEMMKernrl優(yōu)化,包括Neon指令、預取距離參數、Unroll參數;GEMMPack函數,Pack函數優(yōu)化,盡量連續(xù)寫;并行化,需要細粒度切分;定點化,要實現int8gemm?! PT鏈接: https://img-bss.csdn.net/201807241658331383.pdf ▌4.深腦鏈CEO何永以《區(qū)塊鏈驅動的人工智能云計算平臺》為題作了分享?! ∮捎诒ㄔ鲩L的AI算力需求是目前制約人工智能發(fā)展的主要瓶頸,所以他談到了區(qū)塊鏈如何以分布式協作,將“挖礦”和AI訓練結合在一起,將匯集
6、閑散的算力用于AI訓練中,以及如何將區(qū)塊鏈浪費資源的計算轉化為高效率的人工智能深度學習,機器學習訓練和區(qū)塊鏈計算挖礦?! 『斡勒J為未來中心化的云計算可能會走向分步式的云計算,主要有以下兩個原因,第一是GPU很便宜,可以節(jié)省70%以上的成本??梢酝ㄟ^閑置資源再利用的方式,比如可以把資金拿出來,然后在生產鏈上使用,生產鏈就會提供便宜機器。其次區(qū)塊鏈在早期很多機器接入進來,除了能夠整個生產力系統分配的獎勵之外,還可以獲得支付的算力,這兩部分組成了一個完整收入,不過這對一個使用算力的人來說費用其實很少,這就滿足了需求和供應兩端的需求。 關于私密數據的問題,何永表
7、示,訓練數據都是在生產鏈之上,最終拿到模型,所以對于數據的提供方來說可以做隱私控制,最終可以拿到便宜的隱私數據。 為什么這些一定要通過區(qū)塊鏈技術來做?首先,區(qū)塊鏈技術是一個完全去中心化的技術。如果是中心化的系統,如果服務器宕機,整個服務系統就都不可用。第二就是代幣經濟。使用機器的人付的代幣是直接的點對點支付,中間省去了利潤的剝奪過程。還有挖礦的經濟機制,也就是早期即使沒有任何人使用,只要把機器接入進來就可以給獎勵。第三是開源透明。第四是改變了經濟關系。