1、智能終端發(fā)展趨勢分析智能終端發(fā)展現(xiàn)狀與瓶頸終端領(lǐng)域技術(shù)演進趨勢HiAI助力端側(cè)AI發(fā)展前行中國手機市場的發(fā)展變遷中國手機市場已經(jīng)由高速增長期過渡到存量換機穩(wěn)定期；均價持續(xù)上升；消費者的選擇傾向更好的體驗。手機終端消費品形態(tài)的變遷20172007Feature PhoneSmart PhoneIntelligent PhoneConnect people to people Connect people to mobile Internet 1997personal Assistant終端產(chǎn)業(yè)發(fā)展的兩條主線：交互模式+信息服務模式蘋果引導的智能手機第一波創(chuàng)新紅利已結(jié)束蘋果的市場份額有持續(xù)下降趨勢

2、蘋果帶來的此波浪潮已近尾聲： 大屏觸控、計算性能、操作流暢三大主要特性已無明顯優(yōu)勢蘋果逐漸走向以iPhone為平臺，主打服務的盈利模式下一個革命性的突破，仍在探索中，呈多樣化的趨勢China Jan16Jan17% Change Android 73.983.29.3 iOS 25.016.6-8.4 Windows 0.90.1-0.8 Other 0.30.1-0.2USA Jan16 Jan17% Change Android 58.256.4-1.8 iOS 39.1422.9 Windows 2.61.3-1.3 Other 0.10.30.2中美市場的相反選擇大屏觸控計算性能持久順

3、暢Unit：億美元屏幕尺寸年度均值 CPU 核數(shù)年度均值 電池容量年度均值 手機內(nèi)存年度均值 CPU速度年度均值 機身厚度年度均值 機身存儲年度均值 攝像頭像素年度均值 機身重量年度均值 進入瓶頸進入瓶頸進入瓶頸進入瓶頸進入瓶頸進入瓶頸手機終端主要功能配置遭遇發(fā)展瓶頸智能終端發(fā)展現(xiàn)狀與瓶頸終端領(lǐng)域技術(shù)演進趨勢HiAI助力端側(cè)AI發(fā)展前行5-10年內(nèi)顛覆式創(chuàng)新將帶來用戶體驗的再次跨越式升級AI現(xiàn)實世界PC屏幕+鼠標/鍵盤交互革命VR/AR谷歌、Facebook、Oculus、Valve、Meta、Magic Leap、Sony、三星、HTC谷歌、亞馬遜、蘋果、微軟、IBM、Nuance、Affe

4、ctiva、GridSpace、MetaMind 智慧革命數(shù)字世界SP屏幕+手指語音視覺更自然的交互（觸屏 +智能語音+ 動作識別+計算視覺）超越現(xiàn)實的顯示（360度、沉浸式、 增強現(xiàn)實）個性化的智能服務（自動場景識別、高智能推薦、無時不刻服務）終端用戶體驗將發(fā)生最基礎(chǔ)性的改變：(1）交互的革命；（2）信息服務的革命人工智能新一代終端用戶體驗以美國為首的技術(shù)創(chuàng)新公司正在推動產(chǎn)業(yè)的人工智能與交互革命，每一場革命都有可能成為改寫產(chǎn)業(yè)的“黑天鵝”認知感知未來通信革命 Voice InteractionPerception InteractionSimple AvatarReal person Ava

5、tarFacebook next G VR social and communication感知通信Perception Communication全息通信Holographic CommunicationRealtime holoportation Capture, transport, playback ,record, edit.Smartphone with depth cameraDigital expression emotionRecord Playback未來通信對ICT管道的影響：將帶來100M到G比特的帶寬需求（大帶寬、低時延）體數(shù)據(jù)（3D 可全球移動）按照能夠在1m的距離

6、內(nèi)達到視網(wǎng)膜分辨率的要求，在2mx1mx1m空間范圍描述一個人的表面積計算，一幀體數(shù)據(jù)圖像將達到1.2GByte120fps，達到1.15Tbps即便按照更高的500 x壓縮能力，壓縮后帶寬依然達到了2.3Gbps平面數(shù)據(jù)（2D）一幀4K超高清圖像24MByte4K30fps視頻 11Gbps采用H.265壓縮后20Mbps球面數(shù)據(jù)（2.5D 全景）按照未來16k的極限分辨計算（16kx8k），一幀球面圖像將達到384MByte120fps，達到368Gbps參考H265壓縮能力在250 x，壓縮后帶寬1.47Gbps平面數(shù)據(jù)是現(xiàn)有視頻系統(tǒng)的數(shù)據(jù)基礎(chǔ)，是傳統(tǒng)H.264/265解決的壓縮問題球面

7、數(shù)據(jù)是現(xiàn)在VR視頻應用的數(shù)據(jù)基礎(chǔ)，是工業(yè)界的熱點體數(shù)據(jù)是未來AR/VR應用的數(shù)據(jù)基礎(chǔ)，是學術(shù)界研究的熱點，工業(yè)界也開始跟進海量存儲，超大帶寬（M2M）：AR/VR相比2D視頻帶來3-4倍存儲需求，5D光場技術(shù)帶來4-6倍數(shù)據(jù)，HMD頭盔清晰度改進為8K帶來4-5倍數(shù)據(jù)，總計40 x 100 x的海量數(shù)據(jù)存儲、傳輸和處理的需求CaptureLocal storage processing encodingLocal ingressionGlobal VR CDNEdge CloudLocal accessHome storage, decoding and renderingHome Netwo

8、rkingDevice processingDevice Local TransmissionDisplay40Gps10Gps1Gps10 GpsX Tbps100 TFLOPS10 TFLOPS1 TFLOPS100 TFLOPS端到端的帶寬需要100Mbps以上才能達到真實的臨場感AR/VR對終端行業(yè)的影響AR/VR將是繼智能手機后，消費者領(lǐng)域最大的產(chǎn)業(yè)變革智能革命計算智能 感知智能 認知智能中期(5年)AR/VR將推動手機及PC升級換代，長期(10年)將可能顛覆一切帶屏設(shè)備手機/平板/PC/電視等都可能被AR逐步替代，引起芯片/OS/生態(tài)等革命式產(chǎn)業(yè)顛覆，引起行業(yè)巨頭新一輪競爭芯片架構(gòu)

9、之爭OS&生態(tài)之爭顯示產(chǎn)業(yè)顛覆服務入口顛覆高性能高功耗中性能低功耗PC/生產(chǎn)力Mobile/信息獲取高性能低功耗AlwaysOn光子光場鏡片生產(chǎn)消費娛樂光纖投影服務直達高通/英偉達/Intel谷歌/微軟/百度三星/蘋果/MagicLeap谷歌/微軟/FB/百度VR：感知世界；AR/MR：認知世界+溝通世界+情感連接輸入：觸屏 語音 + 手勢 + 視覺 交互輸出：5”屏 100”屏 360。全浸入人機交互革命智能終端發(fā)展現(xiàn)狀與瓶頸終端領(lǐng)域技術(shù)演進趨勢HiAI助力端側(cè)AI發(fā)展前行Apple Jeff Williams 我們放在手機手表里的神經(jīng)引擎，對未來至關(guān)重要，這些將幫助開發(fā)者在AI領(lǐng)域創(chuàng)造越來

10、越多的應用，所以我們認為手機將是一個主要的平臺 Qualcomm Jeff Gehlhaar 手機將是未來五年人工智能最為普遍的載體Google Jeff Dean推薦為什么說未來的深度學習是小、輕、快？13端側(cè)AI已成為業(yè)界公認的發(fā)展趨勢計算密集、復雜， 計算需求巨大，實時性非常挑戰(zhàn)運行環(huán)境受限，功耗、內(nèi)存、存儲空間非常挑戰(zhàn)越來越多的應用都帶AI，應用場景不確定模型和算子變化快前端訓練平臺五花八門14端側(cè)AI應用面臨著巨大的挑戰(zhàn)15HiAI Foundation架構(gòu)CloudHUAWEI HiAI ServiceDeviceChipHUAWEI HiAI EngineHUAWEI HiAI

11、FoundationHuawei HiAI Engine模型（MindSpore/TensorFlow/CoreML/Caffe/ONNX/PaddlePaddle）AppsRobotsAutomotiveHuawei HiAI Foundation在線推理離線推理Runtime & HiHCS（運行時和異構(gòu)計算系統(tǒng)）CPUGPUDSPNPUDevice Driver開發(fā)工具鏈工具鏈完善的文檔豐富的API直觀的DEMOHiAI Foundation架構(gòu)隱私成本實時HiAI Foundation帶給開發(fā)者&用戶的價值實時多人姿勢識別成功案例-Prisma普通HiAI使能 成功案例-抖音21HiA

12、I Foundation可以賦能極其豐富的端側(cè)應用場景22關(guān)鍵技術(shù)一：專用指令集和計算庫，高效執(zhí)行神經(jīng)網(wǎng)絡(luò)算子ConvolutionDeconvolutionPoolingReluNormalizeBatchNormFullConnectionSigmoid CPU=標量通用計算邏輯控制 GPU=矢量（2D）圖形圖像處理計算與渲染大規(guī)模并行計算 NPU=張量（=3D）專用AI指令集更大規(guī)模并行計算HiAI Foundation關(guān)鍵技術(shù)23關(guān)鍵技術(shù)二：離線編譯，輕量部署；層間融合，快速推理ModelConversionToolsOfflineModelBuildProduceHiAI Found

13、ation關(guān)鍵技術(shù)24關(guān)鍵技術(shù)三：離線模型運行，local ram，高效節(jié)能NPULocal ramData CopyLoadOfflineModelHiAI Foundation關(guān)鍵技術(shù)25V2.0V1.02005張4500張HiAI Foundation V2.0性能大幅提升26實時分割實時圖像處理對象識別粗粒度V2.0圖片視頻粗略精準V1.0檢測、姿態(tài)、細節(jié)能力HiAI Foundation V2.0解鎖能力更強V1.0麒麟970框架與API算子兼容性工具鏈支持90個算子Caffe/TensorFlowHuawei HiAI APIV1.5麒麟970支持42個算子Caffe/TensorFlowAndroid NN命令行工具增加圖形化工具(IDE)增加輕量模型校驗&轉(zhuǎn)換工具前后向兼容增加HiAI Foundation版本與模型兼容性檢測增加模型在線編譯支持147個算子V2.0麒麟980Caffe/TensorFlow、Android NN模型并發(fā)運行CPU/NPU混合模型調(diào)度更多功能的圖形化工具(IDE)更加精準的輕量模型校驗&轉(zhuǎn)換工具INT8量化工具混合模型分割工具增加INT8模型兼容性檢測增加INT8量化模型在線編譯HiAI Foundation 版本迭代快28