大模型與智能汽車的預(yù)見萬蕾博士9ASBU政策與標(biāo)準(zhǔn)專利部部長(zhǎng)目錄2數(shù)據(jù)數(shù)據(jù)萬維網(wǎng)開放全球互聯(lián)網(wǎng)全球智能機(jī)全球有效專利全球聯(lián)網(wǎng)汽車全球移動(dòng)用戶神經(jīng)網(wǎng)絡(luò)CNN算法用于圖像識(shí)別深度學(xué)習(xí)興起圖像分類突破戰(zhàn)勝人類谷歌A3谷歌A3超算：分布式計(jì)算一首個(gè)手機(jī)分布式計(jì)算一計(jì)算機(jī)誕生計(jì)算機(jī)誕生并行計(jì)算并行計(jì)算首個(gè)AIGPUIBM云計(jì)算PC機(jī)問題回筆對(duì)話機(jī)器人3推理生成意圖理解智能感知智能計(jì)算產(chǎn)業(yè)應(yīng)用原子能力海量無標(biāo)注數(shù)據(jù)自監(jiān)督學(xué)習(xí)精調(diào)專業(yè)教育預(yù)訓(xùn)練通識(shí)教育4應(yīng)用月活達(dá)1億等等HUAWEI嬰多鄰國(guó)：DuoLingoAPI問答、檢測(cè)、翻譯、文本理解、編排…專業(yè)教育場(chǎng)景模型碼生成GPT-1預(yù)訓(xùn)練通識(shí)教育基礎(chǔ)模型閱讀理解等·1750億ChainofThought能力涌現(xiàn)·1750億數(shù)據(jù)：>7.7萬人工標(biāo)注數(shù)據(jù)：>7.7萬人工標(biāo)注·遷移：零樣本學(xué)習(xí)+少樣本學(xué)習(xí)勵(lì)模型加入規(guī)則最大長(zhǎng)度擴(kuò)展8倍5三個(gè)典型大模型演進(jìn)歷程1750億ChatGPT月活超1億ChatGPTAPI$20/月$0.002/干token1億5400億3400億4個(gè)規(guī)格：70/130/330/650億6ChatGPT:大模型在自然語(yǔ)言應(yīng)用中的突破HUAWEI連續(xù)對(duì)話·Transformer采用注意力機(jī)制，在處理上下文關(guān)聯(lián)性上比CNN表現(xiàn)·Transformer采用注意力機(jī)制，在處理上下文關(guān)聯(lián)性上比CNN表現(xiàn)更好?！び?xùn)練數(shù)據(jù)中連續(xù)對(duì)話和代碼含蘊(yùn)含更多邏輯信息。NormalizedScoreNormalizedScore→WorldUnsaan0會(huì)寫文章會(huì)推理會(huì)編代碼不會(huì)聊天不知哪些是人類認(rèn)敢于質(zhì)疑注意力機(jī)制雙向單向單向自回歸自回歸書籍、wiki·控制瀏覽器就是控制流量入口·Copilot集成進(jìn)windows,升市場(chǎng)OS的統(tǒng)治地位·自動(dòng)生成ppt、word、excel·Teams:團(tuán)隊(duì)協(xié)作，如語(yǔ)音轉(zhuǎn)寫，自動(dòng)生成會(huì)議紀(jì)要；實(shí)時(shí)內(nèi)容摘要生成等；·提供面向銷售、客服、市場(chǎng)、運(yùn)維和供應(yīng)鏈的AI工具·Vivasales:Al提升作效率，場(chǎng)景化郵件生成，如定價(jià)；及客戶跟進(jìn)等·幫助開發(fā)者構(gòu)建自己的Copilot·構(gòu)建全生命周期低成本Al開發(fā)工具統(tǒng)一開發(fā)框架和開發(fā)流水線·LLM賦能，用自然語(yǔ)言交互滿足數(shù)據(jù)分析需求，留存用戶生態(tài)數(shù)據(jù)8谷歌開始第二步和第三步的嘗試通用Al的愿景模型能力凍結(jié)，抗遺忘與損害，讓單一的多功能模型應(yīng)用在不同場(chǎng)景。通用Al的愿景模型能力凍結(jié)，抗遺忘與損害，讓單一的多功能模型應(yīng)用在不同場(chǎng)景。T·非凍結(jié)模型如何減少遺忘的第二條路徑：加大參數(shù)量成就二多模態(tài)具身語(yǔ)言模型(VLM)矢量矢量·5620億個(gè)參數(shù)成就一理解圖形理解/生成語(yǔ)言成就一理解圖形理解/生成語(yǔ)言結(jié)合圖形和語(yǔ)言理解，生成機(jī)器人指令，處理物理世界任務(wù)啟示操作機(jī)器人能力在語(yǔ)言大模型中涌現(xiàn)，且不損失語(yǔ)言和視覺能力9HUAWEIHUAWEI大模型：工業(yè)化AI大模型：工業(yè)化AI多個(gè)場(chǎng)景一個(gè)模型數(shù)據(jù)自動(dòng)生成增廣┌一個(gè)場(chǎng)景一個(gè)模型數(shù)據(jù)質(zhì)量差、樣本少模型精度差大模型應(yīng)用開發(fā)范式大模型：規(guī)?；a(chǎn)高性能Al模型大模型應(yīng)用開發(fā)范式大模型：規(guī)?；a(chǎn)高性能Al模型的產(chǎn)線智能檢素智能客服工業(yè)質(zhì)檢智能推薦智能審核智能錄入泛化復(fù)制工業(yè)化開發(fā)預(yù)訓(xùn)練+下游任務(wù)微調(diào)場(chǎng)景1場(chǎng)景2場(chǎng)景N微調(diào)&部署泛化復(fù)制工業(yè)化開發(fā)預(yù)訓(xùn)練+下游任務(wù)微調(diào)場(chǎng)景1場(chǎng)景2場(chǎng)景N微調(diào)&部署迭代節(jié)電預(yù)測(cè)案件復(fù)議|工業(yè)質(zhì)檢|服裝生成節(jié)電預(yù)測(cè)員|輔助客服|倉(cāng)庫(kù)監(jiān)控|圖文檢索員3D孿生空間中國(guó)家庭數(shù)160萬人550萬人中國(guó)0.1%滲透率全球0.1%滲透率160萬人550萬人中國(guó)0.1%滲透率全球0.1%滲透率究物動(dòng)作分析4.7億多模態(tài)大模型CV+NLP模型位HUAWEI目錄HUAWEI大模型催熟AIGC→智能座艙&智能駕駛智能座艙智能駕駛智能座艙智能駕駛計(jì)算決策大模型策略生成音頻生成PofA3D生成圖像生成運(yùn)夢(mèng)師O代碼生成文本生成視頻生成網(wǎng)易伏數(shù)、多模態(tài)大模型智能汽車語(yǔ)音交互場(chǎng)景智能汽車語(yǔ)音交互場(chǎng)景智能駕駛場(chǎng)景智能駕駛場(chǎng)景數(shù)據(jù)隱私保護(hù)的解決方案提高模型可解釋性的方法實(shí)時(shí)性需求和性能優(yōu)化的挑戰(zhàn)數(shù)據(jù)隱私保護(hù)的解決方案提高模型可解釋性的方法挑戰(zhàn)與解決方案協(xié)同駕駛的潛力模型優(yōu)化和效率改進(jìn)協(xié)同駕駛的潛力激光雷達(dá)囂座艙情景智能座艙情景智能音、視頻設(shè)備獨(dú)立感知音、視頻設(shè)備獨(dú)立感知座艙監(jiān)控行車記錄360環(huán)視…感知手工控制&音頻指令式控制手工控制&音頻指令式控制儀表分布式MIC,揚(yáng)聲器門窗空調(diào)座椅控制視覺感知丫開右后門視覺感知丫開右后門融合大模型啟動(dòng)后排娛樂屏融合大模型啟動(dòng)后排娛樂屏原生智能理解原生智能記憶服務(wù)記憶服務(wù)對(duì)話大模型在智能駕駛應(yīng)用——場(chǎng)景數(shù)據(jù)管理HUAWEI自然語(yǔ)言驅(qū)動(dòng)的多模態(tài)檢索場(chǎng)景種類繁多且靈活多變自然語(yǔ)言驅(qū)動(dòng)的多模態(tài)檢索場(chǎng)景種類繁多且靈活多變按圖片檢索：列出所有與左側(cè)圖片列出所有與左側(cè)圖片相似的場(chǎng)景按自然語(yǔ)言檢索：列出所有前方有動(dòng)物橫穿場(chǎng)景按時(shí)空檢索：列出所有上海外灘夜晚場(chǎng)景標(biāo)簽m按標(biāo)簽檢索：m按標(biāo)簽檢索：r大模型在智能駕駛應(yīng)用——海量仿真數(shù)據(jù)生成大模型在智能駕駛應(yīng)用——海量仿真數(shù)據(jù)生成HUAWEI仿真數(shù)據(jù)集需求：交通參與者傳感器參數(shù)交通參與者動(dòng)靜態(tài)解耦/重傳感器數(shù)據(jù)建動(dòng)靜態(tài)場(chǎng)景參數(shù)傳感器數(shù)據(jù)建場(chǎng)景生成大模型幾何/紋場(chǎng)景生成大模型3D/4D真值3D/4D真值多模態(tài)自動(dòng)化標(biāo)注參與者駕駛模型自動(dòng)化標(biāo)注參與者駕駛模型傳感器傳感器環(huán)境，光照D智能駕駛——小模型vs大模型預(yù)訓(xùn)練大模型預(yù)訓(xùn)練大模型自動(dòng)駕駛大模型山白聯(lián)合表征全局/局部規(guī)劃決策樹地圖頭泛化能力泛化能力強(qiáng)(可支持Zero-shot/Few-shot)參數(shù)量?。簙億量級(jí)算力算力要求低：-訓(xùn)練：~48Nets@8萬GPUhours(FSD1.0)算力要求高：-訓(xùn)練：遠(yuǎn)高于~3億GPUho-實(shí)時(shí)推理(未壓縮):~10萬TOPs海量多模態(tài)數(shù)據(jù)：PB~EB量級(jí)自駕/人駕模式切換的HMI需單獨(dú)設(shè)計(jì)自駕/人駕模式切換可自然語(yǔ)言交互多模態(tài)數(shù)據(jù)訓(xùn)練部署嘉器其他業(yè)界呼吁Al安全監(jiān)管：HUAWEIOpenAICEOSamOpenAICEOSamAltman出席美國(guó)建議對(duì)Al進(jìn)行監(jiān)管，應(yīng)該參考核武器的監(jiān)管方式聽證主要問題：·Al是否會(huì)生成危險(xiǎn)內(nèi)容·Al是否會(huì)侵害公民的隱私，以及數(shù)據(jù)權(quán)利·Al是否會(huì)影響就業(yè)·成立一個(gè)新的政府機(jī)構(gòu)，負(fù)責(zé)審批大型Al模型。并對(duì)不符合監(jiān)管要求的公司進(jìn)行處理，包括吊銷其Al“執(zhí)照”必須通過某些安全測(cè)試，例如它們是否能夠“自我復(fù)制”或是“出逃(擺脫人類控制)”·要求獨(dú)立專家對(duì)模型在各個(gè)指標(biāo)上的表現(xiàn)進(jìn)行獨(dú)立審核Al比管理不善的飛機(jī)設(shè)計(jì)、生產(chǎn)維護(hù)、糟糕的汽車生產(chǎn)更危險(xiǎn)；它有破壞文明的潛力我得出的結(jié)論是，我們正在開發(fā)的智能與我們所擁有的智能大不相同；當(dāng)它們比我們更聰明時(shí)，會(huì)出現(xiàn)威脅人類生存的風(fēng)險(xiǎn)2023.3眾科技大咖聯(lián)名簽署《2023.3眾科技大咖聯(lián)名簽署《暫停大型人工智能研究》,暫停時(shí)間至少為6個(gè)月·...我們呼吁所有人工智能實(shí)驗(yàn)室立即暫停至少6個(gè)月的大模型人工智能系統(tǒng)的訓(xùn)練，比GPT-4更強(qiáng)大·……人工智能研究和開發(fā)應(yīng)該重新專注于使當(dāng)今強(qiáng)大、最先進(jìn)的系統(tǒng)更加準(zhǔn)確、安全、可解釋、透明、健壯、一致、可信和忠誠(chéng)各國(guó)Al治理法規(guī)進(jìn)展2019年4月7日，歐盟人工智能高級(jí)專家組(AIHLEG)發(fā)布《可信Al倫理指南》提出AI系統(tǒng)必須以人為本，并致力于將其用于服務(wù)人類和共同利益，以改善人類福祉和自由為目標(biāo)。尋求最大程度地發(fā)揮AI系統(tǒng)的優(yōu)勢(shì)，同時(shí)預(yù)防和降低其風(fēng)險(xiǎn)。人類的能動(dòng)性和監(jiān)督技術(shù)穩(wěn)健性和安全隱私和數(shù)據(jù)治理透明性多樣性、非歧視和公平社會(huì)和環(huán)境福祉問責(zé)制2021.4《Al法案》PedlpucsgLedhpmlungungocdigiten2020.1,聯(lián)邦政府發(fā)布《人工智能應(yīng)用的監(jiān)管指南》,提出十大監(jiān)管原則：公眾對(duì)Al的信任公眾參與科研操守和信息質(zhì)量風(fēng)險(xiǎn)評(píng)估與管理靈活性公平無歧視披露與透明度安全可靠聯(lián)邦機(jī)構(gòu)間協(xié)調(diào)2023.1NIST發(fā)布《人工智能風(fēng)險(xiǎn)管理框架1.0》2019年6月17日，國(guó)家新一代人工智能治理專業(yè)委員會(huì)發(fā)布《新一代人工智能治理原則——發(fā)展負(fù)責(zé)任的人工智能》旨在更好協(xié)調(diào)人工智能發(fā)展與治理的關(guān)系，確保人工智能安全可控可靠，推動(dòng)經(jīng)濟(jì)、社會(huì)及生態(tài)可持續(xù)發(fā)展，共建人類命運(yùn)共同體。和諧友好安全可控包容共享開放協(xié)作尊重隱私和諧友好安全可控包容共享開放協(xié)作尊重隱私敏捷治理共擔(dān)責(zé)任2021年9月25日，發(fā)布《新一代人工智能倫理規(guī)范》,旨在將倫理道德融入人工智能全生命周期，為從事人工智能相關(guān)活動(dòng)的自然人、法人和其他相關(guān)機(jī)構(gòu)等提供倫理指引提供倫理指引.基本倫理要求人類福祉促進(jìn)公平公正保護(hù)隱私安全確?？煽乜尚艔?qiáng)化責(zé)任擔(dān)當(dāng)提升倫理素養(yǎng)管理規(guī)范推動(dòng)敏捷治理積極實(shí)踐示范正確行權(quán)用權(quán)加強(qiáng)風(fēng)險(xiǎn)防范促進(jìn)包容開放使用規(guī)范提倡善意使用避免誤用濫用禁止違規(guī)惡用及時(shí)主動(dòng)反饋提高使用能力研發(fā)規(guī)范強(qiáng)化自律意識(shí)提升數(shù)據(jù)質(zhì)量增強(qiáng)安全透明避免偏見歧視供應(yīng)規(guī)范尊重市場(chǎng)規(guī)則加強(qiáng)質(zhì)量管控保障用戶權(quán)益強(qiáng)化應(yīng)急保障2023.4《生成式人工智能服務(wù)管理辦法(征求意見)》為促進(jìn)生成式人工智能技術(shù)健康發(fā)展和規(guī)范應(yīng)用Al評(píng)估和治理相關(guān)標(biāo)準(zhǔn)ITU-TSG16Alforaut聚焦倫理研究JTC1/SC42:A