版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認(rèn)領(lǐng)
文檔簡介
大模型的“快慢思考”大模型的“快慢思考”大模型的“快慢思考”1當(dāng)前大語言模型表現(xiàn)的“理解力”DeepSeek-R1在數(shù)學(xué)、代碼、自然語言等任務(wù)上性能可比肩OpenAI-o1模型正式版。1當(dāng)前大語言模型表現(xiàn)的“理解力”DeepSeek-R1在數(shù)學(xué)、代碼、自然語言等任務(wù)上性能可比肩OpenAI-o1模型正式版。2大語言模型的“理解力”“統(tǒng)計性”理解?在依靠統(tǒng)計獲得的文字符號之間的關(guān)聯(lián)關(guān)系,是一種隨著語料的豐富,逐步“本質(zhì)性”理解?人類在抽象知識層面依據(jù)內(nèi)容與客觀邏輯形成的關(guān)聯(lián)大模型的“快慢思考”·大模型“深度思考”?在問題和答案之間加入大段推理過程,通過推理時計算不斷提升生成答案的準(zhǔn)確性大模型的“快慢思考”·大模型“深度思考”?在問題和答案之間加入大段推理過程,通過推理時計算不斷提升生成答案的準(zhǔn)確性,我們稱之為“深度思考”(類似deepseek-r1,GPT-o1/o3)“快思考”“深度思考”基于統(tǒng)計性理解,快速生成“結(jié)果”+生成“過程”“慢思考”本質(zhì)性理解、深度反思、多步推理,消除“快思考”的“幻覺”2大模型的“快慢思考”大模型“快思考”而解決同類問題的過程,我們稱之為“快思通過海量數(shù)據(jù)訓(xùn)練,做文字符號層面的統(tǒng)計處理,從數(shù)據(jù)中找出統(tǒng)計性規(guī)律,在概率的意義上掌握學(xué)習(xí)樣本所反映的隱含知識,并以此為基礎(chǔ)來生成內(nèi)容?!吠ㄟ^海量數(shù)據(jù)訓(xùn)練,做文字符號層面的統(tǒng)計處理,從數(shù)據(jù)中找出統(tǒng)計性規(guī)律,在概率的意義上掌握學(xué)習(xí)樣本所反映的隱含知識,并以此為基礎(chǔ)來生成內(nèi)容。》《》《《大模型擅長做什么?目前大模型的價值是很好的模擬了人腦的“快思考”人腦“快思考”能力“快思考”能力大模型乒乓球訓(xùn)練乒乓球訓(xùn)練人臉判定情緒人臉判定情緒“知道”:概率性關(guān)聯(lián)關(guān)系“深度思考”能力推理時計算結(jié)果導(dǎo)向的強化學(xué)“知道”:概率性關(guān)聯(lián)關(guān)系“深度思考”能力推理時計算結(jié)果導(dǎo)向的強化學(xué)推理大模型的價值是模擬了“深度思考”,其使得模型的推理向“慢思考”更近了一步。大模型的“深度思考”試圖突破在推理大模型擅長做什么?推理大模型(GPT-o1/o3、DeepSeek-R1等)通過“深度思考”能力,向“慢思考”更近一步“理解”“理解”:本質(zhì)性關(guān)聯(lián)關(guān)系“慢思考”的本質(zhì):是對事物本質(zhì)性理解“慢思考”的本質(zhì):是對事物本質(zhì)性理解,需借助事實性知識,通過多步推理、反思,是“深思熟慮”的結(jié)晶大模型的“深度思考”不是真正的“慢思考”:其并沒離開語言模型的框架,依然是自在簡單任務(wù)上,大模型生成的基于表象的統(tǒng)計性理解已經(jīng)逼近人類的“慢思考”;但在復(fù)雜任務(wù)上,“快思考”“慢思考”就會產(chǎn)生明顯差異不擅長長鏈路任務(wù)規(guī)劃不擅長事實認(rèn)知大模型不擅長“慢思考”不擅長邏輯推理不擅長實時反思理想很豐滿,現(xiàn)實很骨干依靠當(dāng)前大模型結(jié)構(gòu),尚未達到“本質(zhì)性理解”大模型不擅長“慢思考”任務(wù)知識的本質(zhì)性理解知識的本質(zhì)性理解調(diào)動注意力分析注重規(guī)劃和反思思考速度慢準(zhǔn)確性高干專業(yè)的"安全事兒"安全大模型與安全業(yè)務(wù)場景深度融合學(xué)得進去安全數(shù)據(jù)“博學(xué)人+醫(yī)學(xué)書”通用大模型的安全領(lǐng)域應(yīng)用通用大模型:關(guān)鍵信息提取、歸納總結(jié)、知識問答……與安全場景"表面結(jié)合干專業(yè)的"安全事兒"安全大模型與安全業(yè)務(wù)場景深度融合學(xué)得進去安全數(shù)據(jù)“博學(xué)人+醫(yī)學(xué)書”通用大模型的安全領(lǐng)域應(yīng)用通用大模型:關(guān)鍵信息提取、歸納總結(jié)、知識問答……與安全場景"表面結(jié)合安全知識問答、告警結(jié)構(gòu)化解讀、報告總結(jié)生成……掛接知識庫簡單SFT自然語言理解、知識庫召回,大模型對召回內(nèi)容進行總結(jié)輸出什么是“真正”的安全大模型?“主任醫(yī)師”“主任醫(yī)師”干得了通用大模型干不了的安全任務(wù),EDR行為端到端研判、網(wǎng)絡(luò)流量端到端研判異常行為檢測、安全告警降噪、威脅組織歸因……創(chuàng)新模型結(jié)構(gòu),優(yōu)化推理程序,通過專項訓(xùn)練手段,能夠“學(xué)習(xí)”海量安全數(shù)據(jù)做安全大模型的必備條件創(chuàng)新優(yōu)化海量高質(zhì)量海量高質(zhì)量安全語料創(chuàng)新優(yōu)化海量高質(zhì)量海量高質(zhì)量安全語料高質(zhì)量安全知識創(chuàng)新模型結(jié)構(gòu)優(yōu)化模型訓(xùn)練、推理方法創(chuàng)新模型結(jié)構(gòu)優(yōu)化模型訓(xùn)練、推理方法安全經(jīng)驗?zāi)軌?沉淀"安全工具能夠"聯(lián)動"workflow打造短期記憶workflow打造短期記憶數(shù)據(jù)請求y)任務(wù)拆解模型結(jié)構(gòu)調(diào)整模型分區(qū)訓(xùn)練(自研模型、面向網(wǎng)絡(luò)告警端到端研判、終端行為端到端研判、釣魚郵件研判等快(自研模型、任何大模做安全大模型的整體思路“快思考”任務(wù):針對專項場景生產(chǎn)安全數(shù)據(jù)語料,進行模型結(jié)構(gòu)優(yōu)化,創(chuàng)新模型訓(xùn)練來完成“慢思考”任務(wù):現(xiàn)階段,Agenticworkflow+安全大模型,實現(xiàn)特定場景的“慢思考”效果360安全大模型系統(tǒng)語言翻譯文本摘要意圖識別任務(wù)生成引擎指令調(diào)度引擎任務(wù)編排引擎監(jiān)督評測引擎執(zhí)行反饋記憶存儲安全數(shù)字專家安全數(shù)字專家模型360安全大模型系統(tǒng)語言翻譯文本摘要意圖識別任務(wù)生成引擎指令調(diào)度引擎任務(wù)編排引擎監(jiān)督評測引擎執(zhí)行反饋記憶存儲安全數(shù)字專家安全數(shù)字專家模型評估效果評測大模型分區(qū)訓(xùn)練模型發(fā)布訓(xùn)練語料模型參數(shù)分區(qū)調(diào)整評測對比語料批量轉(zhuǎn)換工具安全威脅行為生成工具360安全大數(shù)據(jù)底座安全大模型整體落地實踐路線海量安全數(shù)據(jù)、自研模型架構(gòu)、專項場景訓(xùn)練、專家經(jīng)驗沉淀、全線產(chǎn)終端安全產(chǎn)品流量檢測產(chǎn)品本地安全大腦威脅全鏈行為序列360XOS系統(tǒng)終端威脅行為全鏈路生產(chǎn)……網(wǎng)絡(luò)威脅行為全鏈路生產(chǎn)語料批量轉(zhuǎn)換安全威脅行為生成與捕獲威脅全鏈行為序列360XOS系統(tǒng)終端威脅行為全鏈路生產(chǎn)……網(wǎng)絡(luò)威脅行為全鏈路生產(chǎn)語料批量轉(zhuǎn)換安全威脅行為生成與捕獲終端威脅行為生成終端威脅行為捕獲網(wǎng)絡(luò)威脅行為生成網(wǎng)絡(luò)威脅行為捕獲?網(wǎng)絡(luò)資產(chǎn)數(shù)據(jù)?威脅情報數(shù)據(jù)?漏洞數(shù)據(jù)?十多年運營積累?高精度主機行為日志?原始攻擊流量?網(wǎng)絡(luò)告警日志數(shù)據(jù)?網(wǎng)絡(luò)文件數(shù)據(jù)海量安全語料生產(chǎn)終端安全終端安全終端威脅行為序列海量高質(zhì)量安全語料全鏈安全全鏈安全終端+網(wǎng)絡(luò)行為序列…………網(wǎng)絡(luò)威脅行為系列?真實樣本320億?每天新增1300萬+?惡意樣本52億流程細(xì)化任務(wù)推理內(nèi)容風(fēng)控法律法規(guī)輿情監(jiān)控EDR告警研判惡意文件研判惡意郵件研判遵從機制代碼漏洞研判流程細(xì)化任務(wù)推理內(nèi)容風(fēng)控法律法規(guī)輿情監(jiān)控EDR告警研判惡意文件研判惡意郵件研判遵從機制代碼漏洞研判“多專家協(xié)同(CoE)”大模型架構(gòu)設(shè)計語言中樞實現(xiàn)語言翻譯、文本摘要、意圖識別能力道德中樞實現(xiàn)內(nèi)容合規(guī)、道德法律審核能力實現(xiàn)語言翻譯、文本摘要、意圖識別能力道德中樞實現(xiàn)內(nèi)容合規(guī)、道德法律審核能力HQL語言報告生成Quake語言意圖理解指令生成實現(xiàn)程序生成、HQL語言報告生成Quake語言意圖理解指令生成記憶中樞以記憶為基礎(chǔ),記憶中樞以記憶為基礎(chǔ),為模型打上“思想鋼印”實現(xiàn)信息抽取、邏輯推理、是非判斷、研判檢測能力實現(xiàn)信息抽取、邏輯推理、是非判斷、研判檢事實知識/客觀規(guī)律事實知識/客觀規(guī)律攻擊流量研判攻擊流量研判CCoELayer模型基座解耦,遷移能力強 參數(shù)共享,模型緊湊保持基座模型能力度Self-CCoELayer模型基座解耦,遷移能力強 參數(shù)共享,模型緊湊保持基座模型能力度Self-優(yōu)勢CCoE安全大模型結(jié)構(gòu)剖析CCoE(緊湊型多專家協(xié)同大模型CCoE(緊湊型多專家協(xié)同大模型基于CH研判分區(qū)告警研判分區(qū)分區(qū)…通用模型底座-1通用模型底座-2…H研判分區(qū)告警研判分區(qū)分區(qū)…通用模型底座-1通用模型底座-2…CCoE是一個靈活的垂類大模型架構(gòu),可以像搭積木一樣,在一個或多個龐大的底座上添加新模塊、替換舊模塊;同時也可以在優(yōu)秀的新底座出現(xiàn)后(比如Deepseek替換或添加底座。DeepSee研判中樞研判中樞資漏研判分區(qū)告警研判分區(qū)研判分區(qū)研判研判中樞研判中樞資漏研判分區(qū)告警研判分區(qū)研判分區(qū)研判分區(qū)規(guī)劃研判分區(qū)語言語言Deepseek基座針對“快思考”任務(wù):CCoE安全大模型“分區(qū)訓(xùn)練”每一輪專項訓(xùn)練效果可控,有效減少多任務(wù)沖突、過擬合等問題,保證訓(xùn)練效果同時降低資源消耗。模型迭代語言中樞道德中樞記憶中樞規(guī)劃模型評估效果評測模型發(fā)布deploy模型迭代語言中樞道德中樞記憶中樞規(guī)劃模型評估效果評測模型發(fā)布deploy服務(wù)監(jiān)控判別中樞臺海量終端訓(xùn)練語料海量網(wǎng)絡(luò)訓(xùn)練語料CCoE模型現(xiàn)階段訓(xùn)練效果專項安全能力超越現(xiàn)有通用大模型對比模型準(zhǔn)確率AccTrojan.Adware.Win32.Agent+家族Trojan.Win32.Antavmu家族Backdo2.Rifdoor家族Trojan.Win32.Qhost家族Trojan.Win32.FakeFolder家族Trojan.Win32.Urelas家族Backdoor.Win32.Small家族Backdoor.Win32.Berbew家族n32.Mira家族Trojan.Win32.Zusy家族Trojan.Win32.Wacatac家族Backdoor.win32.Blihan家族32.Pohemah家族n32.VB家族Trojan.Win32.Vundo家族n32.Gamarue家族Trojan.Win32.FakeAlert家族精確率P召回率RF1-sco精確率P召回率RF1-sco精確率P召回率RF1-score精確率P召回率RF1-sco精確率P召率RF1-sco精確率P召率RF1-sco精確率P召率RF1-sco精確率P召率RF1-sco精確率P召率RF1-sco精確率P召回率RF1-sco精確率P召率RF1-score精確率P召率RF1-score精確率P召率RF1-score精確率P召率RF1-sco精確率P召回率RF1-score精確率P召率RF1-sco精確率P召率RF1-scoLlama3.1-405B0000000000000000000000000000000000000000000000000000Qwen2.5-72B0000000000000000000000000000000000000000000000000000GPT-4o0000000000000000000000000000000000000000000000000000360安全大模型0.994211111111111111111111110.90.911111111111111110.90.9111111111說明:該結(jié)果是360百億參數(shù)CCoE模型專項訓(xùn)練后的結(jié)果,統(tǒng)計時間截至為2024年12月專家經(jīng)驗專家經(jīng)驗針對“慢思考”任務(wù):AgenticWorkflow安全專家經(jīng)驗沉淀專家經(jīng)驗+安全大模型+安全工具+安全知識工作流示例:威脅狩獵安全大模型工作流示例:威脅狩獵多知識庫選擇自定義安全工具調(diào)用安全運營產(chǎn)品流量檢測產(chǎn)品終端安全產(chǎn)品資產(chǎn)管理產(chǎn)品安全云產(chǎn)品瀏覽器產(chǎn)品……告警分析增強HQL語言解讀解析規(guī)則推薦影響面關(guān)聯(lián)分析資漏信息匹配安全知識問答安全報告AI解讀安全內(nèi)容格式化梳理處置預(yù)案件推薦大模型智能處置安全運營產(chǎn)品流量檢測產(chǎn)品終端安全產(chǎn)品資產(chǎn)管理產(chǎn)品安全云產(chǎn)品瀏覽器產(chǎn)品……告警分析增強HQL語言解讀解析規(guī)則推薦影響面關(guān)聯(lián)分析資漏信息匹配安全知識問答安全報告AI解讀安全內(nèi)容格式化梳理處置預(yù)案件推薦大模型智能處置安全問答專家告警分析研判專家高級威脅狩獵專家事件分析研判專家HQL語句解讀專家數(shù)據(jù)解析規(guī)則推薦專家終端安全運營專家終端安全運營專家威脅情報分析專家威脅態(tài)勢解讀專家惡意郵件檢測專家安全處置專家安全運營專家Agent框架知識庫搜索插件應(yīng)用編排測試安全知識庫通用安全知識產(chǎn)品操作知識安全漏洞知識
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 公共交通車輛保險管理制度
- 2026青海玉樹市人民醫(yī)院面向社會招聘編外聘用工作人員的招聘2人備考題庫附答案
- 中共四川省委網(wǎng)信辦直屬事業(yè)單位2025年公開選調(diào)工作人員(7人)參考題庫附答案
- 中國標(biāo)準(zhǔn)化研究院質(zhì)量研究分院信用標(biāo)準(zhǔn)化研究崗企業(yè)編制職工招聘2人參考題庫附答案
- 南充市經(jīng)濟合作和外事局關(guān)于下屬事業(yè)單位2025年公開選調(diào)工作人員的參考題庫附答案
- 安遠縣2025年公開遴選鄉(xiāng)鎮(zhèn)敬老院院長考試備考題庫附答案
- 常州經(jīng)濟開發(fā)區(qū)人民檢察院公開招聘司法警察輔助人員3人備考題庫附答案
- 招2人!2025年同德縣文化館面向社會公開招聘政府聘用人員的考試備考題庫附答案
- 河口縣公安局公開招聘輔警(16人)考試備考題庫附答案
- 2026年銀行卡知識試題附答案
- IATF16949-質(zhì)量手冊(過程方法無刪減版)
- 妊娠合并膽汁淤積綜合征
- 河南省安陽市滑縣2024-2025學(xué)年高二數(shù)學(xué)上學(xué)期期末考試試題文
- 新疆維吾爾自治區(qū)普通高校學(xué)生轉(zhuǎn)學(xué)申請(備案)表
- 內(nèi)鏡中心年終總結(jié)
- 客房服務(wù)員:高級客房服務(wù)員考試資料
- 園林苗木容器育苗技術(shù)
- 陜西省2023-2024學(xué)年高一上學(xué)期新高考解讀及選科簡單指導(dǎo)(家長版)課件
- 兒科學(xué)熱性驚厥課件
- 《高職應(yīng)用數(shù)學(xué)》(教案)
- 漢堡規(guī)則中英文
評論
0/150
提交評論