公司內(nèi)部A訊飛星火生成式智慧駕駛艙技術(shù)方案2024年5月目錄TOC\o"1-3"\h\u188631.產(chǎn)品簡介 4192901.1.產(chǎn)品介紹 4140521.2.產(chǎn)品架構(gòu) 4164691.3.關(guān)鍵技術(shù) 599301.4.部署方式 14302702.產(chǎn)品特點(diǎn) 1576362.1.智能分析 15189282.2.術(shù)語理解 16284082.3.知識問答 1635772.4.多模態(tài)交互 16102652.5.自由問答 16204813.主要功能 1788053.1.大屏應(yīng)用 1715533.1.1.應(yīng)用管理 17243033.1.2.場景設(shè)計(jì) 18192993.2.數(shù)據(jù)管理 18227343.2.1.數(shù)據(jù)源 18205823.2.2.指標(biāo)管理 183933.2.3.知識庫 19153.3.集成 204133.3.1.接口管理 20114573.3.2.意圖管理 20261983.3.3.SDK 22269523.3.4.瀏覽器插件 23285024.成功案例 2458084.1.北京能源集團(tuán)有限責(zé)任公司經(jīng)管駕駛艙 243874.2.浙江省政協(xié)展廳升級 25138454.3.古井貢酒數(shù)字人品牌營銷 26128494.4.永達(dá)傳媒營銷標(biāo)準(zhǔn)化 27178104.5.華夏廣電導(dǎo)游一體機(jī) 28135055.技術(shù)支持 29271245.1.部署要求 2915455.1.1.硬件和軟件環(huán)境要求 29294225.1.2.外部依賴服務(wù) 30195285.1.3.安全性和合規(guī)性要求 31301575.1.4.網(wǎng)絡(luò)和基礎(chǔ)設(shè)施要求 31223885.1.5.部署工具和自動化 31233055.1.6.數(shù)據(jù)遷移和備份 31197395.2.實(shí)施路徑 32238455.2.1.需求調(diào)研 3292685.2.2.系統(tǒng)構(gòu)建 32111915.2.3.部署上線 32308625.2.4.測試驗(yàn)收 33152525.3.售后支持 33150545.3.1.培訓(xùn)和支持 33218735.3.2.后續(xù)支持和升級 33105026.產(chǎn)品Q&A 33

產(chǎn)品簡介產(chǎn)品介紹定位：星火生成式智慧駕駛艙是一款專為企業(yè)打造的大屏智能化升級工具?；谙冗M(jìn)的訊飛星火大模型構(gòu)建，通過數(shù)據(jù)管理、指標(biāo)管理、知識管理、集成管理、大屏應(yīng)用管理等核心功能，為企業(yè)用戶提供了與駕駛艙自由互動的全新體驗(yàn)。場景：星火生成式智慧駕駛艙主要面向經(jīng)營大屏和展廳大屏2大應(yīng)用場景。在經(jīng)營大屏場景下，平臺可實(shí)現(xiàn)通過自然語言進(jìn)行指標(biāo)問答和數(shù)據(jù)分析，并通過自適應(yīng)可視化實(shí)現(xiàn)自動出圖。通過建立知識庫，實(shí)現(xiàn)文檔問答，還能理解專業(yè)術(shù)語、進(jìn)行互聯(lián)網(wǎng)查詢，并提供多模態(tài)交互體驗(yàn)，極大的提升了數(shù)據(jù)分析效率和交互體驗(yàn)。在展廳大屏場景下，平臺支持虛擬人大屏內(nèi)容自動講解、大屏語音調(diào)度以及自由問答等操作，打造展廳大屏交互新模式，提升交互體驗(yàn)。價值：助力企業(yè)提高數(shù)據(jù)獲取和分析效率、降低數(shù)據(jù)分析應(yīng)用開發(fā)成本、提升大屏交互體驗(yàn)。產(chǎn)品架構(gòu)星火生成式智慧駕駛艙作為一款先進(jìn)的大屏智能化升級產(chǎn)品，其技術(shù)架構(gòu)遵循了行業(yè)標(biāo)準(zhǔn)的多層架構(gòu)設(shè)計(jì)，以確保系統(tǒng)的高可用性、可擴(kuò)展性和安全性。同時星火生成式智慧駕駛艙提供了一個直觀、響應(yīng)式的界面，支持多種瀏覽器和設(shè)備，確保用戶可以從任何地點(diǎn)、任何設(shè)備訪問應(yīng)用。結(jié)合虛擬人交互，提供全新的用戶交互體驗(yàn)。為了滿足全球用戶的需求，駕駛艙平臺提供了多語言界面，方便不同語言背景的用戶使用。生成式智慧駕駛艙平臺產(chǎn)品架構(gòu)如下：圖SEQ圖\*ARABIC1星火生成式智慧駕駛艙產(chǎn)品架構(gòu)關(guān)鍵技術(shù)訊飛星火通用大模型訊飛星火大模型為智慧駕駛艙注入了先進(jìn)的多領(lǐng)域處理能力，它不僅在文本生成、語言理解和多模態(tài)數(shù)據(jù)處理方面有著卓越的表現(xiàn)，還在邏輯推理、用戶問題匹配、Function-Call和上下文推理等多個維度上展現(xiàn)出了非凡的性能。在邏輯推理方面，星火大模型運(yùn)用常識推理、科學(xué)推理和時空推理等方法，能夠深入分析并準(zhǔn)確推理出復(fù)雜情境中的邏輯關(guān)系。這種能力讓模型在教育、市場策略制定和輿情分析等關(guān)鍵領(lǐng)域大放異彩，為用戶在面對錯綜復(fù)雜的問題時提供明晰而有效的解決策略。在本平臺中，星火大模型還能迅速地基于現(xiàn)有的指標(biāo)體系，精確地理解和定位用戶提出的問題，實(shí)現(xiàn)對問題要素的精準(zhǔn)捕捉，從而進(jìn)行高效的數(shù)據(jù)分析和處理。借助星火Function-Call能力，模型可以根據(jù)用戶的具體需求，靈活調(diào)用相應(yīng)的算法或處理流程，例如進(jìn)行數(shù)據(jù)分析和統(tǒng)計(jì)計(jì)算，為用戶提供定制化的服務(wù)和技術(shù)支持。同時上下文推理能力進(jìn)一步強(qiáng)化了模型的問題解決實(shí)力，讓模型在理解問題的本質(zhì)的同時，也能考慮到問題所處的具體環(huán)境和背景，從而提供更為全面和深刻的洞見和答案。技術(shù)能力：序號能力項(xiàng)核心技術(shù)能力1性能首響應(yīng)≤500ms（從請求送給認(rèn)知大模型推理服務(wù)到認(rèn)知大模型推理服務(wù)輸出第一個字的時間間隔），10路并發(fā)下，平均吞吐率不少于25tokens/s，2平均吐字率：25tokens/s（認(rèn)知大模型在單位時間內(nèi)輸出的tokens數(shù)量）3支持簡單查詢1-2秒，復(fù)雜查詢3-5秒;4穩(wěn)定性系統(tǒng)可用性≥99.9%5集成方式支持WebAPI、SDK的方式接入大模型6國產(chǎn)化能穩(wěn)定運(yùn)行在安裝有國產(chǎn)化CPU、加速卡和操作系統(tǒng)的服務(wù)器上；大模型推理服務(wù)支持多種國產(chǎn)化芯片，如華為昇騰等7數(shù)據(jù)處理支持?jǐn)?shù)據(jù)預(yù)處理，如數(shù)據(jù)清洗;8插件工具支持選配多種模型參數(shù)，可應(yīng)用在不同場景中，9大模型插件/工具包含:智能文檔問答內(nèi)容運(yùn)營工具和糾錯等;10文檔問答文檔問答支持多種文檔格式導(dǎo)入，例如pdf(包含圖片)、doc、txt和md等格式;11文檔切分規(guī)則支持自定義規(guī)則;12支持文檔問答溯源等功能;13支持多種回答模式，同時可自定義回復(fù)模版;14模型訓(xùn)練支持低代碼可視化工具進(jìn)行模型訓(xùn)練，支持多種模型訓(xùn)練方案，如LoRa、SFT和預(yù)訓(xùn)練等;15訓(xùn)練平臺支持算力管理、數(shù)據(jù)管理、數(shù)據(jù)標(biāo)注、數(shù)據(jù)處理、模型倉庫、模型測試及評分和模型部署等;16模型訓(xùn)練支持?jǐn)帱c(diǎn)續(xù)訓(xùn)和版本管理等功能;實(shí)時語音轉(zhuǎn)寫生成式智慧駕駛艙平臺配備了高效的實(shí)時語音轉(zhuǎn)寫功能，通過WebSocket協(xié)議與強(qiáng)大的語言轉(zhuǎn)寫核心引擎建立穩(wěn)定的長連接。這一創(chuàng)新設(shè)計(jì)使得連續(xù)的音頻流能夠被實(shí)時捕捉并精準(zhǔn)轉(zhuǎn)換為文字流，為用戶提供即時、準(zhǔn)確的文字記錄。引擎內(nèi)部采用了深度學(xué)習(xí)、自然語言處理和大數(shù)據(jù)處理等尖端技術(shù)，確保了語音識別的高精準(zhǔn)度。深度神經(jīng)網(wǎng)絡(luò)系統(tǒng)在此過程中發(fā)揮著關(guān)鍵作用，它能夠有效地從語音信號中提取信息并將其轉(zhuǎn)換為文本格式，而自然語言處理技術(shù)則進(jìn)一步提升了識別的效率和準(zhǔn)確性，所有這些都無需依賴于特定的語法結(jié)構(gòu)。該引擎還支持個性化詞表的定制，以滿足特定行業(yè)或用戶的特殊需求，從而進(jìn)一步提升識別的精準(zhǔn)度。同時，動態(tài)修正功能的加入，為轉(zhuǎn)寫文本的準(zhǔn)確性提供了額外保障，確保用戶獲得的文本記錄既準(zhǔn)確又可靠。這些功能的結(jié)合，使得生成式智慧駕駛艙在實(shí)時語音轉(zhuǎn)寫方面表現(xiàn)出色，為用戶提供了一種高效、智能的溝通和記錄解決方案。技術(shù)能力：序號能力項(xiàng)核心技術(shù)能力1實(shí)時語音轉(zhuǎn)寫支持5小時內(nèi)的連續(xù)語音流的實(shí)時識別。2支持中文、英文、中英文混合識別，支持方言識別，方言數(shù)量不低于6個。3支持降噪算法，可有效進(jìn)行音頻前端降噪，有效提升識別精度。4支持中英文混合識別，即中文普通話中夾雜英語單詞或句子。5音頻格式需要支持主流的音頻格式，如mp3、wav、m4a、pcm等。6集成接口支持Windows、Linux、Android、i0s等主流平臺集成，支持C/C++、Java、C、Python等主流開發(fā)語音集成，便于應(yīng)用開發(fā)集成。7支持角色分離功能，可通過配置設(shè)定角色的數(shù)量，也可以不指定進(jìn)行盲分。8返回結(jié)果支持時間戳，即結(jié)果中的文本時間點(diǎn)，精確到毫秒，便于業(yè)務(wù)開發(fā)進(jìn)行時間進(jìn)度定位。9提供詞、句的置信度得分，便于業(yè)務(wù)判斷識別的準(zhǔn)確度。10支持標(biāo)點(diǎn)預(yù)測功能，即識別的結(jié)果文本中的相關(guān)語句和段落已經(jīng)具備了標(biāo)點(diǎn)符號。11支持?jǐn)?shù)字規(guī)整，即遇到時間、日期等識別內(nèi)容可自動轉(zhuǎn)化為標(biāo)準(zhǔn)的數(shù)字書寫形式，例如十二點(diǎn)三十分轉(zhuǎn)寫為12:30。12支持效果優(yōu)化能力，主要為通過熱詞的形式即時解決特定的專業(yè)術(shù)語識別不準(zhǔn)確問題并支持相應(yīng)語料的模型訓(xùn)練，來進(jìn)一步提升識別率。13在安靜環(huán)境下，中文標(biāo)準(zhǔn)普通話的綜合識別率大于95%，并提供第三方檢測機(jī)構(gòu)證明材料。14系統(tǒng)服務(wù)能夠適配穩(wěn)定運(yùn)行在安裝有國產(chǎn)化CPU的服務(wù)器上;15.系統(tǒng)服務(wù)能夠適配穩(wěn)定運(yùn)行在安裝有國產(chǎn)化操作系統(tǒng)的服務(wù)器上。虛擬人技術(shù)生成式智慧駕駛艙采用先進(jìn)的虛擬人技術(shù)，打造了一種模擬真人的交互模式，極大地提升了實(shí)時匯報(bào)和溝通的自然性和親和力。這種交互方式不僅讓用戶感受到更加貼近人類伙伴的溝通體驗(yàn)，還增強(qiáng)了信息傳遞的直觀性和易理解性。虛擬人技術(shù)的制作流程涵蓋了人物設(shè)計(jì)、模型構(gòu)建、動畫制作和皮膚渲染等關(guān)鍵步驟，融合了人工智能（AI）、自然語言處理（NLP）、機(jī)器學(xué)習(xí)以及計(jì)算機(jī)視覺等多項(xiàng)前沿技術(shù)，共同營造出一種流暢而自然的交互體驗(yàn)。為了滿足不同行業(yè)和領(lǐng)域的多樣化需求，智慧駕駛艙精心內(nèi)置了豐富的虛擬人形象和音色庫，用戶可以根據(jù)自己的偏好和場景需求進(jìn)行個性化組合和選擇。這種靈活性確保了智慧駕駛艙能夠無縫適應(yīng)各種環(huán)境，為用戶提供定制化的交互體驗(yàn)，無論是在商務(wù)匯報(bào)、營銷宣傳還是經(jīng)營分析等場景，都能發(fā)揮出色的表現(xiàn)。技術(shù)能力：序號能力項(xiàng)核心技術(shù)能力1語音識別標(biāo)點(diǎn)智能預(yù)測：支持對識別結(jié)果語句智能預(yù)測其對話語境，提供智能斷句和標(biāo)點(diǎn)符號的預(yù)測。2智能端點(diǎn)檢測：支持對說話過程中進(jìn)行前端點(diǎn)檢測，即智能檢測說話過程中的有效語音的開始位置；支持對說話過程中進(jìn)行尾端點(diǎn)檢測，即智能檢測說話是否結(jié)束3智能數(shù)字規(guī)整：支持將識別結(jié)果的數(shù)字如日期、分?jǐn)?shù)、小數(shù)等，智能的轉(zhuǎn)換為易于理解的數(shù)字格式，使展現(xiàn)形式更符合人的習(xí)慣4智能文本順滑：支持將識別結(jié)果中無意義的停頓詞、語氣詞、重復(fù)詞等進(jìn)行智能過濾，使識別結(jié)果更易用閱讀和理解5動態(tài)結(jié)果修正：支持字詞級識別結(jié)果實(shí)時返回，并根據(jù)上下文語境,對歷史返回結(jié)果進(jìn)行動態(tài)修正。6音頻編碼：支持pcm、wav、speex、opus等多種音頻編碼格式7音頻采樣率：支持8k及16k的音頻，采樣精度為16bit8通用場景語音識別率≥95%（可提供省級或以上第三方檢驗(yàn)檢測機(jī)構(gòu)出具的測檢驗(yàn)報(bào)告掃描件）9語音合成多語種語音合成:合成聲音應(yīng)音質(zhì)清晰、音色飽滿、合成聲音自然流暢，支持中英文混合語音合成。后期如有需要，支持拓展方言，包括：臺灣普通話、東北話、四川話、廣東話、湖南話、河南話、山東話、湖北話等語音合成10多字符集輸入：合成文本支持輸入GB2312、GBK、Big5、Unicode和UTF-8等多種字符集11多數(shù)據(jù)格式輸出：支持輸出線性wav，pcm等格式的語音數(shù)據(jù)12簡單文本標(biāo)記：支持對文本添加標(biāo)注，設(shè)置朗讀方式，讓用戶自行設(shè)置如何合成，自行控制合成效果13中文語音合成的讀音和文本對比正確率≥98.3%（可提供省級或以上第三方檢驗(yàn)檢測機(jī)構(gòu)出具的檢驗(yàn)報(bào)告掃描件）14網(wǎng)絡(luò)正常環(huán)境下，輸入文本后合成音頻平均成功率≥99.8%（可提供省級或以上第三方檢驗(yàn)檢測機(jī)構(gòu)出具的檢驗(yàn)報(bào)告掃描件）15語音合成自然度MOS得分≥4.5（可提供省級或以上第三方檢驗(yàn)檢測機(jī)構(gòu)出具的檢驗(yàn)報(bào)告掃描件）16虛擬人智能交互虛擬人交互系統(tǒng)應(yīng)支持提供標(biāo)準(zhǔn)API接口或SDK，以接入第三方應(yīng)用系統(tǒng)17虛擬人交互系統(tǒng)應(yīng)支持以語音對話的形式，為用戶提供服務(wù)18交互打斷：系統(tǒng)應(yīng)支持全雙工交互方式，支持交互過程中隨時打斷，終止當(dāng)前對話進(jìn)入下一輪交互19更換背景：虛擬人應(yīng)支持更換視頻流的背景。（可自行準(zhǔn)備演示環(huán)境，并提供演示）20更換Logo：背景圖支持更換logo，可自定義上傳logo圖片，實(shí)時進(jìn)行更換21調(diào)整語速：支持對虛擬人說話語速進(jìn)行調(diào)節(jié)22切換分辨率：支持對虛擬人視頻進(jìn)行分辨率切換，應(yīng)支持1080P、720P、480P。（可自行準(zhǔn)備演示環(huán)境，并提供演示）23切換幀率：支持對虛擬人視頻進(jìn)行幀率設(shè)置。（可自行準(zhǔn)備演示環(huán)境，并提供演示）24切換流格式：虛擬人視頻流應(yīng)支持H264、FLV格式切換，以滿足客戶端對不同視頻流的格式要求。（可自行準(zhǔn)備演示環(huán)境，并提供演示）25橫豎屏：支持豎屏、橫屏展示，虛擬人形象大小、背景尺寸根據(jù)橫豎屏進(jìn)行自適應(yīng)，滿足在不同終端屏幕尺寸下的顯示效果26字幕顯示：數(shù)字人播報(bào)的同時，支持設(shè)置字幕顯示27語義提取正確率和召回率F-1值平均≥80%（可提供省級或以上第三方檢驗(yàn)檢測機(jī)構(gòu)出具的檢驗(yàn)報(bào)告掃描件）28數(shù)字人交互管理后臺可提供數(shù)字人交互管理后臺，并提供可視化操作界面，對數(shù)字人交互系統(tǒng)進(jìn)行統(tǒng)一的后臺管理。29數(shù)據(jù)統(tǒng)計(jì)：應(yīng)支持統(tǒng)計(jì)累計(jì)交互次數(shù)、當(dāng)前并發(fā)路數(shù)、累計(jì)客戶/租戶數(shù)量。應(yīng)支持已圖標(biāo)形式對于交互次數(shù)、并發(fā)容量進(jìn)行顯示，且支持按照時間維度進(jìn)行統(tǒng)計(jì)。30客戶/租戶管理：支持針對客戶/租戶進(jìn)行統(tǒng)一管理，支持對可用數(shù)字人形象、授權(quán)時間、并發(fā)路數(shù)進(jìn)行配置。31數(shù)字人資產(chǎn)管理：應(yīng)支持對數(shù)字人聲音和形象進(jìn)行統(tǒng)一后臺管理，以列表形式展示。32操作日志：應(yīng)提供操作日志，并對操作的IP地質(zhì)、操作動作、操作人、操作時間進(jìn)行統(tǒng)一記錄。33系統(tǒng)管理：應(yīng)支持對系統(tǒng)用戶和權(quán)限進(jìn)行管理。34數(shù)字人形象與聲音定制提供3D數(shù)字人形象定制服務(wù)，服務(wù)內(nèi)容包括原畫設(shè)計(jì)、3D建模、骨骼綁定等35提供數(shù)字人聲音定制服務(wù)，采集真人說話聲音后，經(jīng)機(jī)器學(xué)習(xí)、訓(xùn)練，在語音合成系統(tǒng)中復(fù)刻對應(yīng)聲音意圖匹配技術(shù)為了確保用戶輸入能夠精確對應(yīng)到相應(yīng)的意圖，系統(tǒng)采取了精準(zhǔn)的意圖識別和匹配策略。首先，利用預(yù)訓(xùn)練的語義相似度模型（SimBERTv2）對意圖進(jìn)行向量化處理，這一步驟將意圖轉(zhuǎn)化為高維空間中的向量表示，以便更精確地捕捉和存儲意圖的語義信息。這些向量化的意圖隨后被存儲在一個專門的向量數(shù)據(jù)庫中，以便快速檢索和比對。當(dāng)用戶發(fā)起輸入時，我們同樣使用Embedding技術(shù)將用戶的輸入轉(zhuǎn)換為向量形式，并在向量數(shù)據(jù)庫中進(jìn)行高效檢索。一旦檢索到與用戶輸入向量高度一致的意圖向量，我們便可以確認(rèn)用戶的輸入已經(jīng)成功匹配到了相應(yīng)的意圖。確認(rèn)匹配后，系統(tǒng)將進(jìn)入下一階段，即實(shí)體提取和執(zhí)行器執(zhí)行。實(shí)體提取過程將從用戶輸入中識別出關(guān)鍵信息，而執(zhí)行器則根據(jù)已識別的意圖和實(shí)體信息執(zhí)行相應(yīng)的操作或服務(wù)。這整個過程的設(shè)計(jì)旨在提高系統(tǒng)的響應(yīng)速度和準(zhǔn)確性，確保用戶能夠獲得滿足其需求的精準(zhǔn)服務(wù)。技術(shù)能力：序號模塊能力項(xiàng)核心技術(shù)能力1語音平臺基礎(chǔ)服務(wù)語音平臺部署語音引擎基礎(chǔ)部署平臺，支撐語音引擎的運(yùn)行2接入服務(wù)平臺對外提供標(biāo)準(zhǔn)的SDK,面向Android、iPhone以及Web客戶端提供便捷的控件層接口，支持Andoid/IOS/H5等渠道的接入，實(shí)現(xiàn)語音平臺語音能力的開放共享，SDK風(fēng)格支持C++和JAVA；3鑒權(quán)服務(wù)平臺具備對外部應(yīng)用能力接入的授權(quán)控制功能；4負(fù)載服務(wù)能力組件支持負(fù)載均衡的部署方式；5路由服務(wù)支持外部應(yīng)用調(diào)用的路由服務(wù)；6應(yīng)用管理滿足不同應(yīng)用場景的管理需求，應(yīng)提供系統(tǒng)截圖證明；7語音指令識別用戶發(fā)出語音命令，語音命令通過麥克風(fēng)輸入，經(jīng)過智能語音識別控制系統(tǒng)中語音識別、語義理解等核心引擎處理，語音命令轉(zhuǎn)換為文字指令，再通過接口協(xié)議的對接，傳輸?shù)綐I(yè)務(wù)系統(tǒng)8設(shè)備及設(shè)施聯(lián)動控制如果用戶的指令意圖是要執(zhí)行某個設(shè)備或產(chǎn)品的一段動作，系統(tǒng)就會將指令意圖通過協(xié)議轉(zhuǎn)換為設(shè)備或產(chǎn)品能識別的命令行，再將命令行傳達(dá)到設(shè)備或產(chǎn)品的控制系統(tǒng)，執(zhí)行相應(yīng)的動作。9語義理解引擎核心能力具備知識編譯及語義解析能力，支持將知識庫的數(shù)據(jù)資源編譯成語義資源，能夠根據(jù)語義資源將文本解析成固定格式的json；10并發(fā)能力提供語義理解并發(fā)能力；11分詞支持實(shí)現(xiàn)長、短句的分詞能力；12詞義歸一相同詞義的短詞規(guī)整、合并；13指代消解上下文指代詞的歧義14上下文理解在交互過程中自動緩存、匹配上下文信息、歷史數(shù)據(jù)等，提供多輪人機(jī)交互記憶機(jī)制；15提槽抽取配合知識庫，實(shí)現(xiàn)對話意圖的關(guān)鍵詞槽抽取、如地址、時間、關(guān)鍵動作；16拒識功能支持對相關(guān)業(yè)務(wù)以外的話題拒識功能；17敏感詞過濾支持敏感詞過濾功能；18多輪對話支持復(fù)雜任務(wù)的多輪對話以及多輪糾錯19全雙工用戶可在任意時間打斷對話并發(fā)出需求，引擎可以對非相關(guān)交互進(jìn)行拒識20兜底業(yè)務(wù)通過知識圖譜、生成式問答等引擎處理，可以做到有問必答，無應(yīng)答率大大下降。21語義開發(fā)平臺場景管理為滿足不同場景的應(yīng)用落地，語義開發(fā)平臺支持按場景進(jìn)行語義技能、問答庫的配置，實(shí)時構(gòu)建語義理解模型。22技能管理不同的業(yè)務(wù)功能對應(yīng)不同的語義技能，支持語義技能的新增、刪除、編輯、查詢及批量處理。23意圖管理支持意圖的新增、刪除、編輯、查詢及批量處理，支持用戶不同意圖表達(dá)方式的語料編寫，具備智能貼弧、句式模糊等功能，快速完成語義開發(fā)。24實(shí)體管理支持實(shí)體的新增、刪除、編輯、查詢及及批量處理，支持實(shí)體詞條的批量導(dǎo)入及同義拓展，并具備實(shí)體模糊功能。25問答庫支持一問一答、一問多答、多問一答、多問多答的問答庫建立方式，支持問題的模糊匹配26效果優(yōu)化提供可視化頁面展示日常使用中無法理解的用戶說法，支持將無法理解的用戶說法維護(hù)已創(chuàng)建的語義意圖中，使不能理解的用戶說法及時優(yōu)化。知識庫技術(shù)平臺提供多種格式的知識文檔上傳，上傳到平臺的知識文檔平臺會自動對文檔做切片分割，用戶也可以自己整理文檔并根據(jù)標(biāo)識符切割文檔切片。完成文檔切片后，用戶就可以對綁定了該知識的大屏應(yīng)用做知識問答。用戶提問后，平臺會檢索知識文檔，找到相關(guān)的文檔切片，打包處理后，交流星火大模型來完成對知識問題的回答。序號能力項(xiàng)核心技術(shù)能力1知識庫支持文檔智能切分，根據(jù)不同類型文件，設(shè)置不同切分規(guī)則2支持高精度高維度（2560維）Embedding模型，Embedding基于大模型訓(xùn)練3檢索模式支持向量檢索、全文檢索多種模式4檢索的文本可以通過閾值設(shè)置取精度更高的分片，不同場景可以設(shè)置不同閾值（例如寬松、嚴(yán)格）5用戶問題可進(jìn)行自動改寫泛化6支持圖文OCR&文檔版面分析7支持分片上下文追加，使得提供給大模型的文本語義更連貫8文檔問答支持多種文檔格式導(dǎo)入，例如pdf（包含圖片）、doc、txt和md等格式；文檔切分規(guī)則支持自定義規(guī)則；支持多種回答模式，同時可自定義回復(fù)模版；支持文檔問答溯源等功能部署方式智慧駕駛艙支持SaaS公有云服務(wù)、私有化部署、混合云部署等多種部署方式，客戶可以根據(jù)自身需求選擇最合適的部署模式。SaaS公有云服務(wù)圖SEQ圖\*ARABIC2公有云部署模式駕駛艙平臺私有化圖SEQ圖\*ARABIC3私有化部署模式混合云模式圖SEQ圖\*ARABIC4混合云部署模式產(chǎn)品特點(diǎn)智能分析依托星火認(rèn)知大模型強(qiáng)大的語義理解和數(shù)據(jù)分析能力，平臺打造了智能數(shù)據(jù)分析功能。用戶只需自然語言提問，平臺可以將問題轉(zhuǎn)化為精準(zhǔn)的SQL語句，進(jìn)而查詢到數(shù)據(jù)。對查詢到的數(shù)據(jù)，平臺可以自適應(yīng)提供最佳圖表展示，包括柱狀圖、餅圖、條形圖、表格等，不同圖表可按需自由切換。在展示數(shù)據(jù)的同時，星火大模型會對數(shù)據(jù)做總結(jié)性的分析，給用戶提供對數(shù)據(jù)的洞察和見解。術(shù)語理解用戶可以在平臺上自由配置企業(yè)經(jīng)營管理指標(biāo)數(shù)據(jù)，包括指標(biāo)的定義和計(jì)算口徑，配置完成后，就可以對綁定了該指標(biāo)的大屏應(yīng)用提問關(guān)于指標(biāo)術(shù)語的相關(guān)問題，平臺會快速檢索到相關(guān)指標(biāo)，并讓星火大模型完成對術(shù)語問題的準(zhǔn)確回答。知識問答平臺提供pdf、doc、txt、md多種格式的知識文檔上傳，平臺會自動對文檔做切片分割，用戶也可以自己整理文檔并根據(jù)標(biāo)識符切割文檔切片。完成文檔切片后，用戶可以對綁定了該知識的大屏應(yīng)用做知識問答。用戶提問后，平臺會檢索知識文檔，找到相關(guān)的文檔切片，打包處理后，交給星火大模型來完成對知識問題的回答。當(dāng)用戶想一邊回答問題，一邊展示相關(guān)的視頻或圖片時，只需將素材上傳到平臺，并在相應(yīng)的切片處綁定圖片和視頻資源，即可實(shí)現(xiàn)邊答邊看的交互效果。多模態(tài)交互用戶可以使用文本或語音對駕駛艙的大屏應(yīng)用提問，平臺分析出結(jié)果后，會根據(jù)不同的結(jié)果給出文本或數(shù)據(jù)圖表。同時虛擬人會將分析結(jié)果進(jìn)行播報(bào)。整個問答過程，包含了文本、語音、視頻推流等多種信息流交互模態(tài)。自由問答駕駛艙可作為星火大模型的客戶端進(jìn)行自由問答。當(dāng)用戶不熟悉數(shù)據(jù)內(nèi)容、含糊提問時，駕駛艙也會根據(jù)應(yīng)用綁定的數(shù)據(jù)，給出最合適的數(shù)據(jù)內(nèi)容，幫助用戶獲得想要的結(jié)果。當(dāng)大模型無法用已有數(shù)據(jù)和知識回答用戶問題，會交給大模型進(jìn)行兜底，做到有問必答。主要功能大屏應(yīng)用應(yīng)用：為了完成某種特定任務(wù)而設(shè)計(jì)的構(gòu)駕駛艙應(yīng)用，包括場景設(shè)計(jì)與應(yīng)用配置。場景：生成式智慧駕駛艙應(yīng)用的場景，例如營銷、文旅、政務(wù)等，一個應(yīng)用下面支持設(shè)計(jì)多個場景。大屏：生成式智慧駕駛艙的產(chǎn)品展現(xiàn)形態(tài)。素材庫：集中存儲和管理生成式智慧駕駛艙展示背景創(chuàng)作素材的地方。應(yīng)用管理靈活可定制化的應(yīng)用開發(fā)用戶通過產(chǎn)品頁面操作快速創(chuàng)建應(yīng)用，填寫應(yīng)用名稱、應(yīng)用描述、角色扮演、情景提示來設(shè)定應(yīng)用中駕駛艙的應(yīng)用背景、虛擬人扮演的角色以及交互情景，以區(qū)分和適配不同的業(yè)務(wù)需求和使用場景。獨(dú)立便捷的應(yīng)用配置創(chuàng)建場景頁面：根據(jù)業(yè)務(wù)需求創(chuàng)建1個或多個場景頁面，并填寫場景名稱與場景描述以區(qū)分和識別一個應(yīng)用下的多個場景。配置基本信息：填寫應(yīng)用名稱、應(yīng)用描述以區(qū)分和識別應(yīng)用；填寫虛擬人角色扮演、情景提示以虛擬人角色以及交互情景；綁定外部能力賦能應(yīng)用，實(shí)現(xiàn)更多場景功能。綁定應(yīng)用數(shù)據(jù)：綁定指標(biāo)域和知識庫以保證應(yīng)用使用特定數(shù)據(jù)源，確保應(yīng)用之間的數(shù)據(jù)隔離，為確保特定應(yīng)用使用特定數(shù)據(jù)源并保證不同應(yīng)用間的數(shù)據(jù)隔離，綁定指標(biāo)域和知識庫（指標(biāo)域與知識庫見下文，寫好后下劃線鏈接到對應(yīng)目錄）來與應(yīng)用進(jìn)行關(guān)聯(lián)，確保應(yīng)用只能訪問到預(yù)先定義和授權(quán)的數(shù)據(jù)。增強(qiáng)數(shù)據(jù)安全性，防止未經(jīng)授權(quán)的數(shù)據(jù)訪問，同時提高數(shù)據(jù)的準(zhǔn)確性和一致性，平臺能夠更好地跟蹤各個應(yīng)用的數(shù)據(jù)使用情況，對數(shù)據(jù)流進(jìn)行有效監(jiān)控，以支持?jǐn)?shù)據(jù)驅(qū)動的決策和優(yōu)化。簡單高效的應(yīng)用管理系統(tǒng)提供了一套完整的大屏應(yīng)用生命周期管理工具供用戶使用，包括預(yù)覽、發(fā)布、復(fù)制和刪除來支持應(yīng)用的快速迭代和靈活部署。場景設(shè)計(jì)可視化的場景設(shè)計(jì)支持用戶根據(jù)具體的業(yè)務(wù)場景設(shè)計(jì)駕駛艙頁面，支持用戶對頁面布局、顏色方案、交互邏輯等進(jìn)行細(xì)致的調(diào)整，以實(shí)現(xiàn)最佳的用戶體驗(yàn)和視覺效果。通過鏈接外部大屏或者系統(tǒng)模板或者用戶自定義圖片，個性化設(shè)計(jì)駕駛艙背景。通過拖拽式的頁面設(shè)計(jì)器，添加可視化組件，如虛擬人、文字總結(jié)、圖表、字幕、高亮區(qū)域等。設(shè)置組件位置、大小、層級、透明度，靈活多樣。精細(xì)化的虛擬人交互支持用戶對虛擬人物的外貌、聲音、動作等進(jìn)行個性化設(shè)置，使得虛擬人物更加生動、真實(shí)。實(shí)現(xiàn)更加自然的人機(jī)對話和交互，另外還支持定制化虛擬人。統(tǒng)一的綜合素材管理支持圖片文件的上傳、素材分類、預(yù)覽、搜索和重用機(jī)制，實(shí)現(xiàn)素材的集中管理，簡化素材的更新和維護(hù)工作。數(shù)據(jù)管理數(shù)據(jù)源駕駛艙的底層數(shù)據(jù)來源，支持鏈接多種類型數(shù)據(jù)庫（數(shù)據(jù)庫類型支持MySQL、GAUSS、SQLServer、POSTGRESQL、DORIS、STARROCKS等）、csv數(shù)據(jù)文件上傳、支持接口數(shù)據(jù)源，提供了詳細(xì)的連接參數(shù)配置和連接測試，確保了數(shù)據(jù)的準(zhǔn)確接入和高效處理。同時針對上傳后的數(shù)據(jù)支持添加字段描述，提高大模型對于數(shù)據(jù)的理解能力。指標(biāo)管理指標(biāo)分類采用“指標(biāo)域”分類管理指標(biāo)數(shù)據(jù)，“指標(biāo)域”是一類指標(biāo)的集合，可將指標(biāo)按照應(yīng)用場景進(jìn)行分類。目前系統(tǒng)支持3類指標(biāo)類型：原子指標(biāo)：即最小粒度的數(shù)據(jù)指標(biāo)，構(gòu)建一些簡單的不需要涉及指標(biāo)之間的計(jì)算。例如“銷售額數(shù)值”、“新客戶數(shù)量”。也是組成復(fù)合指標(biāo)的最小顆粒度。系統(tǒng)默認(rèn)數(shù)據(jù)源充分的條件下不需要配置則支持原子指標(biāo)查詢其同比與環(huán)比。復(fù)合指標(biāo)：構(gòu)建一些較為復(fù)雜的數(shù)據(jù)指標(biāo)需要涉及原子指標(biāo)間的計(jì)算，例如“銷售額”，通過“銷售單價”*“銷售數(shù)量”計(jì)算得出。明細(xì)指標(biāo)：用于查詢數(shù)據(jù)源中的某個數(shù)據(jù)明細(xì)，例如上傳的數(shù)據(jù)csv文件中的某一單元格的數(shù)據(jù)值，無聚合方式指標(biāo)構(gòu)建支持多層次、多維度的指標(biāo)體系構(gòu)建。設(shè)置相應(yīng)的數(shù)據(jù)指標(biāo)描述，可增強(qiáng)大模型對數(shù)據(jù)指標(biāo)的理解能力，從而更加精準(zhǔn)的深度分析數(shù)據(jù)；設(shè)置數(shù)據(jù)指標(biāo)的數(shù)據(jù)格式和計(jì)算方式，幫助平臺準(zhǔn)確快速的計(jì)算處理數(shù)據(jù)并呈現(xiàn)。數(shù)據(jù)維度：在數(shù)據(jù)分析中，業(yè)務(wù)需要在得到特定條件或分類下的數(shù)據(jù)指標(biāo)數(shù)值，某個特定條件和分類就是單個的數(shù)據(jù)維度。設(shè)置數(shù)據(jù)維度得到各分類和分組下的數(shù)據(jù)指標(biāo)值，幫助更深入地理解和分析數(shù)據(jù)，發(fā)現(xiàn)潛在的趨勢和模式。設(shè)置數(shù)據(jù)篩選條件，可過濾無用的數(shù)據(jù)源，增加數(shù)據(jù)的可靠性和數(shù)據(jù)分析的真實(shí)性。設(shè)置時間維度：年、季度、月、日等，平臺將按照選擇的時間顆粒度對數(shù)據(jù)進(jìn)行統(tǒng)計(jì)與分析。知識庫支持多種文檔格式的上傳：doc、pdf、txt，并以文件夾形式進(jìn)行分類管理，系統(tǒng)支持默認(rèn)規(guī)則的文檔切片，用戶可自行調(diào)整，并綁定圖片或者視頻，以增強(qiáng)駕駛艙在知識庫模塊對企業(yè)專有名詞、規(guī)則、文化等知識的展示與講解，使得企業(yè)內(nèi)部的知識資源可以得到有效整合和充分利用，實(shí)現(xiàn)知識的快速檢索和智能推薦，提升知識共享和應(yīng)用的效率。集成接口管理接口管理功能允許用戶將外部接口與星火生成式智慧駕駛艙連接，實(shí)現(xiàn)數(shù)據(jù)和服務(wù)的無縫對接。用戶需要提供接口的相關(guān)信息，包括接口名稱、路徑、服務(wù)地址、請求頭部和請求參數(shù)等，以確保系統(tǒng)能夠正確地與接口進(jìn)行通信。接口創(chuàng)建用戶可以通過單擊【新建接口】按鈕來創(chuàng)建新的接口。在創(chuàng)建過程中，用戶需要填寫接口的基礎(chǔ)配置信息，包括接口名稱、接口路徑、服務(wù)地址等。此外，用戶還需要定義請求頭部和請求參數(shù)，以確保接口的正確調(diào)用。接口測試為了驗(yàn)證接口的功能和穩(wěn)定性，用戶可以通過【測試接口】功能對接口進(jìn)行測試。這有助于在正式使用前確保接口的可靠性。接口刪除用戶可以通過單擊【刪除】按鈕來刪除不再需要的接口。這有助于維護(hù)接口列表的清晰性和減少潛在的安全風(fēng)險(xiǎn)。接口環(huán)境變量管理接口環(huán)境變量管理功能允許用戶為接口設(shè)置環(huán)境變量，這些變量可以在接口調(diào)用時使用。用戶可以通過【新建環(huán)境變量】按鈕來添加新的環(huán)境變量，或通過【編輯】和【移除】按鈕來管理現(xiàn)有的環(huán)境變量。意圖管理意圖管理功能是星火生成式智慧駕駛艙的核心組成部分，是駕駛艙能夠理解和響應(yīng)用戶的意圖的關(guān)鍵。用戶可以通過配置應(yīng)用意圖和系統(tǒng)意圖，以及創(chuàng)建和管理應(yīng)用實(shí)體和執(zhí)行器，來實(shí)現(xiàn)對用戶輸入的智能解析和響應(yīng)。什么是意圖意圖識別（IntentRecognition）是自然語言處理（NLP）中的一個重要任務(wù)，它旨在確定用戶輸入的語句中所表達(dá)的意圖或目的。簡單來說，意圖識別就是對用戶的話語進(jìn)行語義理解，以便更好地回答用戶的問題或提供相關(guān)的服務(wù)。下面是一個簡單的例子來說明意圖識別的概念：用戶輸入："我想訂一張從北京到上海的機(jī)票。意圖識別：預(yù)訂機(jī)票。在這個例子中，通過將用戶輸入的語句分類到“預(yù)訂機(jī)票”這個意圖類別中，系統(tǒng)可以理解用戶的意圖并為其提供相關(guān)的服務(wù)。星火生成式駕駛艙平臺提供意圖加執(zhí)行器管理模塊管理用戶重要意圖，幫助系統(tǒng)更好地理解用戶的需求和意圖，從而為用戶提供更加智能和高效的服務(wù)。平臺意圖相關(guān)的術(shù)語意圖：用戶的意圖或目的，如切換場景實(shí)體：您可以從對話中提取的數(shù)據(jù)點(diǎn)或值（并且可以放入類別/類型中），如具體場景值話術(shù)：最終用戶與系統(tǒng)交互時提供的輸入執(zhí)行器：響應(yīng)對應(yīng)意圖的程序意圖是用戶想要執(zhí)行的操作，實(shí)體是平臺想要從用戶的話語中提取的關(guān)鍵字。執(zhí)行器是命中意圖后系統(tǒng)采取的動作。應(yīng)用意圖是指用戶在特定應(yīng)用中定義的意圖。用戶可以通過創(chuàng)建應(yīng)用意圖來識別用戶的特定需求，并根據(jù)這些需求執(zhí)行相應(yīng)的操作。系統(tǒng)意圖是指在星火生成式智慧駕駛艙中預(yù)定義的意圖。用戶可以通過選擇和配置系統(tǒng)意圖來擴(kuò)展駕駛艙的功能。通過默認(rèn)系統(tǒng)意圖可執(zhí)行的操作切換大屏：切換到應(yīng)用內(nèi)其他大屏模擬點(diǎn)擊：語音控制模擬點(diǎn)擊原有大屏模塊，完成數(shù)據(jù)原有數(shù)據(jù)下鉆分析高亮：用戶可通過設(shè)置高亮意圖和位置實(shí)現(xiàn)查詢原有大屏數(shù)據(jù)時相關(guān)區(qū)域高亮展示調(diào)用API：允許設(shè)置、配置和執(zhí)行API調(diào)用和功能執(zhí)行代碼：允許您設(shè)置和編寫自定義Javascript函數(shù)和命令指令：返回，確認(rèn)，返回首頁SDK星火生成式智慧駕駛艙交互JSSDK（以下簡稱“星火SDK”）是一款為智慧駕駛艙交互體驗(yàn)量身定制的軟件開發(fā)工具包。自2024年3月29日推出v1.0.0版本以來，該SDK憑借其基于vue3架構(gòu)的設(shè)計(jì)，確保了與現(xiàn)代前端開發(fā)框架的兼容性，同時在主流瀏覽器如Chrome78+上提供了穩(wěn)定的運(yùn)行環(huán)境。星火SDK旨在優(yōu)化智慧駕駛艙產(chǎn)品的交互流程，通過高效集成預(yù)配置的組件，為用戶提供了一系列直觀、便捷的交互功能。這些功能不僅提高了用戶體驗(yàn)的質(zhì)量，也增強(qiáng)了數(shù)據(jù)處理和信息展示的效率。功能特點(diǎn)虛擬數(shù)字人與多媒體交互：星火SDK集成了虛擬數(shù)字人技術(shù)，實(shí)現(xiàn)了語音合成與字幕展示的同步進(jìn)行，為用戶提供了一種新穎的交互方式。多模式輸入：支持文字與語音兩種輸入方式，使得用戶可以根據(jù)自己的偏好和場景需求，靈活地與系統(tǒng)進(jìn)行溝通。數(shù)據(jù)互動與可視化：通過大數(shù)據(jù)分析技術(shù)，星火SDK能夠?qū)?shù)據(jù)進(jìn)行深入的問答和直觀的可視化展示，幫助用戶更好地理解和利用數(shù)據(jù)。知識庫互動：結(jié)合知識庫，SDK提供了問答功能，并通過視頻和圖片等多媒體形式增強(qiáng)信息的傳遞和理解。自由問答系統(tǒng)：用戶可以與星火SDK進(jìn)行自然語言的自由問答，系統(tǒng)能夠智能地理解并回應(yīng)用戶的需求。交互記錄管理：星火SDK能夠記錄用戶與系統(tǒng)的交互歷史，便于用戶回顧和追蹤操作過程。技術(shù)規(guī)格與兼容性星火SDK遵循現(xiàn)代Web開發(fā)的技術(shù)標(biāo)準(zhǔn)，基于vue3架構(gòu)構(gòu)建，確保了其在主流瀏覽器上的優(yōu)秀表現(xiàn)和良好的兼容性。該SDK對Chrome78+版本的瀏覽器提供了優(yōu)化支持，為用戶提供了流暢的開發(fā)和使用體驗(yàn)。集成與使用指南星火SDK的集成流程簡潔明了，開發(fā)者可以通過簡單的步驟將SDK融入現(xiàn)有的項(xiàng)目中。通過引入核心模塊sparkdash.core.esm.js，即可實(shí)現(xiàn)websocket的建立和消息的雙向通信。在Vue.js3框架下，通過引入sparkdash.runtime.vue.esm.js，開發(fā)者可以輕松地集成豐富的交互組件，實(shí)現(xiàn)高效的輸入輸出交互。安全性與隱私保護(hù)星火SDK高度重視用戶數(shù)據(jù)的安全性和隱私保護(hù)。采用嚴(yán)格的簽名計(jì)算和認(rèn)證機(jī)制，確保了接口調(diào)用的安全性。通過服務(wù)端生成并下發(fā)token，SDK在每次請求中驗(yàn)證身份，保障了數(shù)據(jù)傳輸?shù)陌踩院陀脩粜畔⒌谋Ｃ苄?。瀏覽器插件插件概述瀏覽器插件是為了進(jìn)一步增強(qiáng)星火生成式智慧駕駛艙產(chǎn)品的易用性和可訪問性而設(shè)計(jì)的配套工具。用戶安裝此插件后，無需打開駕駛艙平臺的網(wǎng)站，便能在瀏覽器環(huán)境中直接使用駕駛艙的核心交互功能。這包括但不限于虛擬人展示、超擬人合成朗讀、語音交互問答、數(shù)據(jù)可視化與總結(jié)、知識庫問答以及多媒體內(nèi)容展示、歷史聊天記錄查看等。此插件的引入顯著提升了用戶體驗(yàn)，尤其是在內(nèi)網(wǎng)環(huán)境下，用戶可以無需擔(dān)心瀏覽器同源策略的限制，實(shí)現(xiàn)駕駛艙功能的原生集成和語音調(diào)度模擬點(diǎn)擊。兼容性星火生成式駕駛艙瀏覽器插件支持Chrome78+版本的瀏覽器，確保了在主流的瀏覽器環(huán)境下都能提供穩(wěn)定和流暢的使用體驗(yàn)。功能特點(diǎn)星火生成式駕駛艙瀏覽器插件提供了一系列豐富的功能，包括：虛擬人展示：通過插件，用戶可以在瀏覽器中直接與虛擬數(shù)字人進(jìn)行互動，享受逼真的交互體驗(yàn)。超擬人合成朗讀：插件支持將文本信息轉(zhuǎn)化為自然流暢的語音朗讀，提升信息獲取的便捷性。語音交互問答：用戶可以直接通過語音與駕駛艙平臺進(jìn)行交流，實(shí)現(xiàn)快速的信息查詢和任務(wù)執(zhí)行。數(shù)據(jù)可視化與總結(jié)：插件能夠?qū)?fù)雜的數(shù)據(jù)信息以直觀的圖表形式展現(xiàn)，幫助用戶更好地理解和分析數(shù)據(jù)。知識庫問答及多媒體展示：集成知識庫，提供問答功能，并支持圖片和視頻等多媒體內(nèi)容的展示。歷史聊天記錄查看：用戶可以回顧與駕駛艙的交互歷史，便于追蹤和復(fù)盤之前的會話內(nèi)容。安裝和配置用戶可以通過以下步驟輕松獲取和安裝星火生成式駕駛艙瀏覽器插件：在星火生成式駕駛艙平臺下載插件安裝包。在Chrome瀏覽器中進(jìn)入管理擴(kuò)展程序的界面，打開開發(fā)者模式。選擇“已解壓的擴(kuò)展程序”，并加載星火SDK的安裝包，完成插件的安裝。另外，用戶也可以直接訪問Chrome的擴(kuò)展程序商店，搜索星火生成式駕駛艙插件，進(jìn)行下載和安裝。安裝完成后，用戶需要使用星火生成式駕駛艙賬號進(jìn)行登錄，并選擇相應(yīng)的應(yīng)用以開啟駕駛艙功能。隨后，駕駛艙的組件將在瀏覽器頁面上展示，用戶即可開始進(jìn)行交互操作。未來發(fā)展隨著技術(shù)的不斷進(jìn)步和用戶需求的發(fā)展，星火生成式駕駛艙瀏覽器插件將持續(xù)進(jìn)行功能升級和優(yōu)化。未來的發(fā)展方向包括但不限于：中端用戶屏幕使用方式：提供更加直觀的對話面板，優(yōu)化文字交流的體驗(yàn)。功能擴(kuò)展：根據(jù)用戶反饋和市場趨勢，不斷增加新的功能模塊，以滿足用戶的多樣化需求。性能優(yōu)化：持續(xù)改進(jìn)插件的性能，確保在各種網(wǎng)絡(luò)環(huán)境下都能提供穩(wěn)定流暢的使用體驗(yàn)。用戶體驗(yàn)提升：通過用戶研究和反饋收集，不斷優(yōu)化插件的交互設(shè)計(jì)，使其更加人性化和易用。成功案例北京能源集團(tuán)有限責(zé)任公司經(jīng)管駕駛艙客戶需求領(lǐng)導(dǎo)隨機(jī)提問需要即時回答：針對重點(diǎn)問題，決策者會進(jìn)行追問，匯報(bào)人沒有提前準(zhǔn)備時被問到詳細(xì)數(shù)據(jù)時匯報(bào)人答不上來，給不了數(shù)據(jù)，被問責(zé)。領(lǐng)導(dǎo)決策問題時需豐富準(zhǔn)確數(shù)據(jù)支撐：經(jīng)營會上針對某個事項(xiàng)大家集思廣益，產(chǎn)生了新的想法和方案后，想要論證卻發(fā)現(xiàn)缺少數(shù)據(jù)支撐，只能準(zhǔn)備好數(shù)據(jù)二次再議；數(shù)據(jù)準(zhǔn)備好了但是已經(jīng)過去一周，領(lǐng)導(dǎo)關(guān)注度減弱、重心偏移，導(dǎo)致決策擱置。數(shù)據(jù)開發(fā)周期長：領(lǐng)導(dǎo)關(guān)注的重點(diǎn)指標(biāo)和數(shù)據(jù)，需專業(yè)人員進(jìn)行開發(fā)，開發(fā)周期長，領(lǐng)導(dǎo)難以及時拿到所需數(shù)據(jù)應(yīng)用成效提升會議效率80%提升領(lǐng)導(dǎo)決策效率60%浙江省政協(xié)展廳升級客戶需求采用統(tǒng)一定制形象，IP新升級：根據(jù)不同來訪人員要求，定制不同的專屬虛擬人形象，提升科技感，解決人員不合適的問題。展廳大屏多樣化靈活掌控：對已有大屏審美疲勞，需對大屏進(jìn)行升級，用插件式工具和較低的成本讓老屏幕煥發(fā)新生機(jī)，提升交互體驗(yàn)多模態(tài)互動全面升級：打造新的互動模式，通過與虛擬人進(jìn)行問答式交互，解決講解資源不足，講解水平參差不齊等問題應(yīng)用成效7大場景互動200+直接問答7xN動態(tài)問答古井貢酒數(shù)字人品牌營銷客戶需求在新時代背景下，數(shù)字化轉(zhuǎn)型已成為白酒企業(yè)發(fā)展的必然趨勢，白酒營銷也必須緊跟時代步伐，推陳出新，助力白酒銷售。數(shù)字化轉(zhuǎn)型助力白酒行業(yè)發(fā)展：通過大數(shù)據(jù)、云計(jì)算、人工智能等技術(shù)手段，白酒企業(yè)可以實(shí)現(xiàn)對消費(fèi)者行為的精準(zhǔn)分析，獲知消費(fèi)者的消費(fèi)偏好。線上線下融合打造全渠道營銷體系，提升品牌傳播力度：在新零售的大潮下，積極拓展線上市場，通過線上營銷互動，宣傳企業(yè)形象，傳播品牌故事，提升品牌美譽(yù)度。綠色環(huán)保理念引領(lǐng)白酒行業(yè)新風(fēng)尚：綠色環(huán)保已經(jīng)成為白酒行業(yè)的一大發(fā)展趨勢，白酒營銷也積極擁抱綠色環(huán)保理念，減少塑料和紙張的使用，降低對環(huán)境的影響，實(shí)現(xiàn)可持續(xù)發(fā)展。應(yīng)用成效古井酒瓶包裝印刷的二維碼綜合掃碼率達(dá)到56%品牌故事播放率達(dá)到51%，播放時長均值2分鐘（總長4分鐘）地域特色行酒令、酒桌小故事活動參與率達(dá)到68%。永達(dá)傳媒營銷標(biāo)準(zhǔn)化客戶需求提升銷售講解水平：在客戶獲取與溝通環(huán)節(jié)，銷售人員在講解時銷售話術(shù)不統(tǒng)一、可能存在內(nèi)容遺漏、存在風(fēng)險(xiǎn)內(nèi)容等問題；在與客戶交流過程中，需要捕獲客戶真實(shí)需求；在面對客戶提問時，需要實(shí)現(xiàn)秒級輸出。提升媒體展示效果：銷售人員在與客戶展示資源時，通過產(chǎn)品手冊或案例圖片等傳統(tǒng)方式，效果不夠直觀，無法有效吸引客戶，客戶體驗(yàn)和營銷效果不佳。提升銷控?cái)?shù)據(jù)及時率：銷控狀態(tài)線下管理、手工更新，銷售團(tuán)隊(duì)獲取信息不及時，影響合同簽訂效率。應(yīng)用成效以平板為載體的數(shù)字員工，實(shí)現(xiàn)銷售業(yè)務(wù)的標(biāo)準(zhǔn)化、統(tǒng)一化、智能化根據(jù)客戶畫像，提供個性化服務(wù)，高效管理客戶關(guān)系產(chǎn)出客戶需求和市場趨勢，優(yōu)化銷售決策及產(chǎn)品定位華夏廣電導(dǎo)游一體機(jī)客戶需求2023年上半年，國內(nèi)旅游總?cè)舜芜_(dá)到了23.84億，同期相比增加了9.29億，同比增長率為63.9%，面對后疫情時代的文旅消費(fèi)井噴式增長，華夏廣電對交互產(chǎn)品有更高的要求，需要深度文化體驗(yàn)、塑造品牌形象、滿足多樣化需求。應(yīng)用成效星火生成式駕駛艙，自然語言全域知識交互透明顯示屏，展示方式更通透技術(shù)支持部署要求私有化部署星火生成式智慧駕駛艙需要考慮硬件資源、軟件環(huán)境以及外部依賴服務(wù)。以下是平臺的詳細(xì)部署要求，旨在幫助用戶順利部署和運(yùn)行整個系統(tǒng)。硬件和軟件環(huán)境要求后端服務(wù)：建議配置為CPU4核、內(nèi)存16G、硬盤500G，用于部署駕駛艙后臺管理服務(wù)和數(shù)據(jù)分析服務(wù)。至少需要1臺服務(wù)器以單實(shí)例部署，推薦2臺服務(wù)器以高可用性部署。前端頁面：建議配置為CPU4核、內(nèi)存8G、硬盤200G，用于部署駕駛艙的前端頁面。至少需要1臺服務(wù)器。反向代理服務(wù)器Nginx：建議配置為CPU4核、內(nèi)存8G、硬盤200G，用于處理前端頁面的請求。至少需要1臺服務(wù)器。數(shù)據(jù)庫和存儲服務(wù)：建議配置為CPU16核、內(nèi)存32G、硬盤500G，用于部署MySQL、Redis、Elasticsearch和MinIO等服務(wù)。數(shù)據(jù)庫服務(wù)推薦一主一從配置以確保數(shù)據(jù)安全和高可用性。Docker和AI模型服務(wù)：建議配置為CPU32核、內(nèi)存64G、硬盤500G、顯卡T4單卡，用于提供意圖匹配等功能。顯卡非必選，但可以顯著提高處理效率。服務(wù)部署清單見下表。序號服務(wù)名稱推薦配置最低配置備注操作系統(tǒng)1駕駛艙后臺管理服務(wù)

駕駛艙數(shù)據(jù)分析服務(wù)

反向代理服務(wù)器Nginx

前端頁面CPU：4核

內(nèi)存：16G

硬盤：500GCPU：4核

內(nèi)存：8G

硬盤：200G用于部署駕駛艙前后端服務(wù)、nginx等服務(wù)，后端服務(wù)集群部署Centos7+(推薦)/Ubuntu-22.04+/麒麟v102駕駛艙后臺管理服務(wù)

駕駛艙數(shù)據(jù)分析服務(wù)CPU：4核

內(nèi)存：16G

硬盤：500G/駕駛艙后端服務(wù)集群部署Centos7+(推薦)/Ubuntu-22.04+/麒麟v103MySQLRedis

Elasticsearch

MinIOCPU：16核

內(nèi)存：32G

硬盤：500GCPU：16核

內(nèi)存：32G

硬盤：200G數(shù)據(jù)庫、文件存儲、文本檢索、分部署緩存等服務(wù)部署Centos7+(推薦)/Ubuntu-22.04+/麒麟v104Docker

語義匹配模型

向量數(shù)據(jù)庫CPU：32核

內(nèi)存：64G

硬盤：500G

顯卡：T4單卡CPU：16核

內(nèi)存：32G

硬盤：200G提供意圖匹配等功能；顯卡非必選，可提高意圖識別效率。Ubuntu-22.04+(推薦)/麒麟v10備注：部署過程中需要連接到公網(wǎng)以下載必要的資源，或者提供內(nèi)網(wǎng)鏡像源地址。外部依賴服務(wù)訊飛星火大模型服務(wù)：提供邏輯推理和交互功能，是系統(tǒng)的核心組件。可以私有化部署，且為必選服務(wù)。訊飛星火文檔問答服務(wù)：提供知識問答功能，可私有化部署，為可選服務(wù)。訊飛虛擬人服務(wù)：提供虛擬人形象和語音合成功能，可私有化部署，為可選服務(wù)。訊飛實(shí)時語音聽寫服務(wù)：將語音轉(zhuǎn)換為文字輸入，可私有化部署，為可選服務(wù)。訊飛實(shí)時語音合成服務(wù)：在沒有虛擬人的情況下提供語音播報(bào)功能，可私有化部署，為可選服務(wù)。訊飛AIUI服務(wù)：支持硬件配套的語音轉(zhuǎn)寫功能，可私有化部署，為可選服務(wù)。安全性和合規(guī)性要求在實(shí)施星火生成式智慧駕駛艙平臺時，安全性和合規(guī)性是至關(guān)重要的考慮因素。我們的安全策略包括接口簽名算法鑒權(quán)訪問，確保所有接口調(diào)用都經(jīng)過嚴(yán)格的身份驗(yàn)證。此外，我們承諾數(shù)據(jù)不出庫，保障用戶數(shù)據(jù)的隱私和安全。對于大模型服務(wù)，我們支持私有化部署，進(jìn)一步增強(qiáng)數(shù)據(jù)安全性。網(wǎng)絡(luò)和基礎(chǔ)設(shè)施要求為了確保星火生成式智慧駕駛艙平臺的性能和穩(wěn)定性，我們建議部署在具備50M以上專線的網(wǎng)絡(luò)環(huán)境中，這將有效保障虛擬數(shù)字人的流暢推流。至于基礎(chǔ)設(shè)施，我們提供靈活的選擇，支持云服務(wù)和物理服務(wù)器部署，用戶可以根據(jù)自身需求和資源情況選擇最合適的部署方式。部署工具和自動化我們提供全面的自動化腳本，包括服務(wù)部署自動化腳本和數(shù)據(jù)庫初始化自動腳本，以簡化部署流程并減少人為錯誤。此外，所有日志均留存在磁盤中，便于進(jìn)行系統(tǒng)監(jiān)控和問題排查。我們還將介紹如何設(shè)置和使用監(jiān)控工具來跟蹤系統(tǒng)性能和健康狀況，確保系統(tǒng)的穩(wěn)定運(yùn)行。數(shù)據(jù)遷移和備份數(shù)據(jù)是企業(yè)寶貴的資產(chǎn)，因此我們提供定期數(shù)據(jù)庫備份策略，確保數(shù)據(jù)的安全性和可恢復(fù)性。我們建議用戶根據(jù)數(shù)據(jù)的重要性和變更頻率，制定合適的備份計(jì)劃