AI驅(qū)動下?視頻場景創(chuàng)新崔?鵬?

騰訊云?視頻產(chǎn)品總監(jiān)?錄PART

1

AI+?頻實(shí)時互動PART

2

AI+視頻實(shí)時互動PART

3

AI+智能媒資新能?AI?頻實(shí)時互動AI語?助?、實(shí)時多語種翻譯，重構(gòu)?機(jī)與?際互動新體驗(yàn)01騰訊云城市峰會·無錫峰會新興媒體閉門專場GUI->

LUI語?交互以其與?類?然溝通?式的?度?致性，提供了?種更為直觀和低能耗的交互體驗(yàn)，?打字?本交互的使?門檻更?低延遲、?智能GPT-4o

是第?個實(shí)現(xiàn)端到端

voice-in,

voice-out

的?模型，低延遲、真實(shí)情感表達(dá)、很強(qiáng)的語義理解能?重新發(fā)明電話圍繞實(shí)時對話構(gòu)建的產(chǎn)品受到投資?青睞，利?AI定制特定類型的實(shí)時對話，更?效地提供上下?和價值Voice

Agent：下?代實(shí)時對話的新?向Voice

Agent

可能是今年最值得關(guān)注的?個?向，是下?代?機(jī)交互界?，多模態(tài)改變交互騰訊云城市峰會·無錫峰會新興媒體閉門專場AI實(shí)時對話賦能千?百業(yè)的創(chuàng)新實(shí)踐0102030405060708?模型/搜索：實(shí)時AI對話已經(jīng)成為標(biāo)配AI+游戲：AI陪玩、AI

NPC、AI隊友AI+泛娛樂：AI陪伴、語聊房助?AI+健康：問診助?、?理健康咨詢AI+教育：實(shí)時字幕、在線課堂助?AI+客服：智能客服、智能外呼AI+IoT：可穿戴設(shè)備、AI玩具AI+?作：招聘、實(shí)時翻譯騰訊云城市峰會·無錫峰會新興媒體閉門專場紅框內(nèi)客戶?定義騰訊側(cè)：客戶端和服務(wù)端的?體化集成?案，提供智能打斷、降噪能??？蛻魝?cè)：?定義?模型和TTS，接?到騰訊AI服務(wù)，保持業(yè)務(wù)靈活性。實(shí)現(xiàn)超低延遲的AI對話?視頻端到端延遲低于300ms，AI對話延遲低于1000ms。精準(zhǔn)的ASR識別?持多種語?，包括英語、西班?語、?語、韓語、中?以及23種??和130種國際語?。?兼容性?持多個平臺，兼容超過20,000種設(shè)備模型。第三?LLM和TTS?縫集成配置LLM和TTS服務(wù)的賬戶憑證，?縫集成到服務(wù)后臺。功能特點(diǎn)AI實(shí)時對話?案使?Tencent

RTC，結(jié)合第三?的?模型和TTS等，可以輕松創(chuàng)建?個媲美GPT-4o所演?的AI實(shí)時交互體驗(yàn)，應(yīng)?到業(yè)務(wù)場景內(nèi)。騰訊云城市峰會·無錫峰會新興媒體閉門專場對多模態(tài)的?持：當(dāng)?模型有了“眼睛”具有跨?本、?頻和視頻進(jìn)?實(shí)時推理的能?，可實(shí)現(xiàn)更?然的?機(jī)交互AI可以進(jìn)?流暢的實(shí)時視頻通話，?可以實(shí)時打斷AI通過?機(jī)的攝像頭與?互動，可通過視頻流理解對話當(dāng)前的環(huán)境（包括?物狀態(tài)/背景環(huán)境）場景很豐富，現(xiàn)在需要探索多模態(tài)能?對于AI解題、繪畫設(shè)計、?樂學(xué)習(xí)等需要視覺和聽覺才能進(jìn)?反饋指導(dǎo)的科?，?常關(guān)鍵騰訊云城市峰會·無錫峰會

新興媒體閉門專場AI線上實(shí)時翻譯：有?字到?字、語?到?字、語?到語?三種模式AI

驅(qū)動的實(shí)時翻譯字幕AI

實(shí)時語?翻譯多語?在線聊天?字→?字語?→?字語?→語?騰訊云城市峰會·無錫峰會

新興媒體閉門專場AI線下實(shí)時翻譯：?型跨國峰會、隨?翻譯、AI同聲傳譯等場景語?→?字語?→?字語?→語?隨?翻譯字幕AI

同聲傳譯?型跨國峰會騰訊云城市峰會·無錫峰會

新興媒體閉門專場AI實(shí)時翻譯解決?案：沉浸式的翻譯體驗(yàn)，端到端語?體驗(yàn)佳端到端語?體驗(yàn)佳沉浸式翻譯體驗(yàn)超低延遲與全球覆蓋AI降噪抓取精準(zhǔn)?聲?持多語種識別情感化TTS助?同聲傳譯AI+視頻實(shí)時互動打造沉浸式、游戲化的社交增長引擎02騰訊云城市峰會·無錫峰會

新興媒體閉門專場互動游戲+特效禮物將主播的實(shí)時?部與肢體動作轉(zhuǎn)化為游戲控制器，主播做動作的過程本?就極具節(jié)?效果，容易產(chǎn)?病毒式傳播的直播?段AI+美顏+?游戲：利??部表情或?勢結(jié)合直播?游戲玩法典型玩法游戲玩法例如，?戶/主播通過??進(jìn)?切?果，結(jié)合頭部移動控制?向，實(shí)現(xiàn)沉浸式互動玩法騰訊云城市峰會·無錫峰會

新興媒體閉門專場特效能?升級：256+?臉點(diǎn)位識別，底層能?對齊抖?、tiktok粒?特效貼紙2D貼紙3D貼紙?勢觸發(fā)貼紙表情觸發(fā)貼紙?部動作觸發(fā)貼紙背景分割貼紙頭發(fā)分割貼紙3D

頭套

?部識別觸發(fā)

?勢識別+粒?特效騰訊云城市峰會·無錫峰會新興媒體閉門專場beforeafterafterbeforeAI驅(qū)動體驗(yàn)升級：騰訊美顏特效SDK賦能互動游戲騰訊美顏特效SDK通過強(qiáng)化AI能?，優(yōu)化了?體點(diǎn)位識別的精準(zhǔn)度，?持識別300個以上的全?點(diǎn)位，以及42個?體?骼關(guān)鍵點(diǎn)復(fù)雜運(yùn)動場景下也能夠穩(wěn)定、精準(zhǔn)地識別出關(guān)鍵點(diǎn)位，確保美顏、美型、貼紙的貼合度更?，動作跟隨更穩(wěn)定?然。騰訊云城市峰會·無錫峰會新興媒體閉門專場掃碼體驗(yàn)新版Demo國內(nèi)海外AI+智能媒資新能?為每?秒內(nèi)容賦能，讓創(chuàng)意?產(chǎn)更?效03騰訊云城市峰會·無錫峰會新興媒體閉門專場最專業(yè)的媒體智能處理平臺智能字幕智能彈幕游戲打點(diǎn)隱私保護(hù)智能拆條智能封?智能擦除橫屏轉(zhuǎn)豎屏精彩剪輯語?識別語?翻譯?字識別物體識別?光時刻精彩瞬間智能摘要分段騰訊云城市峰會·無錫峰會新興媒體閉門專場?需代碼開發(fā)，控制臺配置好語種模板和編排，基于?件上傳觸發(fā)，?動?成視頻字幕?件?動?成字幕?件?動插?字幕軌道畫?壓制畫?提取可?動?成字幕并插?字幕軌道，可防?字幕視頻分開存儲導(dǎo)致字幕?件丟失，?戶可按需開啟基于?動?成的字幕?件，可?動轉(zhuǎn)碼壓制到視頻畫?，樣式、字體、字號、字體顏?、背景?均可?定義壓制基于視頻畫?原有字幕?動提取并?成字幕?件，?清重制進(jìn)???保護(hù)智能字幕-點(diǎn)播場景騰訊云城市峰會·無錫峰會新興媒體閉門專場智能擦除靜態(tài)擦除?動識別位置；定制識別?標(biāo)；多種檫除效果動態(tài)擦除?動?標(biāo)跟蹤；?動動態(tài)擦除騰訊云