目錄01構(gòu)筑社區(qū)力02搜索推薦融合03多模態(tài)的挑戰(zhàn)04LLM的機(jī)會(huì)構(gòu)筑社區(qū)力用戶畫像：追求對(duì)個(gè)人/家庭有實(shí)際價(jià)值的內(nèi)容用戶共性特點(diǎn)：購(gòu)物理性、注重品質(zhì)、有追求但不盲目垂類品類vv占比：時(shí)尚等內(nèi)容占比最高觸發(fā)/使用場(chǎng)景：手機(jī)信息時(shí)+空閑無(wú)聊時(shí)間時(shí)其他：陌生人互動(dòng)+分享屬性內(nèi)容和生活方式持續(xù)擴(kuò)圈，2億人的生活經(jīng)驗(yàn)都在小紅書2022經(jīng)過(guò)近11年的累計(jì)，小紅書特有

的真實(shí)、向上、多元的社區(qū)氛圍，不斷吸引著越來(lái)越多的伙伴，探索著美好生活的更多可能性NOW2020.07探索創(chuàng)建視頻化內(nèi)容社區(qū)，完成從圖文到視頻的轉(zhuǎn)型，現(xiàn)在視頻已成為小紅書重要內(nèi)容載體2021小紅書月活躍用戶數(shù)已經(jīng)超過(guò)2億，其中70%用戶是

90后，并持續(xù)快速增長(zhǎng)2023董潔直播在小紅書獲得成功，買手電商蓬勃發(fā)展。商業(yè)大會(huì)發(fā)布的廣告模式“種草就來(lái)小紅書”廣闊而溫暖的世界獨(dú)特種草模式生活方式電商社區(qū)電商廣告收藏評(píng)論彈幕寫筆記點(diǎn)擊閱讀播放點(diǎn)贊

搜索和推薦關(guān)系思考

關(guān)鍵字搜索語(yǔ)義搜索多模態(tài)搜索搜索個(gè)性化對(duì)話式搜索bot內(nèi)容協(xié)同行為協(xié)同深度網(wǎng)絡(luò)推薦交互式推薦生成式推薦排序互動(dòng)生成普通人的視角，過(guò)來(lái)人的經(jīng)驗(yàn)millions

ofmonthly

usersmillions

of

searchsessionsmillions

of

new

posts

every

day有用真實(shí)性用戶對(duì)小紅書搜索的預(yù)期實(shí)時(shí)性個(gè)性化多樣性Growing

Content

Pool生活方式類查詢多意圖模糊性強(qiáng)“火鍋”附近教程好奇查找附近的餐廳?如何在家吃火鍋?只是好奇，隨便看看?用戶意圖的模糊性FrequencyHeadTail大比例的長(zhǎng)尾查詢?cè)~長(zhǎng)尾查詢召回的準(zhǔn)確度問(wèn)題長(zhǎng)尾效應(yīng)多種數(shù)據(jù)格式（標(biāo)題、文本、標(biāo)簽、視頻、圖片、音樂(lè)、OCR、日志）多種筆記類型（圖文筆記、視頻筆記、商品筆記、直播筆記、音樂(lè)筆記)多模態(tài)數(shù)據(jù)???????????

User

Intent

AnalysisCandidate

RetrievalCoarse-grainedRankingRankingReRankAGGVector

RetrievalInverted

Index

RetrievalGraph

RetrievalLTRRelevanceCTRQualityBERTTextCNNQueryText(Word)Query

Text(Word/Char)MLPQuery/UserSparseFeatureAttentionWeighted

Feature

FusionQuery

+

User

TowerTextCNNNoteText(Word)Multi-modal Note

TextNote

Feature

(Word/Char)Note/AuthorSparse

FeatureAnchorQueryTextWeighted

Feature

FusionNote

TowerTextCNNTextCNNTextCNNQ1Q2User

HistoryQueriesQ3BERTFrozenPretrainedEmbeddingTextCNNMLPContrastive

Learning

(Relevance)Contrastive

Learning

(Engagement)Hard

Negative

SamplesClicked

vs.

Low

ranking

positionClicked

vs.

IrrelevantSimilarNoteMiningCosineContrastiveLearningCore-wordAnalysisContrastiveLearningCore

word

vs.

otherwordSimilar

Note

vs.RandomQuery

EmbeddingNote

Embedding????????????發(fā)現(xiàn)頁(yè)搜索作者頁(yè)其他域…SimilarityU2U做興趣探索工業(yè)界的多模態(tài)

OOTD｜秋季穿搭毛衣通勤真的太舒服了！秋天除了西裝和衛(wèi)衣，怎么能少了毛衣搭配呢。毛衣的搭配可以說(shuō)非常簡(jiǎn)單，穿上即可??家門那種。今天的搭配我以簡(jiǎn)單為主，并沒搭配配飾，反而一切從簡(jiǎn)～牛仔褲和百搭的板鞋搭配這種

以筆記搜筆記色系的毛衣再合適不過(guò)了，皮

帶選擇了和包包相近的顏色互相呼應(yīng)，黑色的皮帶也可以很好的把上下半身在視覺上分段，凸顯腿長(zhǎng)～-

OOTD毛衣：Randomevent褲子：PSO

Brand皮帶：Gucci鞋子：Excelsior包包：GROTTO以文本搜筆記Query詞：高達(dá)應(yīng)用Query推薦底紋圖&詞Query推薦底紋詞

應(yīng)用圖文筆記視頻筆記

??

多模態(tài)召回多模態(tài)相關(guān)性LLM的機(jī)會(huì)

recall@100recall@1krecall@1wBert0.33800.59730.8549CLIP0.55120.78140.9226NoteLLM0.72740.88840.9448NoteLLM-v20.80250.92310.9672

Recallrecall@50recall@100Bert50.7861.72QueryNoteLLM54.5266.05RelevanceAUC

on

DCGAUC

on

RELBert8079QueryNoteLLM83.5382.59

InternalDeveloperPlatform工具

開