小布记忆：全模态碎片化内容的理解与智能整理实践.pdf

1、小布记忆小布记忆全模态碎片化内容的理解与智能整理实践全模态碎片化内容的理解与智能整理实践演讲人：王闯闯OPPO /高级算法工程师目录目录010203040501 01 问题与背景问题与背景02 02 记记 全模态理解全模态理解03 03 管管 记忆整理与自进记忆整理与自进化化04 04 用用 记忆消费记忆消费05 05 工程实践与效果验证工程实践与效果验证0101问题与背景问题与背景碎片化记忆的多模态挑战用户每天都在产生大量碎片化内容用户每天都在产生大量碎片化内容01/01/问题与背景问题与背景三大核心难点三大核心难点：从输入到结构化的鸿沟从输入到结构化的鸿沟01/01/问题与背景问题与背景整

2、体架构整体架构：记记-管管-用用 +记忆分层记忆分层 L0L3 L0L30202记记 全模态理解全模态理解碎片(L0)结构化记忆单元(L1)多入口接入，统一记忆出口多入口接入，统一记忆出口02/02/记记 全模态理解全模态理解用户触达入口分散，后端需要统一抽象的记忆单元多入口接入，统一记忆出口多入口接入，统一记忆出口02/02/记记 全模态理解全模态理解一键闪记一键闪记端云协同整体架构端云协同整体架构02/02/记记 全模态理解全模态理解端侧引擎核心：为什么是自研端侧引擎核心：为什么是自研 AndesVL AndesVL02/02/记记 全模态理解全模态理解 小结小结端侧引擎端侧引擎：Ande

3、sVL AndesVL 模型架构模型架构02/02/记记 全模态理解全模态理解端云任务分流：边界划分端云任务分流：边界划分逻辑逻辑02/02/记记 全模态理解全模态理解端侧化解决方案端侧化解决方案：部署部署+芯片协同芯片协同+应用算法应用算法02/02/记记 全模态理解全模态理解 小结小结小布记忆小布记忆 App App 效果展示效果展示02/02/记记 全模态理解全模态理解0303管管 记忆整理与自进化记忆整理与自进化RL 记忆管理+agentic RAG（L1 L2）RL RL 记忆管理智能体记忆管理智能体：记忆的遗忘记忆的遗忘 更新更新 去重去重 增删改查增删改查03/03/管管 智能整

4、理智能整理自进化自进化：policy policy tools tools 协同演化协同演化03/03/管管 智能整理智能整理关联与归纳统一：关联与归纳统一：agenticagentic RAG/plan-execute RAG/plan-execute 智能体智能体03/03/管管 智能整理智能整理合集应用合集应用 Agent Agent：按内容风格与用户指令调用工具：按内容风格与用户指令调用工具03/03/管管 智能整理智能整理效果指标效果指标：三类三类 Agent Agent 的量化结果的量化结果03/03/管管 智能整理智能整理 小结小结0404用用 记忆消费记忆消费长期用户画像 L3

5、 与记忆消费闭环用用：长期用户画像长期用户画像 L3 L3 与记忆消费与记忆消费04/04/用用 记忆消费记忆消费主动服务示例主动服务示例：记忆驱动的主动价值记忆驱动的主动价值04/04/用用 记忆消费记忆消费0505工程实践与效果验证工程实践与效果验证流程化算法开发+自动化评测流程化算法开发工作流流程化算法开发工作流05/05/工程实践与效果验证工程实践与效果验证自动化评测：自动化评测：LLM-as-a-Judge+Badcase LLM-as-a-Judge+Badcase 闭环闭环05/05/工程实践工程实践 小结小结整体回顾整体回顾：从从问题问题到到解法解法总结总结整体回顾整体回顾：从从问题问题到到解法解法总结总结整体回顾整体回顾：从从问题问题到到解法解法总结总结案例复盘：踩坑点案例复盘：踩坑点 与与 重做思考重做思考总结总结 案例复盘案例复盘THANKSTHANKS探索探索 Agent Agent 记忆记忆 边界边界Explore the Limits of On-device Memory