汪源-个人数字记忆：实践、思考与挑战.pdf

1、个人数字记忆实践、思考、挑战汪源 久痕科技有限公司创始人&CEOwww.remio.ai自我介绍网易集团副总裁、杭州研究院（集团唯一的创新业务孵化器）执行院长、技术委员会主席参与孵化网易云音乐、云课堂、严选、云阅读、Lofter等C端业务，合并营收近200亿，云音乐和云课堂（与有道合并）独立上市负责孵化易盾、有数、轻舟、CodeWave等政企业务浙江大学计算机本科、博士创立久痕科技，以“让知识工作更轻松高效”为使命，研发AI办公助手产品remio1997-20062006-20242024.6冷技术热思考Ivan Zhao的文章讲起About remio AI Assistant Powere

2、d by Your Experience信息自动捕获第一个自动保存所有访问过的网页内容的产品。自动索引用户指定目录下的所有文档，无限量免费录音和转写，实时同步聊天数据（Slack）。智能问答AgentAsk remio成为您随时可以求助的工作伙伴，能够从您的整个知识库中获得即时、可靠的答案，并提供精确的引用。它会从您的过往数据中学习您的思路和经验，提供更个性化的答案。隐私保护采用本地优先架构，所有用户数据和索引都存储在用户本地电脑上，不上传云端。仅在使用AI问答等功能时发送相关信息给LLM，用户数据永不用于AI训练。上下文工程决定AI应用的能力上限在正确的时间、以正确的格式向大模型精准“投喂”

3、完成任务所需的一切信息和工具仅有提示词嘿，请问你明天有空简单碰个头吗？感谢你的消息，我明天可以。请问你想约在什么时间。+上下文 CONTEXT日历信息：显示你全天都排满了与此人的过去邮件：判断使用非正式语气联系人列表：识别出对方是重要合作伙伴工具：使用email或其他工具会直接回复嘿，请问你明天有空简单碰个头吗？嘿，Jim！我明天日程完全排满了，会议一个接一个。周四上午我有空，你看方便吗？邀请已经发给你了，看按这个时间行不行哈包含上下文做好上下文工程，让办公Agent也拥有自己的“代码仓库”AI Coding Agent强大的编程助手完整的代码仓库AI AgentAI Working Part

4、ner智能的工作助理完整的知识库AI Agent巨头的软肋互联网巨头办公协作巨头大模型巨头都想要用户数据 互联网：商业模式（广告、平台交易）大模型：改进模型 办公协作：在线、协同remio的策略：不碰用户数据，帮用户整好数据、用好数据放心低成本便利文档、笔记（如Apple Notes、Obsidian）、网页内容实时同步，存量资料一键入库，零成本启动存储、索引、输入侧模型（解析、检索、ASR等）仅消耗端侧算力，仅针对内容产出收费，让产品价值与使用成本线性匹配用户放心，企业放心怎么获取上下文在线资料本地文件会议聊天消息邮件SaaS软件笔记在线资料为什么需要保存访问过的在线资料 有很多资料搜不到（

5、公众号文章、企业文档等）访问过的资料都是用户选取过的如何保存访问过的在线资料 HTML正文智能抽取（基础算法）基于官网API（YouTube、Google Doc）拦截下载数据包（PDF）动态网页特殊处理（ChatGPT等）重点网站针对性处理（Twitter私信等）参数去重处理 过滤：无意义（注册登录等）、内容过多（信息流等）本地文件为什么需要实时解析本地文件 需要的时候再上传文档需要查找、等待解析处理 很多时候自己也不知道有用的文档在哪如何实时解析本地文件 实时监测文件变动：MacOS API 版面分析：PP-DocLayout 标题层级分析：自研模型 文字识别：苹果原生OCR 性能优化：使

6、用NPU计算将版面分析速度提高10倍录音与音频转写：无限量免费、私密本地模型 无限量免费的录音与音频转写 私密性最好 虽然转录效果较云端顶级模型有一定差距，但经过摘要等后处理结果几乎没有差距模型选型SenseVoiceSmall Whisper_large_v3_turboParakeet 50加速比 中文识别效果好 支持英文和日韩 100倍加速比 英文识别结果全且原始（包含嗯啊等语气词）支持25种欧美语言妥善组织上下文妥善组织上下文用户案例（1）用户案例（2）挑战：内容表达