1. 新功能登场
最近有人多次遇到刷到好文章没收藏就关掉，或是文档不知被拖进哪个文件夹的情况。与此同时，OpenAI在GPT上推出了Computer History（计算机历史记录）的新功能。它就像装在电脑里的全景相机，通过调用macOS的辅助功能权限，记录用户在电脑上的动作，如点击、输入、按快捷键、App切换等。它不采集屏幕截图、录屏和音频，也无需「屏幕录制」权限，动作先暂存在Mac上，最多保留48小时，系统会定期整理成文字摘要保存为本地记忆，之后提问可从记忆里找相关线索。该功能默认关闭，需macOS版ChatGPT桌面端，以及Pro、Business或Enterprise订阅，符合条件可在设置里的「集成」页面开启。
2. 功能实测
开启后进行测试。对于早上刷到小红书有意思的帖子却没收藏的情况，GPT通过读取Computer History的近期活动，找到刷小红书的时间，再通过Chrome本地历史定位原帖，最后回看页面确认店名，过程中Computer History未保存帖子本身，只留下一串「面包屑」让Codex知道回哪页找答案。对于询问午休前在做什么的问题，它虽不知午休开始时间，但根据记录推测出午休时段，调取相关记忆还原出午休前稿子的进度，对照大纲判断完成和未完成部分及推进方向，还对比午休后稿件变化，给出可接着写的位置，像贴心的交接班记录，解决了工作被打断后难以找回状态的痛点。任务结束后，出现「Activity recall」的Skill建议，可保存「从近期活动里找东西」的方法。Computer History还可能通过观察用户操作识别重复路径，提醒用户将流程交给Agent。
3. 实测缺点
不过，实测也发现缺点。动作提取准确，但检索时间动辄五六分钟，容易让人遗忘要找的内容。而且免费版和Plus目前不能使用，需Pro及以上订阅解锁。另外，按官方说明，事件定期整理成摘要可能丢掉部分细节，模型整理和调用记忆时也可能作出错误推断。
4. 前人经验
OpenAI做的事，两年前就有人尝试。2024年5月，微软随Copilot+ PC公布Recall功能，官方演示很吸引人，可通过截取屏幕快照存进本地数据库并整理成搜索时间线来找回文件或网页位置，但安全研究员Alexander Hagenah开发的TotalRecall工具可在无管理员权限下定位并复制Recall数据库和截图，还能对截图文字做关键词搜索，导致Recall未广泛上线就被回炉。更早的Rewind和OpenAI上半年实验的Chronicle也采用截屏方式，存在隐私问题。Computer History的出现，意味着OpenAI放弃了连续截图的老路。
5. 价值与风险
从Recall、Rewind、Chronicle到Computer History，这些产品都尝试记录用户使用过程。对于AI厂商来说，用户做事过程和最终结果同样重要，传统Chatbot很少完整获取用户中间过程，而Computer History记录了用户使用工具和工作位置等过程数据，这或许是各大厂商争先推进Agent应用的重要原因。相比于之前产品，Computer History绕开获取用户屏幕内容，以更温和方式降低获取过程数据的代价，但仍有隐私风险。其隐私声明显示，事件本地采集，生成记忆时会将事件流发送到OpenAI服务器处理，虽处理后不保留事件也不用于训练，但记忆调用时相关内容会进入对话上下文。另外，记忆以纯文本Markdown文件保存在本地，网页恶意指令可能随事件流进入记忆形成提示注入，涉及聊天和私人信息时官方建议暂停采集。有人体验后会选择开启该功能，但只给必要工作应用和网站放行，遇到私人内容会暂停，认为在风险可控前提下，找回工作状态和发现重复流程的价值值得承担部分代价。那么，你会选择开启这个功能吗？
扫一扫
284
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
