BlackHalo logo
Published on

苹果个人知识图谱解剖:每台Mac都有的隐藏家庭成员分类器

Authors
  • Name
    infwhispers
    8rank.ai
苹果Mac电脑上显示个人知识图谱的示意图
头图来源: 来源页面

苹果个人知识图谱解剖:每台Mac都有的隐藏家庭成员分类器

本文深入分析了macOS自带的个人知识图谱系统,揭示了两款守护进程如何从联系人、日历、照片、信息等数据中构建用户关系网络。文章提供了开源工具iKnow,让用户能查看自己的知识图谱,并探讨了该机制被恶意利用的潜在风险。

背景:发现隐藏的守护进程

自macOS 13起,每台Mac都预装了一对守护进程,其唯一目的是构建一个关于用户及其周围人的知识图谱。这个图谱包含:你是谁、你认识谁、这些人之间的关系、你如何与他们沟通、你去哪里、和谁一起、做什么以及何时做。该图谱在设备上构建,通过交叉引用Mac上的几乎所有内容:联系人、日历、照片、信息、邮件、位置、屏幕使用时间以及大量行为信号。更重要的是,它作为一个可查询的存储库,供大语言模型(LLM)检索。

官方文档中唯一的描述来自man page(man 8 knowledgeconstructiond),内容极为简略:

  • 名称:knowledgeconstructiond – 分析设备内容以构建通用知识图谱的守护进程。
  • 描述:knowledgeconstructiond分析设备上的内容,帮助构建代表设备和用户的知识图谱。它与intelligenceplatformd协同工作,执行一些繁重的处理任务,以生成知识图谱。

知识图谱的内容

两个守护进程将工作成果保存在~/Library/IntelligencePlatform目录中,这是一个包含51个SQLite数据库的目录,以明文存储但受TCC完全磁盘访问保护。其中最有趣的是graph.db,它是一个三元组存储,使用181个实体类和278个谓词编写:每一行都是一个主体、一个谓词和一个客体。

  • 主体:一个实体(人、应用、事件)。
  • 客体:一个普通值(姓名、句柄、日期)或另一个实体(形成图的边)。
  • 谓词:系统认为两者之间存在的关系类型。

每个边还携带置信度、来源、来源重复项和时间戳。

数据来源

进入图谱的数据包括:

  • 联系人
  • 照片(人脸)
  • 日历(标题和参与者)
  • 家庭共享(包括每个成员的年龄)
  • 健康中的医疗ID紧急联系人
  • Siri建议在信息和邮件中找到的事件和联系人
  • 应用通过App Intents捐赠的人员
  • 已安装的应用

此外,在单独的表中存储:

  • 谁与谁出现在照片中
  • 通信日志(谁、何时、哪个应用、哪个方向;无内容),也从其他设备拉取
  • 位置和移动
  • 大量设备信号(屏幕锁定、Wi-Fi、蓝牙、充电、环境光,以及名为ContextualUnderstanding.PhysicalSocial的流,其记录格式按姓名、电话和电子邮件列出人员,每个都有开始和结束时间;它看起来像是谁在你身边的日志,尽管作者从未看到它被填充)

推断的内容

完整的181个实体类列表包括核心实体(如人、地点、事件、组织)、人物属性(如性别、职业、宗教、语言、政治派别)、活动类型(如工作、会议、饮食、旅行、锻炼)等。文章提供了一个表格,列出了每个类别的标签、组别以及作者是否找到了实现机制。

开源工具iKnow

为了帮助用户了解自己的知识图谱,作者开源了一个本地仪表盘iKnow,用户可以在自己的Mac上读取个人知识图谱的内容。

安全风险:隐私单点故障

文章最后探讨了攻击者可能如何利用这一机制。作者进行了一个思想实验,展示了如果这样的知识库落入错误之手,结合一个被“abliterated”(去除安全限制)的LLM,可能如何威胁用户。作者强调,这超出了苹果个人知识图谱的特定范围,普遍适用于任何此类个性化ML/助手系统(如Muse、Dot等)。

结论

苹果的个人知识图谱是一个强大但文档不足的系统,它从用户的设备数据中构建了一个详细的关系网络。虽然它旨在提供个性化AI体验,但也带来了显著的隐私和安全风险。用户可以通过iKnow工具查看自己的图谱,并应意识到这种“隐私单点故障”可能被利用的方式。

原标题:Every Mac comes with an (undocumented) family member classifier。 HN 原始发布时间:2026年11月7日星期六。当前记录为 846 分、449 条评论。

阅读原文 · 查看 HN 讨论