苹果揭秘 HomeView 识人流程:最多识别 6 人,原始影像不出安全隔离区
最多识别 6 人:苹果揭秘 HomeView 识人流程,只传“暗号”不传照片
家里放个摄像头总让人不踏实,苹果这篇把 HomeView 的处理流程拆得很细:人脸和声音都在安全隔离区里算完,系统只拿到“谁、在哪、把握多大”三个结果,照片录音根本不出去。做智能家居或关心隐私架构的值得看看原文。
苹果 11 月 12 日发布博文,公开了智能家居中枢 HomeView 的人员识别流程,同时介绍了面向 iPhone 18 Pro 和 iPhone 18 Pro Max 的 Secure Exclaves 安全隔离区架构。HomeView 不用 Face ID,而是通过 Center Stage 摄像头面部识别结合语音识别判断在场成员,最多支持 6 位用户,识别前提是用户持有一台支持 Apple Intelligence 的已注册设备且连接家庭 Wi-Fi、处于近期解锁状态。
技术流程分六步:设备启动时,人员识别隔离区从安全存储隔离区加载已登记的人脸、声音模型和身份数据库;摄像头隔离区检测人脸并标记边界框,只向主系统发送“可能有人”的通知,不含任何图像数据;音频经音频隔离区做异常检测和回声消除,同样不向主系统交出录音;随后神经网络引擎隔离区在隔离区专用内存中提取人脸和声纹特征,每个模型运行完毕即清除状态;编排服务将两类特征与身份数据库匹配,输出身份判断和置信度。
最终主系统只能收到三类元数据:人员标识、位置、置信度,原始音视频全程不共享给操作系统。识别结果用于支撑日历、信息、Apple Music 等依赖用户身份的功能,以及 iPhone 上的第三方音视频应用。这种“在隔离区内完成处理、只传出结果”的设计,为家庭常驻摄像头设备提供了一套隐私上更易被接受的方案。
最多识别 6 人:苹果揭秘 HomeView 识人流程,只传“暗号”不传照片
IT之家 11 月 12 日消息,苹果公司今天(11 月 12 日)发布新博文,在介绍适用于 iPhone 18 Pro 和 iPhone 18 Pro Max 的“安全隔离区”(Secure Exclaves)架构同时, 还公开其首款智能家居中枢 HomeView 的人员识别流程。 IT之家此前报道, 在家庭环境下,苹果 HomeView 最多识别 6 位用户,并依据识别结果提供个性化体验。 HomeView 不使用 Face ID,主要通过 Center Stage 摄像头进行面部识别,并结合语音识别判断在场的是哪位家庭成员。 前置条件方面,用户须拥有一台支持 Apple Intelligence 的“已注册个人设备”,该设备需连接至家庭 Wi-Fi,并且必须为最近解锁状态。满足条件后,HomeView 才能通过面部或语音识别该用户。 识别逻辑方面,HomeView 先通过 Center Stage 摄像头和语音先判断“谁可能在场”,再核对该用户的 iPhone 或 iPad 是否连接家庭 Wi-Fi、且近期解锁过。三者匹配后,系统才会将该成员与个性化体验关联起来。 在最新博文中,苹果详细披露了 HomeView 人员识别的内部流程,可以概括为摄像头、麦克风输入 → 隔离区内检测与处理 → 提取人脸、声音特征 → 匹配已登记身份 → 仅向系统返回“谁、在哪、把握多大”。 1. 启动时,先加载已登记用户资料 设备启动后,人员识别隔离区(Person Recognition Exclave)会从安全存储隔离区(Secure Exclaves)中,加载此前登记的人脸、声音识别模型及身份数据库,为后续匹配做好准备。 2. 摄像头发现人脸,但不把画面交给系统 摄像头拍摄的连续画面进入摄像头隔离区,由其检测人脸、标记人脸边界框,并将相关画面排队等待进一步处理。 此时,摄像头隔离区可以通知主系统中的后台进程:“可能有人出现了。”但通知中不包含图像数据,画面仍留在安全隔离区内。 3. 麦克风提供另一条判断线索 音频先经过音频隔离区,完成异常检测和回声消除等处理,再送入人员识别隔离区。 与摄像头类似,音频隔离区也能向主系统报告“可能有人在附近”,但不把音频交给主系统。也就是说,“检测到有人”与“允许系统取得录音”是两回事。 4. 神经网络引擎提取人脸和声音特征 人员识别隔离区随后请求神经网络引擎隔离区加载人脸、声纹模型,生成用于身份匹配的特征。 计算过程中,数据始终保存在隔离区控制的内存中,主操作系统无法访问。神经网络引擎使用隔离区专用的工作队列,每个模型完成运行后,还会清除相关状态。 5. 综合人脸与声音,判断具体是谁 人员识别隔离区中的编排服务,将生成的人脸、声音特征与已登记用户的身份数据库进行匹配,再综合两类识别结果,得出身份判断及其置信度。 这里的“置信度”,可以理解为系统对这次识别结果有多大把握,而不是简单输出一个不带可靠程度的姓名。6. 只把识别结果交给主系统 6、只把识别结果交给主系统 最终,主系统中的人员识别后台进程收到的是三类元数据: 人员标识:识别到的是哪位已登记用户。 位置:人员所处的位置。 置信度:系统对识别结果的把握程度。 在这一人员识别流程中,原始音视频不会共享给操作系统。系统再利用这些结果,支持日历、信息、Apple Music 等依赖用户身份的功能,以及来自用户 iPhone 的兼容第三方音视频应用。 参考 Secure Exclaves and Ambient Sensing
This report is categorized under AITOP's "Products" desk, focusing on US frontier AI labs and Silicon Valley technology leaders. Within our cross-regional analytical framework, it directly maps to AI developer toolchains, coding agents, and engineering workflows. Key entities and technical topics under continuous tracking include HomeView, Apple, Secure Exclaves, 智能家居.
Source attribution: curated from IT之家.