【iOS 16隐藏更新：利用iPhone原深感摄像头为AirPods创建个性化空间音频】
本届WWDC22，苹果为iOS 16以及全新的iPadOS和macOS带来了很多更新；不过令人遗憾的是，关于音乐相关的更新却寥寥无几。
此前备受音乐爱好者瞩目的Apple Music classical（古典音乐版）独立 app并没有发布，而传说中搭载12 个摄像头、4K 显示屏的MR（混合现实）眼镜依然还是个传说。
不过，在本次iOS 16的更新中，我注意到苹果为AirPods的「空间音频」带来了一项优化升级。
在iOS 16中，AirPods的使用者可以利用iPhone的原深感摄像头来创建个性化的「空间音频档案」“Personalized Spatial Audio”，从而实现更准确和具有沉浸式的听觉体验（具体支持哪些型号的iPhone以及如何操作都没有讲）。
我们知道，空间音频功能的强大之处在于，它能够基于我们的头型和耳型的结构，利用算法来实现动态头部追踪，让声音环绕在你周围，为音乐和视频营造三维空间效果。这种感觉吧，就像是置身于音乐厅或剧场一般，沉浸感非常强。
目前，支持空间音频的苹果耳机包括AirPods Pro、AirPods 3、AirPods Max以及Beats Fit Pro。其中，早于2019年上市的AirPods Pro依然可以获得这项功能的更新，可见苹果对于老设备的友好度还是非常高的。
至于苹果这次对空间音频功能的升级，在听感上究竟能带来多大提升，还要等接下来iOS 16 beta版推出后再体验了。
本届WWDC22，苹果为iOS 16以及全新的iPadOS和macOS带来了很多更新；不过令人遗憾的是，关于音乐相关的更新却寥寥无几。
此前备受音乐爱好者瞩目的Apple Music classical（古典音乐版）独立 app并没有发布，而传说中搭载12 个摄像头、4K 显示屏的MR（混合现实）眼镜依然还是个传说。
不过，在本次iOS 16的更新中，我注意到苹果为AirPods的「空间音频」带来了一项优化升级。
在iOS 16中，AirPods的使用者可以利用iPhone的原深感摄像头来创建个性化的「空间音频档案」“Personalized Spatial Audio”，从而实现更准确和具有沉浸式的听觉体验（具体支持哪些型号的iPhone以及如何操作都没有讲）。
我们知道，空间音频功能的强大之处在于，它能够基于我们的头型和耳型的结构，利用算法来实现动态头部追踪，让声音环绕在你周围，为音乐和视频营造三维空间效果。这种感觉吧，就像是置身于音乐厅或剧场一般，沉浸感非常强。
目前，支持空间音频的苹果耳机包括AirPods Pro、AirPods 3、AirPods Max以及Beats Fit Pro。其中，早于2019年上市的AirPods Pro依然可以获得这项功能的更新，可见苹果对于老设备的友好度还是非常高的。
至于苹果这次对空间音频功能的升级，在听感上究竟能带来多大提升，还要等接下来iOS 16 beta版推出后再体验了。
The information 关于苹果 AR/VR 的独家，脱水之后仍然长达 2000 字：
- 2016 年，也就是苹果 VR 项目开发一年后，该团队给苹果董事会做了一个「非常早期的原型展示」，希望借此在苹果高层那里争取到更大的投资支持。
- 苹果董事会成员，包括前美国副总统 AI Gore、时任迪士尼 CEO Bob lger 和其他成员从一个房间走到另一个房间，使用 VR 的原型设备，其中一个小工具让房间内的桌子上出现了一只微型数字犀牛，随后犀牛变成了真犀牛大小的比例，周围的环境变成了茂密的森林。用户可以从查看周围物理世界的 AR 无缝过渡到更加身临其境的 VR，组合起来叫 MR。
- 一些原型是被临时拼凑的，运行微软的 Windows 系统，其他的原型是 HTC Vive 或其他 VR 头显改装的。其中一个非常重，需要一个「小型起重机」来支撑，这样董事会成员们「佩戴的时候就不会拉伤脖子」。
- 苹果董事会最终支持给予更多的研发资金，一个因素是苹果对 Facebook 在该领域的进展感到担忧。
- 技术挑战一直是该项目跳票的最大因素，过去苹果炸裂的新品，例如 iPhone 也是如此，但 iPhone 有 Steve Jobs 这样一位非常有影响力的高层推动投产。5 位消息人士表示，现任 CEO Tim Cook 虽然支持头显，但并没有像 Jobs 那样积极参与产品的开发。
- 例如，苹果 MR 项目团队办公地不在苹果总部，Cook 很少离开总部去拜访 MR 团队。因为缺少 Cook 的声望推动，代号为 N301 的头显很难与 Mac 和 iPhone 等其他产品争取人才和工程资源。
- 前苹果首席设计官 Jony lve 是另一个阻力，头显团队负责人 Mike Rockwell 努力争取内部各个团队的支持以加速开发的时候，制作 VR 头显的想法遭到了 lve 团队的反对，后者认为 VR 会让用户与外界隔绝，使用户与其他人疏远，VR 看起来不合时宜且缺乏实际用途。两位知情人士表示，苹果工业设计师不相信用户愿意长时间佩戴头显。
- 因为 lve 团队的反对，项目改变方向，在头显前增加摄像头，以便佩戴头显的用户可以看到周围的环境，但最终演化成在头显上增加外向屏幕的概念，屏幕可以向房间里其他人显示佩戴头显的人的眼睛和面部表情的视频画面……？
- 这一设计解决了 lve 团队对 VR 引起疏离的担忧，并允许不戴头显和戴头显的人进行交互和协作，该屏幕为 MicroLED，由苹果在硅谷总部附近的工厂研发，代号为 T429。
- 此外，早期展示的原型有两种规格，与 PC 连接的头显具有出色的画质和逼真的头像，而独立头显的头像更像是卡通人物。Mike 偏爱与 PC 连接的头显，他认为苹果高层不会接受独立头显的低画质和视觉效果，他错了。
- 一位知情人士透露，从项目早期开始，lve 就一直在支持独立头显的版本，苹果高层站在了 lve 一边。Mike 不得不基于独立的头显尝试去做出色的产品，这一选择对头显的跳票产生了深远的影响。
- MR 团队一直在努力平衡电池性能与寿命，同时尽量减少发热，以「避免用户在佩戴时被烫伤」。
- 3 位知情人士透露，苹果高层期望 AR 体验能远超 Facebook 等竞品在图形、身体跟踪和延迟——用户的动作和他们在显示屏上看到的内容的滞后——方面的体验，因为用户头部运动与头显内视角变化的延迟只要 0.x 秒都会引起恶心。
- 苹果内部对于目标用户的定义也存在分歧，有人认为 lve 推动苹果转向独立头显是错误的决策，这让头显从创意和专业人士的桌面级设备变成了消费者的便携式设备。反对派认为，苹果应该首先为专业人士开发一款产品，鼓励他们为头显制作内容，然后再为消费者开发产品。
- 另一个极大增加苹果头显技术挑战的设计决策是它的 14 个摄像头，这使它能够捕捉从外部世界的图像到面部表情和身体姿势的所有内容，苹果不得不研发代号为 Bora 的图像信号处理器来处理大量图像信息，但 Bora 和代号为 Staten 的头显主处理器一起工作时存在技术挑战，两个芯片的通信会增加延迟，这会让用户感到恶心。
- 4 位熟悉团队的人士表示，直到 2019 年之前，MR 团队的文化随心所欲，就像一家在苹果内部创业的公司，员工头脑风暴并尝试了可能永远不会投产的方案。
- 苹果最终找来了 1988 年加入苹果的老兵 Kim Vorrath 协助管理，Kim 要求各个团队为头显软件定义功能，并激励他们有更多的责任感，工程师被介绍了她在软件工程中用的一个概念，叫六周冲刺。
- 在 lve 从苹果离职后，他为苹果提供的咨询工作仍然涵盖头显，他经常被设计团队请来帮助推动设计部门在头显电池、相机布置和人体工程学方面的偏好——而非工程师的偏好，即使在他离职后，MR 团队的一些员工仍然需要从苹果总部到旧金山的 lve 家中，以获得他对设计更改的批准。
- 多年来，lve 一直在调整苹果头显的设计，他最近的偏好是将电池挂靠在头显旁边佩戴，而不是集成到头带中。
- 最后一个挑战是成本，这也是苹果任命 Dan Riccio 参与 MR 项目的主要原因之一。目前苹果头显的预期价格在 2000 - 3000 美元之间。
- 2021 年 1 月，John Ternus 接替 Dan 担任苹果硬件工程 SVP，而早在 20 年 3 月前后，Dan 已经将其领导的 iPhone 和大部分苹果主要产品的电气工程、产品设计和项目管理的监督移交给了John。
- Dan 由此得以过渡到监督一个「模糊」的新项目，即苹果 MR、定制屏幕和摄像头硬件的开发、测试工作。因为 MR 负责人 Mike 及其超过 1000 名工程师的团队进展很不顺利，苹果希望 Dan 的硬件专业知识可以加速 MR 的开发。
- 苹果原计划今年 6 月发布头显，但因为过热、摄像头和软件问题，已经推迟到年底或更晚，正式上市时间为 2023 年。
看完了怎么评价呢，就像 Apple Car 一样，技术挑战肯定存在，而且非常难搞，但技术绝不是根本问题。
- 2016 年，也就是苹果 VR 项目开发一年后，该团队给苹果董事会做了一个「非常早期的原型展示」，希望借此在苹果高层那里争取到更大的投资支持。
- 苹果董事会成员，包括前美国副总统 AI Gore、时任迪士尼 CEO Bob lger 和其他成员从一个房间走到另一个房间，使用 VR 的原型设备，其中一个小工具让房间内的桌子上出现了一只微型数字犀牛，随后犀牛变成了真犀牛大小的比例，周围的环境变成了茂密的森林。用户可以从查看周围物理世界的 AR 无缝过渡到更加身临其境的 VR，组合起来叫 MR。
- 一些原型是被临时拼凑的，运行微软的 Windows 系统，其他的原型是 HTC Vive 或其他 VR 头显改装的。其中一个非常重，需要一个「小型起重机」来支撑，这样董事会成员们「佩戴的时候就不会拉伤脖子」。
- 苹果董事会最终支持给予更多的研发资金，一个因素是苹果对 Facebook 在该领域的进展感到担忧。
- 技术挑战一直是该项目跳票的最大因素，过去苹果炸裂的新品，例如 iPhone 也是如此，但 iPhone 有 Steve Jobs 这样一位非常有影响力的高层推动投产。5 位消息人士表示，现任 CEO Tim Cook 虽然支持头显，但并没有像 Jobs 那样积极参与产品的开发。
- 例如，苹果 MR 项目团队办公地不在苹果总部，Cook 很少离开总部去拜访 MR 团队。因为缺少 Cook 的声望推动，代号为 N301 的头显很难与 Mac 和 iPhone 等其他产品争取人才和工程资源。
- 前苹果首席设计官 Jony lve 是另一个阻力，头显团队负责人 Mike Rockwell 努力争取内部各个团队的支持以加速开发的时候，制作 VR 头显的想法遭到了 lve 团队的反对，后者认为 VR 会让用户与外界隔绝，使用户与其他人疏远，VR 看起来不合时宜且缺乏实际用途。两位知情人士表示，苹果工业设计师不相信用户愿意长时间佩戴头显。
- 因为 lve 团队的反对，项目改变方向，在头显前增加摄像头，以便佩戴头显的用户可以看到周围的环境，但最终演化成在头显上增加外向屏幕的概念，屏幕可以向房间里其他人显示佩戴头显的人的眼睛和面部表情的视频画面……？
- 这一设计解决了 lve 团队对 VR 引起疏离的担忧，并允许不戴头显和戴头显的人进行交互和协作，该屏幕为 MicroLED，由苹果在硅谷总部附近的工厂研发，代号为 T429。
- 此外，早期展示的原型有两种规格，与 PC 连接的头显具有出色的画质和逼真的头像，而独立头显的头像更像是卡通人物。Mike 偏爱与 PC 连接的头显，他认为苹果高层不会接受独立头显的低画质和视觉效果，他错了。
- 一位知情人士透露，从项目早期开始，lve 就一直在支持独立头显的版本，苹果高层站在了 lve 一边。Mike 不得不基于独立的头显尝试去做出色的产品，这一选择对头显的跳票产生了深远的影响。
- MR 团队一直在努力平衡电池性能与寿命，同时尽量减少发热，以「避免用户在佩戴时被烫伤」。
- 3 位知情人士透露，苹果高层期望 AR 体验能远超 Facebook 等竞品在图形、身体跟踪和延迟——用户的动作和他们在显示屏上看到的内容的滞后——方面的体验，因为用户头部运动与头显内视角变化的延迟只要 0.x 秒都会引起恶心。
- 苹果内部对于目标用户的定义也存在分歧，有人认为 lve 推动苹果转向独立头显是错误的决策，这让头显从创意和专业人士的桌面级设备变成了消费者的便携式设备。反对派认为，苹果应该首先为专业人士开发一款产品，鼓励他们为头显制作内容，然后再为消费者开发产品。
- 另一个极大增加苹果头显技术挑战的设计决策是它的 14 个摄像头，这使它能够捕捉从外部世界的图像到面部表情和身体姿势的所有内容，苹果不得不研发代号为 Bora 的图像信号处理器来处理大量图像信息，但 Bora 和代号为 Staten 的头显主处理器一起工作时存在技术挑战，两个芯片的通信会增加延迟，这会让用户感到恶心。
- 4 位熟悉团队的人士表示，直到 2019 年之前，MR 团队的文化随心所欲，就像一家在苹果内部创业的公司，员工头脑风暴并尝试了可能永远不会投产的方案。
- 苹果最终找来了 1988 年加入苹果的老兵 Kim Vorrath 协助管理，Kim 要求各个团队为头显软件定义功能，并激励他们有更多的责任感，工程师被介绍了她在软件工程中用的一个概念，叫六周冲刺。
- 在 lve 从苹果离职后，他为苹果提供的咨询工作仍然涵盖头显，他经常被设计团队请来帮助推动设计部门在头显电池、相机布置和人体工程学方面的偏好——而非工程师的偏好，即使在他离职后，MR 团队的一些员工仍然需要从苹果总部到旧金山的 lve 家中，以获得他对设计更改的批准。
- 多年来，lve 一直在调整苹果头显的设计，他最近的偏好是将电池挂靠在头显旁边佩戴，而不是集成到头带中。
- 最后一个挑战是成本，这也是苹果任命 Dan Riccio 参与 MR 项目的主要原因之一。目前苹果头显的预期价格在 2000 - 3000 美元之间。
- 2021 年 1 月，John Ternus 接替 Dan 担任苹果硬件工程 SVP，而早在 20 年 3 月前后，Dan 已经将其领导的 iPhone 和大部分苹果主要产品的电气工程、产品设计和项目管理的监督移交给了John。
- Dan 由此得以过渡到监督一个「模糊」的新项目，即苹果 MR、定制屏幕和摄像头硬件的开发、测试工作。因为 MR 负责人 Mike 及其超过 1000 名工程师的团队进展很不顺利，苹果希望 Dan 的硬件专业知识可以加速 MR 的开发。
- 苹果原计划今年 6 月发布头显，但因为过热、摄像头和软件问题，已经推迟到年底或更晚，正式上市时间为 2023 年。
看完了怎么评价呢，就像 Apple Car 一样，技术挑战肯定存在，而且非常难搞，但技术绝不是根本问题。
【左手Meta右手苹果，玉晶光让郭明錤直呼内行】作为台湾光学双雄，大立光和玉晶光的竞争从未停止。
尽管综合素质略逊一筹，但玉晶光却先后获得了苹果和Meta的VR光学镜片代工订单。公开数据显示，玉晶光目前占据了Meta约50%的透镜订单。
早期郭明錤就发文称，玉晶光现为全球最大AR/VR 的Pancake/Fresnel透镜供应商，仅此一家同时取得Apple、Meta与Sony等一线品牌的Pancake/Fresnel透镜订单。
数位产业链人员对此消息持肯定态度，其中某VR镜头厂商对潮电智能眼镜表示，在与大立光的竞争中，玉晶光持续深耕技术，其进步非常之快。为获得更多VR订单甚至还在厦门成立新公司，以扩大生产规模。由此可见玉晶光对元宇宙异常重视。
称霸VR透镜市场
潮电智能眼镜了解到，目前玉晶光几乎为所有的VR大品牌供货透镜零部件。
透镜为VR设备最关键的部件之一，因为用户都会通过透镜看到屏幕。但VR透镜因生产难度高，故为高单价零部件。以Meta的 Quest 2为例，每部Quest 2的两片透镜ASP共10至12美元，成本约等于6–8颗手机的高阶7P镜头。
由此可以看出，玉晶光在VR市场获得了多大的利润。
尽管玉晶光面对此事态度低调，但该公司董事长陈天庆先前已表态，为分散风险，正积极开发VR／AR及车载镜头等产品，并预告“2022年VR镜头出货有望放量”，预计三、五年后，非手机镜头的营收占比可以拉高至三至四成，凸显玉晶光在VR／AR领域的企图心。
另一方面，玉晶光还拟斥资4500万美元（约新台币12.6亿元）在厦门直接投资新设立茂晶光电，因应集团永续发展、多角化经营及分工。外界解读玉晶光成立新公司即为VR/AR等应用布局暖身。
有趣的是，郭明錤早在今年4月就已经预测，大立光与玉晶光将与苹果合作，开发2Q22的AR/MR HMD摄像头，而玉晶光的事业关注焦点将在AR/MR所使用的菲涅尔透镜。其中，玉晶光将拿下苹果50%的VR摄像头模组订单。
郭明錤表示，AR/VR装置出货量与Pancake透镜规格在未来都仍有很大成长与升级空间，此有助于玉晶光长期成长。我们认为，玉晶光的Pancake/Fresnel透镜设计与生产优势，将可维持数年并带动该公司快速成长。
有望反超大立光
光学市场目前的老大仍旧是大立光，但是舜宇和玉晶光有望在别的领域弯道超车。当大立光还在寻找新成长动能时，玉晶光已经成为元宇宙Pancake/Fresnel镜头的全球领导厂商。
而且，在原来的手机竞争领域，玉晶光的技术也在进行改进。
玉晶光与大立光并列为iPhone镜头主力供应商，但从技术上说，玉晶光在2020年iPhone 12的超广角镜头送样时，表现就已优于大立光。虽然大立光在满足不同客户的各种规格镜头能力上仍是全球第一，但与苹果的合作订单证明，玉晶光的能力已逐渐提升且不逊于大立光。
玉晶光对技术的结构性改变不仅为苹果、索尼和Facebook等合作商的产品设备助力，同时因其技术进步减小了依靠单一合作方生产订单的风险。
另外，郭明錤还称，大立光目前并没有能力设计与生产头戴显示器的透镜。若大立光想进入头戴显示器的透镜市场，那么最快的时间为2023年。
尽管苹果正在积极研发AR/VR设备，但迄今尚未正式发布产品。所以玉晶光这笔生意究竟什么时候能盈利，还需要看品牌端的动向。
尽管综合素质略逊一筹，但玉晶光却先后获得了苹果和Meta的VR光学镜片代工订单。公开数据显示，玉晶光目前占据了Meta约50%的透镜订单。
早期郭明錤就发文称，玉晶光现为全球最大AR/VR 的Pancake/Fresnel透镜供应商，仅此一家同时取得Apple、Meta与Sony等一线品牌的Pancake/Fresnel透镜订单。
数位产业链人员对此消息持肯定态度，其中某VR镜头厂商对潮电智能眼镜表示，在与大立光的竞争中，玉晶光持续深耕技术，其进步非常之快。为获得更多VR订单甚至还在厦门成立新公司，以扩大生产规模。由此可见玉晶光对元宇宙异常重视。
称霸VR透镜市场
潮电智能眼镜了解到，目前玉晶光几乎为所有的VR大品牌供货透镜零部件。
透镜为VR设备最关键的部件之一，因为用户都会通过透镜看到屏幕。但VR透镜因生产难度高，故为高单价零部件。以Meta的 Quest 2为例，每部Quest 2的两片透镜ASP共10至12美元，成本约等于6–8颗手机的高阶7P镜头。
由此可以看出，玉晶光在VR市场获得了多大的利润。
尽管玉晶光面对此事态度低调，但该公司董事长陈天庆先前已表态，为分散风险，正积极开发VR／AR及车载镜头等产品，并预告“2022年VR镜头出货有望放量”，预计三、五年后，非手机镜头的营收占比可以拉高至三至四成，凸显玉晶光在VR／AR领域的企图心。
另一方面，玉晶光还拟斥资4500万美元（约新台币12.6亿元）在厦门直接投资新设立茂晶光电，因应集团永续发展、多角化经营及分工。外界解读玉晶光成立新公司即为VR/AR等应用布局暖身。
有趣的是，郭明錤早在今年4月就已经预测，大立光与玉晶光将与苹果合作，开发2Q22的AR/MR HMD摄像头，而玉晶光的事业关注焦点将在AR/MR所使用的菲涅尔透镜。其中，玉晶光将拿下苹果50%的VR摄像头模组订单。
郭明錤表示，AR/VR装置出货量与Pancake透镜规格在未来都仍有很大成长与升级空间，此有助于玉晶光长期成长。我们认为，玉晶光的Pancake/Fresnel透镜设计与生产优势，将可维持数年并带动该公司快速成长。
有望反超大立光
光学市场目前的老大仍旧是大立光，但是舜宇和玉晶光有望在别的领域弯道超车。当大立光还在寻找新成长动能时，玉晶光已经成为元宇宙Pancake/Fresnel镜头的全球领导厂商。
而且，在原来的手机竞争领域，玉晶光的技术也在进行改进。
玉晶光与大立光并列为iPhone镜头主力供应商，但从技术上说，玉晶光在2020年iPhone 12的超广角镜头送样时，表现就已优于大立光。虽然大立光在满足不同客户的各种规格镜头能力上仍是全球第一，但与苹果的合作订单证明，玉晶光的能力已逐渐提升且不逊于大立光。
玉晶光对技术的结构性改变不仅为苹果、索尼和Facebook等合作商的产品设备助力，同时因其技术进步减小了依靠单一合作方生产订单的风险。
另外，郭明錤还称，大立光目前并没有能力设计与生产头戴显示器的透镜。若大立光想进入头戴显示器的透镜市场，那么最快的时间为2023年。
尽管苹果正在积极研发AR/VR设备，但迄今尚未正式发布产品。所以玉晶光这笔生意究竟什么时候能盈利，还需要看品牌端的动向。
✋热门推荐