10问揭晓Vision Pro背后的秘密，苹果如何打响空间计算第一枪？ siyushenqi.com • 2025 年 8 月 14 日 上午12:36 • 行业动态 • 阅读 457 在接近40min中的采访中，苹果公司技术开发团队副总裁Mike Rockwell回答了有关Vision Pro中十大关键问题 近日，苹果公司技术开发团队副总裁Mike Rockwell登上了WWDC23脱口秀舞台，在和主持人John Gruber的交流中，他分享了Vision Pro研发过程一些有趣的内部细节，并对visionOS系统的优势给出了更细致的解答。 “我们想要打造一台空间计算电脑，你可以通过它直接进入一个新的空间。这是我们的初心。”Rockwell说道。他在接近40min中的采访中，回答了有关Vision Pro中十大关键问题，涉及到核心功能如Eyesight、空间视频亮点功能解析、交互技术背后的思考、虚实信息如何相融呈现等。 ▲从左到右分别为：Mac硬件负责人John Ternus、苹果副总裁Mike Rockwell、主持人John Gruber 作为Vision Pro头显项目的一把手， Rockwell可以称得上是“Vision Pro之父”。从Rockwell的分享中，我们了解到发布会上很多惊艳众人的技术，如空间视频、手势追踪、眼动追踪等，苹果早已深耕多年。苹果公司构建Vision Pro的基本准则是什么？Eyesight功能是如何实现的？苹果是如何布局虚实交互技术的？ 智东西在不违背原意的情况下，编译了Mike Rockwell的访谈记录： 问题1：你五年前开始讨论ARKit提到的内容和如今的产品似乎相差甚远。现在的你，是在构建一个新的平台吗？ Mike Rockwell：在我们开发产品的时候，会有些一些的设计准则。第一条就是我们希望它有用。我们想要打造一个非常有用的工具，而不是玩具。 这也导致了我们后续针对显示器等多方面做了全面的优化。现在，我们的显示器拥有超高清的分辨率，甚至可以渲染文本。 比如说，你正在看着一个Safari窗口，你不但可以直观、清晰地看到窗口里的文本信息。而且当你以不同的视角观看文本信息时，也同样清晰。这是因为，我们在3D系统上，一对一的渲染文本信息，甚至打造一种全新的字型渲染系统。 我们的第二条准则是，我们希望这款设备，不会将你与你身边的任何人隔离开来，而是将相隔较远的人们连接起来。 这也是我们打造两大关键技术Eyesight和Persona的主要原因。 当你佩戴设备时，你要如何让人们能够直观看到你的眼睛呢？借助苹果打造的Eyesight功能，你佩戴头显后，通过视频透视功能，让其他用户可以直接看到你的眼睛。 同时，我们还想通过一种新的方式，能够让不同地方的人一起工作。所有的这些设计准则结合在一起后，帮助我们打造真正与众不同的产品。 问题2：Eyesight方面，我想到了视差问题，比如说如果我坐在你的正前方，可能头显能够轻松在屏幕上“复现”你的眼睛。但是当我坐到你的侧边时，头显上的眼睛又该如何变化呢？ ▲Eyesight功能 Mike Rockwell：我们是为任何角度和你对视的人打造一个新的视图。我们在头显内部做了一个双层光栅显示器，第一层是弧形的光栅显示器，提供不同的光学数据。 我们并不是用AI模拟用户眨眼的画面，而是实时还原了你的眼睛动作。无论是眨眼、眯眼还是其他，头显都能及时同步。目前，Eyesight的画面渲染范围主要在眼睛周围，延迟基本为0。我希望，当人们看到它的时候，设备几乎是透明的，佩戴起来无压力。 问题3：尽管你多次提到打造头显时，不希望将人们分开，但是把头显戴在头上时，用户多少会感受到一定的隔离感。你是如何看待这一点的？ Mike Rockwell：我们做了很多事情，帮助头显成为一款可以连接人与人的设备。比如说，戴上头显后，用户能直接看到世界、Eyesight功能等。当你沉浸式投入数字世界的时候，数字内容可能成为你和他人连接的阻碍。但是如果你能看见他们或者他们能够看到你，这样的局面就会发生改变。 我们认为（头显）的作用是“添加一个世界（add a world）”，而不是将你带入一个新的世界。不仅如此，我们还想要在工作场景中实现协作办公的模式。比如说，当你戴着头盔的时候，很难用手机和他们进行Facetime。我们可以通过在头显中，创造一个你的形象，和他人进行远距离的互动。 问题4：我想过Vision Pro会有摄像头来记录周围事物，但我没想到Vision Pro能够拍出如此令人惊艳的视频。你们是怎么想到的？ Mike Rockwell：当我们构建这个头显的某天，我们有了打造空间照片/视频的想法，并做了一些尝试。我们发现空间视频能够让他们想和他们爱的人重温欢快时光的功能，察觉这一点后，我们决定把它放在产品中。 空间视频就像是时光机。当你拍下一些对家人来说特别的时刻，你通过播放视频或者查看照片不断“回到”那个时刻。想象一下，你的父母住在大洋彼岸。当你给孩子拍摄这样的视频给父母看，父母会觉得离亲人很近。 ▲空间视频功能 问题5：空间视频的呈现的方式真的很棒，当我用手指向视频回忆里的内容时，仿佛我正在和他们交互。你是如何看待虚实交互方式的？ Mike Rockwell：我们所做的一件事，就是要在物理世界上呈现数字世界的内容。特别是，如果你要想要两种世界的细节也能相互交互，现在我们的交互方式是通过手部捏动，或者注视某个图标完成交互。 一般来说，物理世界和虚拟世界交互时，我们很难数字内容放在自己的手中。尽管我们能画出它，画出一双手，但是在数字世界里，你不能“呈现”自己的双手。所以我们必须做出一个非常复杂的实时扣图算法来识别你的手在哪里，R1搜集信息扣出图片，然后将它通过视频和我们设计的内容相合成。 你可以将手放在数字内容前面并与之相互动。虽然你可能认为其看起来很简单，但是事实上，这背后发生了很多事情。 问题6:当我戴着头显回头和同事聊天后，转身回来，发现之前的窗口位置不会发生变化。你们是怎么保证画面稳定性的？ Mike Rockwell：它的稳定性是所有相机、传感器以及芯片的功劳。尤其是，我在visionOS部分曾谈到我们系统拥有实时模块。我们对系统进行了细致的调整，所以我们能够提供非常稳定的画面。 即便在40000米高空，我们仍能够保证画面稳定。这并不容易，因为飞机会转弯、前行等不断变动位置，系统上的IMU难以处理数据。在这里，我们做了一些“神秘”的事情，能让你随时去到你想去的地方。 问题7:头显的开机设置时需要测量眼睛的数据、手部的数据？ Mike Rockwell：对，我们的输入系统会涉及到多个设备，这些信息通过神经网络汇总，从而定制化用户信息。 在开机设置时，我们只要一部分信息。我们要做的第一件事就是“认识”你的手。因此，你要做的就是将举起双手几秒钟，我们就能够准确地识别输入你的双手信息。 至于我们的眼动追踪，十分精准。当你刚刚拿到产品时，我们需要对你做一次测试，只需要一次，后续使用的时候并不需要重新设置。整个设置的流程非常快。一旦我们有了这两项技能，我们就可以开始进入到界面。 我们的手部追踪功能十分精准，我们不想让你的双手紧握控制器。现在你可以通过双手来提高工作效率，你可以通过键盘输入，可以通过手机手表来控制信息。方式多样，选择自由。当你在使用Freeform时，你可以看到头显的手部追踪相当精准。 问题9：3499美元是一个非常“专业”的价格。但是头显能够适配足够专业的软件吗？比如说，像是Final Cut Pro和iPad适配，人们等待了很长时间。 Mike Rockwell：我们现在主要在做的几件事：一个是协作。我们所有人都在做某种形式的混合工作或者会在不同的地方工作，或者在路上工作。面对这些场景，Vision Pro能够带来超乎寻常的体验，因为你可以随时创造完美的工作环境。 我知道你们中的许多人都参与过Web 或者Zoom的电话会议。线上会议上，有人正在展现一些内容，但是当你看到其他人的时候，他们就像一个小方块，每个人都就像一个像素。 而Vision Pro则提供了一个巨大的屏幕，你可以以这种方式与人们一起工作。不仅如此，如果你使用像Freeform这类的协作应用程序，在Vision Pro中共享文件时，你可以让多个同事，同时处理文件，就像在同一个房间里一起工作一样。 另一个是，我们可以将Mac上的显示屏同步到Vision Pro中。假设你有一款旧款的Macbook Air，它的屏幕可能比较小，但当你戴上头显后，你可以拥有一个巨大4K屏幕。 并且，你还可以用Final Cut Pro，同时进行22个8K视频。你还可以在这里运行iPadOS和iOS软件，无需更改。 通过Vision Pro，你可以为你的生产力创造一个完美的空间。我们对消费者展现了一些场景。对那些试图借此完成工作的人来说，它是一款超级强大的设备。visionOS是一个非常强大的多应用程序、多任务操作系统，它将带来惊人的生产力和专业场景。 至于软件研发方面，为了让整个设备易于开发，我们为开发人员付出了相当大的努力。 如果你是一名iOS开发者，您进入Xcode，将目标设置为visionOS，然后构建空间应用，你就有了构建空间应用的起点。如果你是开始使用Unity的人，我们做了打造了一款便于开发者的工具编写应用程序。无论你用的是什么工具软件，都是在共享相同的3D空间。 问题10：真正地将Vision Pro和visionOS推向世界，感觉如何？ Mike Rockwell：苹果的许多研发团队为推出这款产品付出了许多努力，就像我们有芯片团队、软件工程团队、 Mac团队、我的团队和Siri团队。实际上，Vision Pro是所有工程团队一起开发的苹果产品。 ▲Vision Pro发布 Vision Pro头显发布，对我们来说是个很大的鼓舞，也是一场豪赌。我们构建了它，迫不及待地想要将它交给人们手中，对产品的反馈也感到非常兴奋。 结语：头显赛道的创新，苹果给出新回答 苹果的Vision Pro头显上，既反射出的近年来产业玩家共同推动的一些创新，如Pancake、视频透视等，也同样逃不脱产业玩家共同的难题，如续航、近视等。 但是，相较于当前赛道的多数产品，苹果通过多年深耕将每个创新点发挥到极致，在八年时间中，选择将每项功能打磨成自己想要的样子。比如说，苹果坚持通过“双面屏”的方式复原人脸、坚持要建立人与人之间的连接，不计代价。 Vision Pro头显，在我个人看来，会感受到惊喜，但不会感受到意外。 惊喜之处在于，苹果头显的显示屏的确解决了不少显示难题，效果反响较好。同时，苹果在Vision Pro头显的具体应用设计上，如空间视频拍摄、Persona功能都颇具看点。但整个产品设计还是和常见的VR头显类相似，并不如当年手机从功能机走向智能手机那般意外。 不过，头显届的“iPhone”才刚刚到，或许到了“iPhone 4”面世时，有更多的惊喜在等着我们。 相关阅读外贸展会后怎么跟进客户？72小时、7天、30天的完整SOP网易辟谣：王怡未离职，部分营销团队并入事业部OpenAI内部信"摊牌"：微软联盟已成枷锁，将押注亚马逊合作突围哔哩哔哩首次全年盈利、友谊时光靠女性向小游戏扬眉吐气丨9家游戏公司财报深度拆解群核科技开启全球招股；众擎机器人完成2亿美元B轮融资；红熊AI完成2.1亿元A轮融资丨投融资周报需要日本PayPal代付；社交APP伊拉克支付提现渠道；收巴西各类流量；海外买量｜私域神器每周合作精选No.201一周要闻NO.195丨恶意软件入侵谷歌商店；9家游戏公司财报深度拆解；非洲市场又一电商巨头退场；Meta首个"超级智能"模型亮相微软或考虑将《使命召唤》移出Xbox Game Pass泡泡玛特进军巴西：先打假冒伪劣智元机器人，一分为四！ 本文源自「私域神器」，发布者：siyushenqi.com，转载请注明出处：https://www.siyushenqi.com/35323.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 13.9K 文章 0 评论 425 问题 18 粉丝 私域神器：海外私域营销拓客软件 抢外包饭碗，AI做到了 上一篇 2025 年 8 月 14 日 上午12:36 赋能“草根创作”，这家AI独角兽一手捧红TikTok超级家族 下一篇 2025 年 8 月 14 日 上午12:37 相关推荐 行业动态 当年轻人涌向1688“淘”平替，商家却不想接单了？ 从B端转向C端，被许多消费者奉为“平替之王”的1688开始后悔了。 siyushenqi.com 2025 年 8 月 5 日 446000 行业动态 《出海拉美，如何搞定支付难题》——Pagsmile 创始人&CEO 刘迪 《出海拉美，如何搞定支付难题》演讲视频完整回放 siyushenqi.com 2025 年 8 月 3 日 413000 宠物赛道，他跑出年销5亿的速度 PETKIT小佩在宠物用品赛道即将踏上10年大关 siyushenqi.com 2025 年 8 月 12 日 • 行业动态 479000 页游大佬10亿卖公司后再创业，这一次在海外成了 2020年在海外出现了许多增长迅猛的游戏公司，今天的「隐形大佬」专栏来跟大家介绍一下其中较为突出的王牌互娱。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 485000 行业动态 海外电商大乱斗：亚马逊卷低价，速卖通挑战高价带 出海四小龙与亚马逊之间的竞争态势发生了变化。亚马逊上线低价商城Haul，定价大多不超过10美元，甚至部分商品不超过6美元，直接对标Temu的低价策略。 siyushenqi.com 2025 年 8 月 5 日 453000 行业动态 2020年12月全球热门移动游戏下载量TOP10 Sensor Tower 商店情报数据显示，InnerSloth《Among Us》12月在全球App Store和Google Play获得4120万次下载 siyushenqi.com 2025 年 8 月 25 日 522000 这个“洗牌”最频繁的品类，却被《和平精英》这张“王牌”统治了四年 如何长线运营一款手游？单纯从理论上看，这是一道大多数人都能答上几句的开放题：稳定更新、大胆创新、加强互动、注重优化、维护社群，言之有理即可得分。 siyushenqi.com 2025 年 8 月 18 日 • 行业动态 464000 行业动态 从2万到35万再到250万用户，这家印度游戏公司究竟做对了什么？ 总部位于新孟买的印度本土游戏公司PlayerzPot，由Yogesh Doiphode和Mitesh Gangar于2015年创立。 siyushenqi.com 2025 年 8 月 25 日 427000 行业动态 大模型行业，根本没有什么“真”开源？ 最近一段时间开源大模型市场非常热闹，先是苹果开源了70亿参数小模型DCLM，然后是重量级的Meta的Llama 3.1 和Mistral Large 2相继开源，在多项基准测试中Llama 3.1超过了闭源SOTA模型。 siyushenqi.com 2025 年 8 月 13 日 393000 获快手投资，单品流水数亿，CEO自述：现在中小团队难得要死 他们如何起死回生？ siyushenqi.com 2025 年 8 月 25 日 • 行业动态 458000 行业动态 37家日本游戏上市公司业绩：11家亏损，《赛马娘》成拖油瓶？ 本文总结了2023年4~6月期37家日本上市游戏公司的财务报告。 siyushenqi.com 2025 年 8 月 18 日 470000 私域神器每周精选｜IGG等出海大厂发声，寻发行、联运、推广、异业合作 (第9期) 更多优质合作需求可参看往期合集《私域神器每周合作精选》。您也可以关注私域神器公众号，回复关键字“合作集”查看合作精选专题。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 492000 创梦天地2021年财报：营收26.37亿，4款游戏将与腾讯合作研运 公司自研游戏收入已经超过总营收的50%。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 538000 行业动态 与小米、字节上演抢人“三国杀” 阿里大规模招聘AI人才 在DeepSeek火爆全球后，国内互联网与科技大厂加快了对AI人才的争夺。阿里、小米和字节跳动等公司纷纷采取行动，其中阿里近期开启了大规模的AI人才招聘，开放数百个岗位，主要集中在AI大模型相关的产品和技术研发方向。 siyushenqi.com 2025 年 8 月 13 日 402000 行业动态 历时两年维权终胜诉，《恋与制作人》诉咪咕法律维权案彰显原创保护决心 历时两年，《恋与制作人》诉咪咕不正当竞争案以上海知识产权法院终审胜诉落定，咪鸽公开道歉。 siyushenqi.com 2025 年 12 月 22 日 475000 行业动态 美国“关税难民”，涌进中国电商平台 敦煌网（DHgate）在美国苹果应用商店的“免费应用程序”下载排名中，从4月11日的第352位跃升至4月15日的第二名，仅次于ChatGPT。这一现象与美国关税政策变化导致消费者对中国制造商品需求增加有关。 siyushenqi.com 2025 年 8 月 5 日 445000 行业动态 阿里25周年马云内部发声，让我泪流满面 马云：过去25年，我们似乎一直在纠结，失落，挫折，痛苦，挣扎……中咬着牙，并且微笑着坚持着，推进并呵护着我们的理想…… siyushenqi.com 2025 年 8 月 6 日 408000 行业动态 杀疯了！Meta开源SAM-2：可商用，随意分割视频、图像 今天凌晨，Meta在SAM的基础之上对架构、功能以及准确率等进行大量更新，正式开源了SAM-2，并支持Apache 2.0规则的商业化。这也是继上周Llama 3.1之后，再次开源重磅模型。 siyushenqi.com 2025 年 8 月 13 日 410000 叠纸游戏又测试了一款新品 最近叠纸游戏的开测节奏尤为快。继上周测试的《逆光潜入》之后，今天（4月18日）又开启了《恋与深空》的测试。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 466000 行业动态 收购潮持续？SHEIN或将收购英国时尚平台Missguided 毕竟，还没上市的SHEIN需要更大的故事。 siyushenqi.com 2025 年 8 月 12 日 521000 盘点2020日本Top10电商平台，亚马逊位居榜首 作为较早发展网上购物的国家之一，日本已经成为一个相当庞大的电子商务市场。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 485000 行业动态 总交易额高达20万亿韩元！韩国电商平台Gmarket&Auction现状一览 保健品、化妆品、服饰和电子产品是主要交易品类 siyushenqi.com 2025 年 8 月 13 日 415000 行业动态 如何利用WhatsApp磐石系统提升外贸获客效率 外贸获客环境与效率瓶颈 WhatsApp磐石系统的核心架构 提升外贸获客效率的关键机制 传统方式与系统化获客对比分析 企业落地实施与优化路径 在全球贸易高度数字化的背景下，外贸企业的获客方式正经历从“被动等待”向“主动触达”的深刻转变。客户决策周期缩短、沟通频次增加、市场竞争加剧，使得单一依赖邮件或展会的传统模式难以持续支撑增长。研究表明，即时通讯工具与系统… siyushenqi.com 2025 年 8 月 14 日 上午12:36 457000 目标出海前3，三七怎么理解海外市场的？ “我们的长期目标是进入出海厂商的前三。”5月19日，三七互娱在接受机构调研问答时这般说道。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 446000 行业动态 智谱GLM-4.7和MiniMax M2.1，国产开源模型双雄，谁是SOTA 智谱 GLM-4.7 与 MiniMax M2.1 双双过会、同步抢登“国产大模型第一股”，并把最新模型推上 Hugging Face 趋势榜前排，正面争夺开源 SOTA。 siyushenqi.com 2025 年 12 月 29 日 368000 行业动态 Temu一天狂捞6亿，单季度GMV暴涨至50亿美金 今年第三季度Temu的销售额已然达到50亿美金（约合人民币365亿），其中仅仅九月份，单日GMV甚至高达8000万美金（约合人民币6亿）。 siyushenqi.com 2025 年 8 月 12 日 401000 行业动态 智谱AI第三代基座大模型来了，社保基金、阿里腾讯领投 智谱AI从2020年底开始研发 GLM 预训练架构，至今完成了5次产品升级，同时，今年以来，国内多家主流大模型产品也多次完成迭代。大模型投资赛道已形成强者愈强、弱者愈弱的马太效应，资金大都流向了有知名度且有一定规模的企业。 siyushenqi.com 2025 年 8 月 13 日 429000 行业动态 科技春晚过后，机器人开始统治业界，电视也有AI功能了 1月10日，持续6天的CES 2025落幕，总计约4800多家企业参展，包括323家世界500强企业，主题为“DIVE IN”，意为AI在各行各业“深入探索”，以英伟达首席执行官黄仁勋的主题演讲拉开序幕。 siyushenqi.com 2025 年 8 月 13 日 407000 行业动态 美国电商市场迎最低增幅，亚马逊份额首次下降 在消费者自由支配支出放缓以及实体店回归的影响下，美国电商市场的发展受到了阻碍。 siyushenqi.com 2025 年 8 月 13 日 420000 行业动态 AI围剿创意产业！1/3翻译和1/4插画师或将失业 来自英国最大的创作者工会SoA的调查凸显了生成式AI对创意产业从业者的深刻影响。被替代、被降薪已成为严峻的现实，监管AI的开发和内容生成，保护创作者的权益迫在眉睫。 siyushenqi.com 2025 年 8 月 13 日 431000 发表回复 请登录后评论...登录后才能评论 提交
