苹果的新iPad Pro预示着“视觉”的未来方向_详细解释_最新新闻_热点事件_36氪

翻译局是一支36Kr以下的翻译团队,致力于科学,技术,商业,工作场所,生活和其他领域,着重介绍新的外国技术,新观点和新趋势。

编者注:在2021年春季新产品发布会上,苹果公司正式推出了配备M1芯片的新一代iPad Pro。 同时,Apple为新的iPad Pro带来了一项名为Center Stage的新功能。 在中心舞台模式下,iPad Pro将使用AI自动检测人物的位置,并通过移动和缩放镜头等操作使人物始终位于屏幕中央。 本文的作者认为,这不仅改善了自流行以来越来越流行的视频通话体验,而且预示了视觉的未来。 苹果的新硬件原标题是为我们的视觉未来而打造的,作者是Om Malik。

进入新千年后的二十年,很明显,没有软件和智能的硬件只是一个头。 苹果今天的产品发布会再次提醒了有关硬件的这一新事实。 我很高兴地说苹果做到了。 新款iMac摄像机和新款iPad Pro的前置摄像头是迈向视觉未来的重要一步。

自从新的王冠流行病爆发以来,我们已经开始将大量时间花在Zoom和视频会议上,这是我们生活的一部分。 我们一直在抱怨我们的计算机,尤其是苹果计算机的内置摄像头质量差。

我们大多数人都遭受着视频质量差的困扰,尽管有些人购买了小型设备并将更大,更好的相机连接到计算机上。 或者,如果您像我一样,可以通过Camo App在iPhone上使用相机。 毕竟,iPhone的摄像头比任何独立的流式摄像头都要好。 无论使用哪种方法,我们都会对计算机上不合格的前置摄像头感到无奈和厌倦。

在这种新的王冠流行病的经历中,我一直想知道为什么我们的计算机摄像机无法使用计算机视觉和深度感知来创造更好的视频通话体验。 毕竟,所需的技术在那里。

计算机视觉算法正在迅速发展。 我们的口袋,提包中的设备以及家里的计算机都具有强大的计算能力,机器学习芯片和GPU。 现在,数十亿部智能手机中使用的那些微型相机和传感器具有足够的功能和低廉的价格,可以内置到计算机中,从而最终创造了更好的视频会议体验。

正如我之前写过很多遍一样,Zoom的文化(通过视频进行工作和交互)将保持不变。 与1918年的流感大流行不同,电话当时无法发挥其潜力,因为电话交换操作员成为了流感的受害者,而当前的COVID-19大流行已经可以通过可靠的视频会议来承受。 永远在线的服务器不受我们其他人正在处理的病毒类型的影响。 可以说,如果没有技术,新的王冠流行病的经济影响将比我们目前所经历的严重得多。 这并不夸张。

正如品尝流媒体的便利使我们所有人都沉迷于在线音乐以及在线电影和电视节目一样,我们所有人都将进行很长一段时间的视频通话。 这就是为什么我们低估了新的王冠流行和视频通话所带来的行为变化。 无论是休闲社交,远程医疗,远程学习还是远程工作,我们都进入了一个交流将越来越可视化的时代。

COVID-19大流行期间的数据清楚地表明了这一点。 2020年,Google Duo和Google Meet的用户在全球范围内进行了超过1万亿分钟的视频通话。 研究美国网络流量模式的公司OpenVault在最近的一项研究中指出,2020年上游总流量增加了63%。 其中很大一部分是由于使用了视频会议应用程序。 OpenVault数据显示,在调用Zoom的一个小时内,它占用360M至1.2G的流量。 在工作时间内,带宽使用量几乎增加了一倍。 这种额外的带宽带来了新的挑战和机遇,并且Google已经与其人工智能部门合作,使用新的编解码器将音频和视频压缩到较小的空间中。

随着我们的工作和生活越来越形象化,提供出色的体验成为一种机会。 苹果已经意识到了这一点,亚马逊,Facebook,谷歌和微软也都意识到了这一点,它们都推出了专门的视频通话设备。

新款iMac配备了1080PHD摄像头,在M1芯片中使用了图像信号处理器和神经引擎,具有更好的降噪效果,更大的动态范围以及改进的自动曝光和白平衡,从而提高了图像质量。 三麦克风阵列可减少反馈回声。 有定向波束成形技术,可帮助减少背景噪声并集中于用户的语音。 简而言之,苹果表示对话中的声音自然而清晰。 六个扬声器还设计为使用算法并实现空间音频。

苹果并不是第一家将视频与人工智能和机器学习相结合的公司。 一段时间以来,谷歌和微软一直在提供更好的功能。 例如,谷歌去年在其视频通话服务中引入了许多功能,例如噪声消除,背景模糊和弱光模式。 但是,苹果公司可以充分利用其垂直整合的优势。 新的音频和视频硬件将利用M1芯片的组件(例如图像传感器,神经引擎和GPU)来发挥其潜力。

问题是,就未来的视频通话而言,我们将走向何方? 我们不必走得太远,新的iPad Pro为我们提供了足够的线索。 iPad Pro现在使用与Mac设备相同的M1芯片。 除了TrueDepth摄像头系统之外,iPad Pro还具有一个新的超宽广角前置摄像头。 查看新iPad Pro的摄像头设备,不难看出这些相同的功能将出现在笔记本电脑或台式机上。 最肯定的是,它肯定会出现在iPhone上。 视觉传感器的功能比我们所经历的要强大得多。 关键是要利用这种能力和人工智能来创造用户体验。

苹果希望通过在iPad Pro上引入一项名为Center Stage的新功能来实现这一目标。 我不会向任何人推荐任何与Facebook有关的东西,但Center Stage让我想起了Facebook的Portal设备,该设备提供了类似的视频通话功能并跟踪人们的行​​为。

苹果公司在新闻稿中指出:“中央舞台”使用新前置摄像头的较大视野和M1的机器学习功能来识别和维护用户在屏幕中的位置。 当用户走动时,Center Stage会自动平移以将其保留在相机中。 当其他人加入时,摄像头也会检测到它们并平稳放大以将所有人带入视野,确保他们成为对话的一部分。

今天,很难说出2018年iPad Pro与我目前正在使用的最新iPad Pro之间的区别。 2021型号的屏幕可能更好,它可能具有更新的芯片,甚至还具有功能更强大的端口来连接外围设备。 但是最后,我升级的唯一原因是使用新的摄像头功能以获得更多的视频通话体验。 底层硬件参数并不是那么重要,关键在于智能和智慧。

译者:提克威

Source