用手机给自己的环境建个模,没有 LiDAR 也能用:Polycam
2022-9-29 14:30:0 Author: sspai.com(查看原文) 阅读量:13 收藏

用手机给自己的环境建个模,没有 LiDAR 也能用:Polycam

从 2020 年的 iPad Pro 开始,激光雷达就成为了 iPhone 和 iPad Pro 系列的标配。但直到今天,除了偶尔需要用到的测距之外,它在非专业或特需用户之中的存在感依然近乎于 0。尽管 Apple 表示激光雷达还会用于拍摄人像照片时提升对焦速度,也能用于构件图片的深度信息,然而一年之后没有搭载激光雷达的 iPhone 13,也依旧拥有了电影模式,似乎又从某个角度印证仅靠机器学习是可以「算」出图像深度的,激光雷达的存在感就变得更低了。

不过,在我们真的需要的时候,激光雷达又能带来体验的明显提升。例如在 iPhone 12 Pro 发布会上,Apple 就专门介绍了一个通过激光雷达实现的 AR 案例。得益于激光雷达,AR 的准确度和沉浸感有了大幅度提升,将原本复杂的工作空间设计变得简单,甚至可以直接预览最终效果,节省了搭建实体模型的价格和时间。

而在这些应用之中,Polycam 又以良好的使用体验和快速的贴图计算获得了不少好评。而现在,它更能和 magicplan 进行「梦幻联动」,在你还拿不准怎么布置自己的家前提供一个优秀的预览,让你在装扮自己心爱的小房子时更加得心应手。值得一提的是,当你把 iPhone 或 iPad 设置成中文语言的时候,Polycam 就会告诉你它的中文名字:宝丽来。

快比一切都重要

在打开应用时,polycam 先会询问你「你是因为什么而使用」。它提供了多种选择,包括建筑师、设计师、图像工作者等。当然,它还为我这种为了写稿而进来猎奇尝鲜的人提供了一个「Having fun」的选择,也或者干脆就点个「Other」也行。看来,polycam 也属实是把所有的潜在用户群体都摸透了。

过了欢迎页面之后,就立刻来到了 AR 模型拍摄界面。除了这一次之外,以后每次打开 polycam,也都会默认进入。

和大部分 AR 应用类似,Polycam 的使用方式也是通过激光雷达进行三角建模,然后再用 iPhone 相机录制物体表面的信息用作贴图,最后再渲染到最终的立体模型中。在使用时,点击右上角的加号就能开始扫描。polycam 默认使用的是激光雷达模式,同时提供自动录像和手动拍照两种模式。大部分情况下,我们按照 polycam 默认的设置即可开始使用。点击开始录制之后,你便需要拿着自己的手机或 iPad Pro 进行扫描,然后根据指引移动自己的位置,同时注意屏幕给出的信息,尽量消去画面中的蓝色三角形,并避免过快的移动速度。

录制完成后,polycam 就会生成一个没有贴图的模型,这时候点击「处理」,它就会开始使用相机拍摄的物体表面给模型上贴图,然后最终生成一个 AR 模型。从我目前使用的 iPhone 13 Pro 来看,渲染的速度非常快,从我在客厅扫描完成点击处理开始,到我坐到工作桌前喝口水放下水杯,polycam 已经完成了渲染。

看来,Polycam 创始人 Chris Heinrich 在 Twitter 上称「polycam 将网格数据转换为纹理的速度比其它同类应用快 5 倍」,并不是吹牛。

但 polycam 并不止步于此,如果你想要更好的精度,还可以在自定义中调整需要的参数进行渲染。根据我的实测,即使我把深度范围拉到最大,像素大小和简化都调整到最小,polycam 给出的最多预计时间也就只有 6 分钟。然而实际使用下来,其实一半时间还没到,它就完成了渲染。

在渲染完成的 AR 模型中,你可以对其进行裁剪、测量或添加笔记,也可以直接导出为 USDZ 格式的文件进行分享。甚至,你还可以使用延长功能对之前获取的模型进行扩充:这是由于 polycam 在拍摄录制 AR 模型时,还会调用更多设备中的传感器来记录你在对应空间中的移动信息。

值得一提的是,它还有以个 ROOM 模式。在这个模式下,它能够智能地识别物体的边缘,然后生成一个带有家具模型的三维模拟房型图。比起激光雷达模式来说,这个模式下简化了物体的细致信息,避免了激光雷达点阵不够密集而造成的贴图模糊干扰。而且,扫描完成后,你还可以直接导出为房间平面图(需要订阅 Pro 版功能)。

这个功能对于租房(出租或租住)和装修党来说,可谓是十分省心了。通过导出成 floorplan PNG 等格式,就能直接获得包含重要物品的房间的平面图,然后你就可以在 magicplan 等 app 中将平面图导入到工作区,在无需精细测量的前提下大致对房间的布局和安排进行更改,省去测量、记录数据和画图的步骤。可以说,二者大大降低了非专业用户的上手室内设计的门槛,也不用再担心出现预测失误导致「摆不下」或「空间过大」的这类问题。

polycam room 模式导出的 floorplan PNG 格式图片

没有激光雷达的设备也可用

Polycam 的可用设备不仅仅只限于搭载了激光雷达的 Apple 和 Android 设备,只要是有摄像头的设备都可以使用。根据 App Store 上的要求,只要是可以运行 iOS 14.2 或更高版本的 iPhone 或 iPod touch,以及 iPadOS 14.2 或更高版本的 iPad,都可以使用 Polycam。

甚至,你还可以在搭载 Apple 芯片的 Mac 上安装 polycam。如果 Mac 上有内建摄像头,polycam 也能够调用(但我想应该没有人会抱着一台 Mac 然后用屏幕上的摄像头去拍 AR 吧……)。不过有意思的是,在 macOS Ventura 系统上,得益于连续互通相机的加入,即使是没有摄像头的 Mac,也可以借助调用 iPhone 的摄像头来使用 polycam。不过由于 Mac 上并没有激光雷达,因此即便是和搭载激光雷达的 iPhone 搭配使用,polycam 也会以 Mac 作为设备基础,不支持使用激光雷达相关的功能。

在没有激光雷达模块的设备里,polycam 提供了「照片」模式。不过它与以往 AR 拍摄时「填三角形」的方式不同,它是利用不断对物体进行连续拍照,然后上传到 polycam 的云端进行计算来实现的,因此它对复杂物体(例如杂乱的房间)就比较吃力。然而,对于小物体和大型简直,相机模式却竟有超越激光雷达的潜力 —— 出现这个情况也许是因为 iPhone / iPad 上搭载的激光雷达投射的点阵密度较为稀疏,在细节和庞然大物面前就显得捉襟见肘,并无法获取到非常精细的数据,而照片模式则直接是靠主摄拍摄的物体照片,然后再用 AI「算」出来的,因此细节内容更加丰富。

激光雷达模式获得的 Apple Watch 模型直接穿模到异世界,而 iPad mini 6 单摄拍照再上传 polycam 云端用算法「暴力合成」的 AR 模型直接「吊打」一切 Pro 设备。

当然,搭载了激光雷达的设备也能够使用照片模式。

强大的分享功能

Polycam 的强悍之处不仅在于良好的体验和快速的算法,更让人津津乐道的是它丰富的导出选项。

对很多人来说,AR 建模软件很多时候就只是冲个新奇劲下载玩玩,但 polycam 不仅可以满足这些猎奇的尝鲜者,对于专业人士也有很大帮助。polycam 支持丰富的文件类型导出和共享 —— 从 Apple 官方钦定的 AR 文件 USDZ,到 3D 艺术家常用的 AutoCAD、Cinema4D 和 Maya,以及游戏开发者常用的 Unity、Unreal。可以说,polycam 的导出和分享功能涵盖了几乎绝大部分需要用到 3D 模型的领域,大大提升了它在专业领域的可用性。

不过需要注意的是,polycam 不少导出的功能需要 Pro 订阅。不过我想一般会购买订阅的用户都有着对应的专业需求,如果只是尝鲜或简单使用,免费版的功能也已经足够丰富了。

甚至还有一个社区

其他的 AR 扫描建模应用或许只是个单纯的工具,但 polycam 愣是玩出来一个社区。在这里,用户可以分享自己扫描的模型,而其它用户则可以点赞或一键添加自己的 polycam 相册中。

此外,你还可以点击左上角的地球图标更改自己的定位,直接在家里查看全球各地的用户作品。当然,目前在国内的用户较少,能看到的作品也并不多。不过有意思的是,我们依旧能在这些作品集中找到一些有意思的东西,例如佛山有一位用户扫描了一条街道,东莞有一位用户则扫描了自己妻子做的蒜苗炒肉……

感谢这位佛山的朋友,治好了我的颈椎病

或许在将来,iPhone / iPad 所搭载的激光雷达升级(或开放了面容 ID 组件对应的权限,因为前置点阵投影的密度远高于后置激光雷达)之后,polycam 就能够获取更加密集的三角形数据,令贴图的错误大大减少,接着他们就可以基于这个社区直接开发一个可以在全球进行 AR 寻宝或找彩蛋的游戏,再结合头戴式 AR 设备,可以说是充满想象空间。

而且这个游戏一旦推出,可能很多玩家就能回想起当年不用戴口罩也能去室外抓宝可梦的记忆了。

Polycam 支持 iOS 14.2 或更高版本的 iPhone 或 iPod touch、iPadOS 14.2 或更高版本的 iPad、搭载 Apple 芯片的 Mac 以及 Android 设备。不过要在 Android 上运行 polycam 的话,那么还需要满足以下条件:

  • 至少剩余 3.5GB 的运行内存;
  • 必须使用 64 位处理器;
  • 不搭载 Imagination PowerVR GE8320 图像处理器。

除基础功能外,polycam 提供高级版订阅,可解锁更多专业功能和文件导出选择,内购前可以免费试用 7 天。

> 下载 少数派 2.0 客户端、关注 少数派公众号,解锁全新阅读体验 📰

> 实用、好用的 正版软件,少数派为你呈现 🚀

© 本文著作权归作者所有,并授权少数派独家使用,未经少数派许可,不得转载使用。

宛潼

以前叫 JohnHarrod。用不停创作来对抗焦虑,欢迎合作或投喂。公众号:约翰斯库


文章来源: https://sspai.com/post/75985
如有侵权请联系:admin#unsafe.sh