手机扫一圈就出 3D 模型,3DGS 端侧重建技术让创作更简单
本原创文章帖发布在华为开发者联盟社区,欢迎开发者前往访问评论交流,更多与该内容相关讨论,请点击原帖查看:

用手机环绕一圈,就能把整个空间“装”进屏幕——这不是科幻电影,而是 HarmonyOS应用 Remy 正在做的事。作为鸿蒙生态中的一款 3D 空间记录工具,Remy 让以往门槛较高的三维重建,变得像拍视频一样简单。它的背后,是一支在 3D 扫描领域耕耘多年的团队对“如何留存记忆空间”的重新思考。带着这份好奇,我们和 Remy 团队聊了聊。
Q1:你们在 3D 扫描领域深耕多年,为什么直到2023年才决定做一款面向大众的 3D 空间记录工具?关键的“转折点”是什么?
我们在 3D 扫描领域摸索了很多年,一直靠摄影测量这类传统方法——拍照量大、计算复杂,门槛高。直到2023年,3D 高斯泼溅技术出现,我们意识到,这是值得“上车”的一次机会。它跳过了繁重的网格计算,只用稀疏点云加神经网络,就能渲染出极逼真的三维场景。
我们很快把它落地到自己的专业 App 里。后来发现,不少用户其实把这项技术用在了和专业扫描完全不同的地方——记录承载回忆的空间与物件。那一刻我们意识到,这不仅仅是“扫描”,更是在“留存记忆空间”。于是我们下定决心,把专业功能做简化,变成一款普通人也能轻松上手的 3D App——Remy 就这样诞生了。
Q2:Remy 上线后,你们观察到用户最常用来记录哪些场景?在产品设计上是如何平衡“零门槛新手体验”和“专业创作者深度需求”这两端的?
用户最常记录的,是那些有情感联结的空间。比如:毕业季的宿舍、住了多年的老屋、节日聚会时的朋友与家人合影。因此在产品设计上,我们追求简化,主要做了两件事:
第一是让界面直观、操作简单。我们设计了一个引导球,它会实时指示用户该往哪个方向移动手机、扫描哪个区域。新手用户不需要理解任何建模概念,只需“对准、环绕、等待”三步,就能完成一次空间记录。
第二是让特效视频易分享。很多用户扫描完想发朋友圈,但直接发3D模型文件不现实。所以我们内置了六套AE渲染特效模板,一键就能生成炫酷的展示视频,方便在社交平台传播。
对于已经熟悉 Remy、想精细记录的用户,我们还提供了“自由扫描模式”,用户可以按自己的想法环绕重要物体,进行更精细化的重建。这样既照顾了新手,也留住了专业玩家。

Q3:传统 3D 重建流程不仅耗时,而且任何一个环节出错都可能前功尽弃。Remy 是如何借助 HarmonyOS 的能力,解决这个问题的呢?
首先是 Spatial Recon Kit 的 3DGS 端侧重建 的落地。以往,用户采集完数据后需要上传云端进行数小时的计算,不仅等待漫长,还面临隐私顾虑。而 Remy 现在将整个 3DGS 重建流程直接运行在手机本地——用户环绕扫描完成后,手机在几分钟内直接生成高精度3D模型,无需联网上传,从“小时级”提速到“分钟级”,且数据不出设备,彻底解决隐私顾虑。在此基础上,HarmonyOS 的 AR Engine 为拍摄阶段提供了精准的引导基础。它能根据相机图像与位姿信息,实时判断用户尚未覆盖的区域,引导及时补拍,从源头减少因视角缺失造成的重建失败,让端侧重建获得更高质量的输入数据。同时,方舟图形引擎 则利用系统级的图形渲染能力,加速模型加载与场景构建,让端侧生成的高斯模型在手机上能流畅预览和交互。原本“采集—校准—配准—重建—渲染”这一层层串行、任何一步出错都可能返工的复杂链路,变成了一条数据更准、速度更快、可即时修正的稳定流水线。用户只需环绕拍摄,几分钟后就能在手机上直接看到自己“装”进屏幕的整个空间。

Q4:Remy 在图库联动、多端流转这些方面做了哪些 HarmonyOS 专属的设计?
我们和华为的工程师合作,实现了图库联动。普通用户很少接触 3D 模型数据,所以我们把模型数据和 MP4 视频格式做了结合,用户可以将 Remy 创建的 3D 模型直接保存在系统图库中。本地浏览时能看到模型的 3D 效果,还能将 3D 模型设为锁屏壁纸,而如果通过社交软件发给其他系统的用户,则会自动变成一段展示模型的 MP4 视频。
另外在多端流转上,我们接入了“碰一碰分享”。打开 Remy 里的某个模型页,碰一碰另一台支持的 HarmonyOS 设备,就能将模型地址快速传输给其他人,快捷分享与保存。
Q5:开发过程中遇到过哪些棘手的难题?鸿蒙开发者平台和官方团队在哪些关键节点上给了你们支持,让你们得以突破?
最大的挑战是性能问题。传统的 3D 高斯渲染非常消耗性能,在手机上很容易发热、掉帧,甚至闪退。我们一开始很担心,这样的效果在移动端是否真的能跑起来。
HarmonyOS 3D 方舟图形引擎团队与我们紧密协作,针对 Remy 的 3D 场景深入分析并定位性能瓶颈,逐项优化解决。最终实现了手机上流畅渲染高精度 3D 高斯模型,功耗也大幅下降。另外,HarmonyOS 开发者平台的 ArkUI 也帮我们简化了界面构建逻辑。我们的设计稿比较精细,动画和转场很多,ArkUI 声明式语法让我们能非常精准地还原设计,开发效率提升了不少。
Q6:现在 3D 赛道热度很高, 大量开发者和团队涌入。如果让您给这些新入局的开发者一些建议,会是什么?
我觉得现在入局 3D 赛道,最需要避免的是把项目做成一个“模型 Demo”,真正拉开差距的,反而是采集、重建、渲染、交互和场景闭环这一整条链路。我认为, 3D 的下一阶段,竞争的不再是谁先生成出一个 3D 内容,而是谁能把 3D 内容变成一个普通人愿意反复使用的产品能力。所以建议新入局的团队,多花时间在用户场景和体验闭环上,而不是只盯着模型效果本身。
在鸿蒙生态协同下,Remy 不仅让 3D 重建变得像拍照一样简单,更通过图库联动、碰一碰分享等设计,让三维空间的记录与分享像拍摄一段视频那样自然。三维空间记录不再属于专业工作室,而是走进了每个人的日常。期待有更多开发者能加入鸿蒙生态,共同探索 3D 记录的更多可能。
*端侧重建的功能仅限华为 Nova、Pura、Mate 系列手机(搭载麒麟9010s以上芯片)、HarmonyOS 7(API 26) 以上系统使用
点击安装:
https://appgallery.huawei.com/app/detail?id=com.kiri.remy&channelId=SHARE&source=appshare
更多推荐




所有评论(0)