Doly应用让您可以在iPhone上生成3D产品视频

法国初创公司AniML推出了一款名为Doly的新3D捕捉应用,希望能够创建类似于PhotoRoom的产品视频。如果您在在线市场上销售运动鞋或需要为直销产品创建Instagram广告,Doly可以帮助您使用手机生成3D模型,并将其制作成看起来专业的产品视频。

尽管视频制作一直被认为是困难的,但生成3D模型更难。这就是为什么AniML团队致力于简化体验。他们希望将3D捕捉技术转变成主流技术,首先通过打包成iPhone应用。

使用Doly进行3D捕捉的步骤如下:用户将手机摄像头对准产品,并围绕其周围移动,以捕捉其3D形式。在幕后,应用程序会获取静止图像并将其发送到云端。AniML构建了一个重建管线,使用一种称为高斯区分的方法将这些图像转换为逼真的3D模型。

传统上,3D模型是通过在3D空间中的一组点、投影在这些表面上的一些2D纹理以及照明效果来创建的。高斯区分是一种全新的渲染管线,涉及利用预训练的人工智能模型从一组2D图像中估计出3D点云。

“我们的出发点是一个技术发现:人工智能刚刚进入了3D世界。所以Facebook的人员,甚至谷歌的人员,正在进行研究,并撰写了一份相当重要的研究论文,论述了一种称为NeRF的方法,”AniML的联合创始人兼首席执行官Rémi Rousseau告诉TechCrunch。“这是一种新的范式,您尝试通过让机器学习来完成工作,来重建3D。”

“您不再是在基于多边形的3D中工作,现在您在基于神经的3D中工作,”他补充道。

如Rousseau所说,高斯区分并不完全等同于NeRF,但可以看作是一种后代3D建模技术。

所以这就是技术部分。接着,AniML着重寻找一个能够吸引用户的用例。电子商务公司是对于一个用于3D模型创建的工具而言的明显选择。

这款应用还提供了什么?在捕捉了3D模型之后,Doly用户可以浏览模板库,选择一个3D场景,将其对象整合到其中。这可以是一个简单的带有纯色背景的3D旋转,也可以是一些更戏剧化的营销布景,比如摄像头缓慢接近物体并切换到不同的角度。

如果客户喜欢结果,他们可以选择从应用程序购买视频,并下载到其他地方使用。

图片来源:AniML

Rousseau之前创立了两家虚拟现实公司,包括一家于2019年被Magic Leap收购的创业公司Mimesys。他的联合创始人Pierre Pontevia也有一段有趣的经历,他将一家公司出售给了3D工具巨头Autodesk;另一家公司则卖给了3D内容开发平台Unity。

到目前为止,AniML已经筹集了200万美元,由Adjacent领投种子轮。该初创公司还参加了由Nat Friedman和Daniel Gross领导的AI Grant,投资方还包括Kima Ventures以及一些天使投资者,如Hugging Face的Julien Chaumond;先前创立Stupeflix的Nicolas Steegman和François Lagunas;以及Sketchfab创始人Alban Denoyel;Bertrand Schmitt;Thibaud Elziere;和Vincent Nallatamby。我们还被告知法国国家投资银行通过资助额度为本轮融资的一部分做出了贡献。

值得关注的是,大品牌、二手转售商和其他电子商务专业人士是否会采用3D渲染视频用于即将推出的活动和在线商品介绍。但已经看到,借助人工智能,您可能无需专业的视频录制工作室也可以创建引人入胜的产品视觉效果。