利用深度视觉技术提供大场景3D重建服务,北剑锋科技想做中国的Matterport
基于中国的云服务政策,Matterport 进中国并不容易 随着VR技术的普及,将实体场景数字化重建变得越来越重要。这条赛道上国外*知名的公司非Matterport莫属,通过提供专业相机、云服务帮助企业快速进行大场景3D重建,今年8月已经完成D轮融资,自2012年以来已经累计获得6000多万美元投资,据说近期又完成了新一轮融资,还推出了全球*大的3D模型库。国内初创公司北剑锋科技也在做类似的事情,目前已经完成了硬件产品的开发,并在小范围内开展业务,并完成了种子轮、天使轮融资。 在Matterport出现前,如果想要获得一个大场景的数字化3D模型,只能派人现场勘测获得相关的尺寸信息,交由设计师通过专业的绘图软件进行手工设计和绘制。一般来说,一个反映真实细节的100 m² 房屋的绘制,仅设计师部分的工作往往要在4天左右才能完成, 耗时费力,还要通过专业的PC软件进行展示,很不方便。Matterport则将这个过程自动化、云端化,自动生成模型,云端存储,只要有浏览器就可以播放。这也解释了Matterport为什么可以获得资本持续青睐。 简单来说,北剑锋科技做的事情很类似Matterport,公司研发了基于深度视觉技术的专业相机和云端重建、展示技术。具体来说,专业相机中使用了Kinect 类的深度传感器,拍摄目标场景或物体的深度图像,再将这些数据上传到云端进行降噪、特征点提取,将图像中的深度、纹理等基本信息一一匹配,再结合相机的相关参数,重建出3D场景的模型。 这个听起来很容易的过程,要实现起来远没有那么容易。Kinect 类的深度传感器获得的数据包括了物体彩色信息、深度信息,数据量很大,如何识别出不同图像中的想似关键点,进行一一匹配、拼接、重建,就变得非常复杂,实现自动拼接对算法的要求就非常高。北剑锋科技的初创团队在3D领域有多年经验, 擅长3D算法,经过两年多的研发,终于实现了这一算法。 北剑锋科技CEO高翔告诉36氪,目前使用北剑锋的产品及服务,完成100 m²房屋的信息采集仅需要一小时左右的时间,后期处理大约需要3小时左右;制作完成的模型数据量仅是同样信息量视频的1/5,同时可以在场景内任意添加标签信息 (文字/图片/声音/链接) ,并能够在浏览器端和微信端直接展示。 目前,北剑锋已经完成了基础产品的研发,并完成了大量实际场景的3D重建工作。同时北剑锋科技可以在3D模型内部增加了标签和链接的功能,3D模型除了可以应用于房产、高端宾馆、民宿领域,还可以无缝实现线下场景和线上电商网页的无缝关联。 随着VR技术的普及,大场景的3D重建越来越重要,这主要体现在特色空间性展示方面,不久之前Airbnb也与Matterport建立了合作,为平台上的房屋制作3D虚拟体验场景。这方面,北剑锋的主要户集中在地产、高端宾馆、民宿博物馆领域,也会涉及游戏场景的搭建。此外,这套技术的核心技术也就是SLAM,也可以应用在AR、机器人等领域。 目前,北剑锋科技对标公司Matterport在硬件和云端服务同时收费的模式、其中,Matteport 3D Pro 相机的售价是4500美元,云端订阅费用分为49美元(每月3个模型)、99美元(每月7个模型)、149美元(每月11个模型)三档。高翔表示,北剑锋的商业模式将不同于Matterport,不会在各个环节都收费(设备、月租、建模),而是会重服务轻设备,同时也会针对本土客户的个性化需求提供个性化服务。 提到大场景3D重建,先行者Matterport就是不得不提的玩家。但这一点北剑锋并不太担心。高翔解释,一是基于中国的云服务政策,Matterport 进入中国市场的难度较大,而目前北剑锋是国内唯一的技术提供商,其他竞品研发成功至少要在一年后;二是因为Matterport 对中国客户的支持并不友好,很多公司与Matterport 联系寻求合作,但往往得不到有效回复或者无法获得相关的服务,而本地化正好是北剑锋科技的强项。