什么是三维重建?
发布时间:2024-08-05 19:57:04 文章来源:实况网

随着全球数字化进程加速演进,三维重建技术如同一座桥梁,连接着物理世界与虚拟世界的广阔天地。何为三维重建?它是如何将纷繁复杂的现实世界,转化为可漫游、可交互的数字空间?又都在哪些行业和场景中绽放出耀眼的光芒?

什么是三维重建?

从行业视角看三维重建

三维重建(3D Reconstruction)是一种利用计算机技术,从二维图像或其他数据源中生成三维模型的过程。VR需要构建虚拟的数字空间,而三维重建技术正是对空间最完整、最深度信息采集的技术方案。

如视的三维重建探索

如视当下正在做的三维重建,是采集真实的空间深度信息(包括场景中物体的形状、大小以及它们之间的空间位置关系等),结合RGB相机(一种色彩还原度高、能够采集详细光谱信息的彩色相机)采集的图像信息,经由算法融合后构建1:1真实还原的三维模型的结果,如视软硬一体的三维重建解决方案就是在此基础上形成的。

由此得到的三维模型中,会包含丰富的语义信息,我们将之称为潜藏数据。而如视将通过深度学习算法,进一步挖掘采集生成的VR产物,从中获取包括空间结构信息、文字信息、物体信息、材质信息、光照信息等在内的潜藏数据并应用。

与三维重建共生共荣

三维重建是如视的核心技术能力,基于线下采集空间数据,如视通过自动建模、智能空洞填补、全自动数据提取、HDR 优化等三维重建技术将全部数据及图片纹理精准映射到三维模型上,在数字世界还原真实的三维空间。

作为数字空间综合解决方案引领者,如视自诞生起便深耕三维重建领域, 多年来,如视为全行业提供三维空间的采集、重建、展示能力,打造低成本、高效、有针对性的 VR 空间应用解决方案。

如视通过自研,实现了软硬一体的三维重建全流程解决方案。

多样的空间数据采集产品

如视产品矩阵已经完全覆盖了超大、大、中、小,空间、物体全场景的三维重建,能够提供高效、低成本、稳定的空间数据采集方案,满足千行百业的三维重建需求。

强大的算法能力

如视通过强大的算法能力,打造自动化处理全流程,让整个三维重建过程无需任何人工干预,为客户提供高效的三维重建能力。同时,通过如视特有的基于数字空间的AI能力,如视为用户提供自动平面图、空间物体识别等多样性的衍生产物。

丰富的产物数据编辑系统

为满足用户的多元化、个性化需求,如视打造了一套功能丰富强大的编辑系统,让客户可以对产物数据进行加工编辑。

灵活的场景应用解决方案

如视构建了一套跨越多行业、多业态的数字空间综合解决方案,全面响应并赋能千行百业的数字空间应用需求。同时如视也提供了多样灵活的部署方案,全方位支持客户的多元化应用场景。

如何进行三维重建?

三维重建步骤

一般而言,三维重建需要经过图像生成深度图、深度图生成点云、点云处理、网格重建、网格处理、纹理映射等步骤。

图像生成深度图

三维重建的第一步,是从知道每个点到相机的距离开始。而深度图像就是一张特殊的照片,上面每个点的颜色深浅,代表了它在现实中的位置到观察点所在垂直平面的真实距离。

深度图生成点云

点云是空间中代表3D形状或对象的数据点集合,数据集中的每个点代表一组X、Y、Z几何坐标。在这一步中,电脑会根据深度图像中的距离信息画出许多“小点点(点云)”,它们代表了空间内所有3D形状或对象的位置。

点云处理

之后,我们需要对点云数据进行一系列的处理和优化,提高后续三维重建的准确性和效率,如去除点云中的噪声、离群点等无用或干扰数据,提高数据的纯净度和准确性等。

网格重建

网格是点云的一种简化的表达形式,在三维重建中表示多面体形状的顶点与多边形的集合,这些网格通常由三角形、四边形或者其它的简单凸多边形组成。网格重建,就是要把刚才获取的“小点点”连接起来,形成“小面片(网格)”,这些面片(网格)组合起来就像是房间或者物体的外壳,让房间或物体看起来更有立体感。

网格处理

为了进一步提高模型的质量,接下来需要对初步生成的网格模型进行优化和调整,比如去除网格中的尖锐边缘和不平整表面,让模型更加平滑和自然等。

纹理映射

纹理是一张图片,可以根据特征映射贴在网格表面上。通过纹理映射给网格加上纹理后,诸如房间的墙纸、地板的颜色等内容就会显现出来,模型就会变得更加真实。

3D模型

网格和纹理全部组合在一起,就得到了一个完整的三维模型,它将支持我们的随意旋转、放大、缩小等。

如视的创新与优化

如视的三维重建,与一般的三维重建步骤差别不大,但在深度图和点云的生成上有两种方式。

图像生成深度图,深度图转换成点云

人类通过两个眼睛的视差来实现对距离的估算,但事实上我们用单个眼睛也可以大致估算出距离,这是因为我们的大脑已经记住了一些规律,比如近处的遮挡远处、近处的体积看似大于远处等。

利用这一原理,如视通过积累的数百万专业设备扫描的三维数据集,以全景图为输入、深度信息为标注(答案)训练出"单目图像深度估算"Al模型——Cyclops,实现无需深度传感器、仅采集空间图像即可实现三维重建。Cyclops的诞生,推动了如视轻量级和消费级VR采集产品的诞生,让VR 拍摄进入大众的日常生活。

借助累积的百万套真实空间数据,2019年11月Cyclops的推测误差率突破性地达到4.23%,超越了学界水平,随着采集矩阵的完善,到2023年4月,Cyclops算法误差进一步降至1.35%。

传感器(激光扫描仪)直接采集深度图/点云

我们向某物体发射一束光,并通过接收装置测量光线反射或散射回来的时间差,就可以直接计算出物体离我们有多远,得到物体的深度信息。如果再配上一个角度测量装置,测量光线发射的角度,结合已知的距离信息,就能直接得到该物体的空间坐标。而当我们利用传感器,同时向某场景发射无数道光,就能得到场景中各点的空间信息,也就是它们离传感器有多远、具体在哪个角度等,并据此直接绘制出精准的深度图和点云。

这种采集方式在空间数据的精准性、实时性、便捷性、抗干扰性等方面具备显著优势,如视旗下的专业级激光VR扫描仪“伽罗华(Galois)”,就利用了这一原理。伽罗华在采集过程中显示出卓越的环境适应性,并能够精确捕捉空间内的每一处细节,让大空间和超大空间三维重建变得轻松与高效,为专业人士提供无以伦比的便利体验。

三维重建质量影响因素剖析

三维重建的质量受到多种因素的影响,包括深度数据质量、点位拼接、操作规范、语义信息等。

深度数据质量

深度数据是三维重建的基石,其质量直接决定了三维模型的准确性和精细度。

如视目前已有的两款专业级空间采集产品——激光VR扫描仪“伽罗华”和手持实景扫描仪“庞加莱”——都采用激光雷达传感器,其产物质量受传感器精度影响;此外,庞加莱因为采用了SLAM技术(同时定位与地图构建技术,一种通过传感器数据实时估计自身位置并构建环境地图的技术),其质量还与其使用的IMU(惯性测量单元,一种集成了多种惯性传感器的装置,用于测量和跟踪物体的加速度和角速度)、相机等质量有关;而轻量级产品全景相机、Realsee G1智能云台和消费级产品如视VR APP,其产物质量与深度推测质量相关,目前误差为1.35%。

点位拼接

定点式扫描设备点位拼接是利用多点位采集到的彩色图像和深度信息,通过提取特征寻找相似的匹配点位,并计算相对位置和姿态,最终实现多个点位之间的精确拼接,简单来说就是将多个点位采集到的深度数据进行整合。

操作规范

包括扫描密度、手动拼接、特征工具等在内的人工操作规范与否,会极大程度上影响三维重建的产物精度,作业人员需要按照规范操作步骤,合理设置点位进行采集。

语义信息

语义信息是指对三维模型中各元素(如物体、场景等)的识别和标注,在三维重建过程中引入一些标注的或自动识别的语义信息,不仅可以提高模型的语义丰富度,还有助于提高模型的准确性和实用性。

三维重建用在哪里?

三维重建的无限可能

三维重建技术广泛应用于城市规划、影视制作、游戏开发、考古研究、文物保护、医疗影像、虚拟现实(VR)、增强现实(AR)等诸多领域。随着基于深度学习的三维重建方法突破传统界限,开始处理更加复杂的场景重建任务,三维重建技术应用的广度和深度将不断拓展。

如视的三维重建产物

如视的三维重建技术,不仅能够精准捕捉并还原真实世界的每一个细节,还能将这些数据转化为丰富多样的产物,包括全景图、点云、模型等各个格式的导出,以及视频、截图等营销物料的下载,满足不同用户群体的多元应用需求。

以三维重建推动产业进化

如视通过覆盖了超大、大、中、小空间、物体等多行业、全场景的三维重建能力,为企业的线上营销、空间运维、数字化管理等提供有效助力。目前,如视的三维重建技术已经成功渗透并深度服务工业园区、商业零售、文博会展、酒旅餐饮等九大行业,应用范围覆盖营销推广、内部管理、人员引导、模拟培训等诸多场景,引领千行百业的数字化转型。

结尾

三维重建技术作为数字化转型的重要工具,正以前所未有的速度重塑着人类的生活方式。而如视正在以技术创新为驱动,以用户需求为导向,持续加速三维重建技术迭代和产品升级,为千行百业提供更加高效、精准的三维重建解决方案。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

热门推荐HOT

  • 私募理财产品有风险吗?私募理财产品投资范围有哪些
    私募理财产品有风险吗?私募理财

    私募理财产品有风险吗是的,私募理财产品存在一定的风险。私募理财

  • 国债是理财产品吗?国债理财的手续费是多少 观热点
    国债是理财产品吗?国债理财的手

    国债是理财产品吗是的,国债是一种常见的理财产品。国债是指政府发

  • 2020全国食疗康养产销对接交流会在山东潍坊召开
    2020全国食疗康养产销对接交流会

    9月29日,2020全国食疗康养产销对接交流会在山东省潍坊市峡山区隆重召开。大会以食疗康养,产销对接为主题,聚焦食疗康养产业链中的政-产-学-

  • 荣登天猫品类第一的秘密?国货之光空刻意面的成功之路
    荣登天猫品类第一的秘密?国货之

    随着人们生活水平的提高、生活节奏的加快,大家对于所穿、所用、所吃都有着更为严格的要求——希望可以紧跟时代潮流、希望可以让生活更加便

  • Begirl果萃洗发泡泡新品首发!水果の妙,喜欢就泡!
    Begirl果萃洗发泡泡新品首发!水

    随着消费者对于头皮头发护理产品的需求不断升级,尤其是85后、90后、00后等新兴消费人群对于头皮头发护理产品的购买需求更是逐渐向成分天然

  • 推一般充电器被高退货率虐7年 直到遇上充管家才“上岸”
    推一般充电器被高退货率虐7年

    更安全的电动车充电器充管家充电器创始人侯建华(左)向铭扬商贸颁发战略合作牌匾推一般电动车充电器7年,退货率一直都在30%至40%之间,进

  • 第103届全国糖酒商品交易会七大展区巡礼
    第103届全国糖酒商品交易会七大

    龙头企业尽展雄姿,中小企业群星赶月。第103届全国糖酒商品交易会将于10月13日至15日在山东国际会展中心举办。本届展会展览总面积11万㎡,

  • 企惠壹号:速腾集团商业模式和社会责任不断升级途中的一次探索
    企惠壹号:速腾集团商业模式和社

    2020年9月26日,由企惠壹号和广东省家电商会联合发起的企惠壹号亿元惠企中国行大型公益活动天津站启动仪式在天津科技金融大厦隆重开启、成功

  • 独家专访嘉德威钢琴总经理陈莲琴 奢华钢琴为您温暖筑梦
    独家专访嘉德威钢琴总经理陈莲琴

    钢琴作为古今中外乐器中音域最宽的乐器之王,已经成为了家家户户为孩子们选择培养音乐启蒙的乐器首选。如今在中国学习钢琴的人数已经突破了

  • 硬核测评| 河南汉方药业祛斑产品通过功效性评价检测,美白淡斑有话说
    硬核测评| 河南汉方药业祛斑产

    真正精致的女人,满眼风花雪月,脸上却看不到一点风霜。拥有洁净无瑕的皮肤是每一个女人的梦想,但岁月无情,随着年龄的增长,面部肌肤状态

猜你喜欢LOVE

热门推荐HOT

  • 绒言绒语创始人郑淑受邀走进大兴

    近日,IP应用专家、郑州绒言绒语创始人郑淑受黑龙江大兴安岭呼玛县政府之邀,走进呼玛参观调研,就呼玛文旅发展与产业升级进行深入探讨和交

  • 优笑口腔“女神”专用牙膏与苏州

    3月8日,在红星网络电视台的牵头下,上海协胜生物科技有限公司与苏州的数十位女企业家欢聚一起,共庆第112个三八国际妇女节,并向她们送去

  • 小象暖暖献爱心,听力健康咿起行

    在3•3全国爱耳日、3•5学雷锋纪念日来临之际,郑州康园听力言语康复中心承办关爱听力健康,聆听精彩未来宣传教育活动,发起咿起行

  • 抖音电商发布抖音38节趣味榜单,

    随着中国女性社会经济地位的不断提升,她消费的影响力正在增大。而女性生活水平的上升,则让悦己式需求崛起并成为研究热点。她们不仅能买,而

  • 深度观察|3亿人参与后,冰雪运

    第一次,冰雪运动的商业价值集中迸发在冬奥即将落幕时,老牌广告行业媒体AdAge罗列了七个在后冬奥时代值得关注的运动员品牌,谷爱凌名列首

  • 《柯小驼漫游奇境记》上市,绒言

    近日,由新疆作家葛勇创作、以新疆阿克苏柯坪城市IP柯小驼为主角的《柯小驼漫游奇境记》,由甘肃人民出版社出版上市。作为一本地理启蒙、文

  • 在一片“甜蜜蜜”声中,冰雪时光

    卖刨冰起家的蜜雪冰城,从去年开始,依靠大街小巷传唱的你爱我我爱你蜜雪冰城甜蜜蜜的歌曲,可以说是火遍大江南北,也因此甜蜜蜜的旋律作为

  • 冰雪时光:我们为什么要一直走在

    无论是为高颜值的打卡拍照,还是在明亮舒适的店里与三五好友相聚,亦或是下班路上来一杯清爽的水果奶茶,新茶饮已经成为年轻人日常生活的一

  • “健康护学行动”再扬风帆 连花

    寒假进入尾声,各大高校陆续发布开学通知。在疫情防控常态化的当下,初春乍暖还寒,感冒流感病毒悄悄潜入,再加上对新学期、新节奏需要适应

  • 柯小驼受追捧!绒言绒语吉祥物作

    我的微信里收藏了很多‘柯小驼’表情包,这次专门来柯坪县购买‘柯小驼’玩偶和抱枕等,太喜欢它活泼可爱的形象了。2

  • 10个月缜密调试 OPPO Enco X2

    2022年2月24日,中国,深圳——OPPO广东移动通信有限公司在近日召开的OPPO Find X5系列新品发布会上,正式发布旗下新款声学旗舰产品——O

  • 踏潮而行共逐浪,冰雪时光持续拥

    随着北京的喧嚣归于平静,今冬最大的体育赛事也落下了帷幕。在过去的半个多月的时间里,陪伴着观众的不只是精彩的比赛,也有甜甜的美味:为

  • 情人节邂逅元宵节,生鲜品类专属

    情人节与元宵节的双节临门告一段落,抖音电商生鲜行业的专属活动也完美地落下帷幕。情人节烛光晚餐,少不了撒了海盐的牛排、堆成满捧的车厘

  • 共庆夺金时刻!冰雪时光狂送千杯

    2月4日的北京,那场动人心弦再造经典的开幕式你看了吗?有没有被中国人的浪漫感动到,被体育健儿的热血给燃到呢?虽然这一次因为种种原因,普

  • 乐享聆听新体验,自在穿梭内外

    文章来源:钛媒体2022年2月16日,索尼(中国)有限公司发布开放式真无线耳机新品LinkBuds。听音乐、打电话或启用语音助手, 戴着耳机穿梭在

  • 领金牌奶茶,与冰雪时光一起为运

    2月5日,在短道速滑混合团体2000米接力赛决赛中,中国短道速滑队无惧强敌环伺,勇夺此次冬季体育盛事里中国军团的首金。在为中国短道速滑队

  • 万科年货佳品来袭|九龙牦牛肉给

    2021年12月25日,万科物业与四川九龙圣源农牧科技有限公司(以下简称九龙圣源)共同打造具有特色的年货线下推广活动,九龙牦牛肉精彩亮相。

  • Libresse薇尔首次亮相2022营创赛

    2021年12月13日,2022营创赛春季赛启动仪式在中国国际广告节上如期举行。命题品牌、行业大咖与优秀高校学子齐集盛会,共同见证创意再度扬帆

  • 梦洁“中国红,梦洁红”献礼传统

    万户千家今夜好,张灯结彩闹元宵。元宵佳节,是春节之后的第一个重要节日。按传统习俗约定,过完元宵才算过完年,也就意味着正式开启新一年

  • 一方茶饮养一方人,冰雪时光的“

    春节前夕,茶饮连锁品牌冰雪时光推出了济南方言限定饮料杯,杯身印有能偏拉、甜么嗦、杠赛来等,济南人耳熟能详又亲切无比的济南话。据介绍