实景三维模型:
概念、方法、应用与挑战

研究意义

实景三维模型正从过去的"表达现实"发展演变为现今的"连接现实、认知现实乃至预见现实"。作为国家重要的新型基础设施,实景三维模型对于地理空间认知、虚拟地理环境、时空计算等科学研究具有重要价值。

随着实景三维中国建设的全面推进,"实景三维+"的融合应用模式已渗透至诸多行业,为数字中国建设、数字经济发展、精细化社会治理等国家战略和社会需求提供关键支撑。

概念框架演进

原生实景三维模型

通过摄影测量、激光扫描等方式获取的原始数据,经自动化处理流程生成的表达现实世界几何与外观的三维模型。

数据驱动的实景还原
密集点云、Mesh、高斯点集合
标准化、权威性基础设施服务

次生实景三维模型

在原生模型基础上,通过深度二次加工生成的满足特定行业应用需求的模型,涉及实例分割、几何规则化重构、信息增强等处理。

需求驱动的专题表达
单体化建筑、参数化BIM模型
灵活性、专用性和创新应用

研究范畴五层次

1

数据层

空-天-地-海多源数据协同采集、多源异构数据融合、数据治理、智能化信息提取等,构建全域覆盖的三维"数字底板"。

2

模型层

数据模型与结构、自动化和语义化建模、单体化提取与分割、模型优化与融合、实时动态增量更新、多模态数据集成管理等。

3

平台层

分布式空间数据存储、高效空间索引、GPU加速渲染、大规模可视化与交互、业务系统集成、时空计算与分析、模拟仿真与推理。

4

应用层

自主可控软硬件开发、产业生态建设、产学研融合机制、商业模式、行业赋能与应用范式,让模型"用起来、活起来"。

5

理论与标准层

空间认知、地理实体与空间关系、人机协同理论,以及数据采集、产品分类、模型构建、质量检验、数据交换、服务接口等全流程标准规范。

核心建模技术

倾斜摄影测量

通过多视角相机获取影像,经空三加密、密集匹配、三角网构网与纹理映射生成实景三维网格模型,是当前城市级建模的主要方法。

✓ 纹理完整、覆盖广
✓ 自动化程度高
✓ 厘米级精度

激光雷达LiDAR

具有数据获取周期短、精度高和时效性强等优势,毫米至厘米级精度,结构稳定,通常与影像数据融合使用以提升建模完整性。

✓ 几何精度高
✓ 对光照不敏感
✓ 结构边界稳定

神经辐射场NeRF

基于神经网络的三维场景重建方法,通过可微体渲染学习空间位置的辐射信息与体密度,实现高质量三维表达与真实感新视图合成。

✓ 连续辐射表达
✓ 新视角合成质量高
✓ 复杂外观建模能力强

3D高斯泼溅3DGS

使用可优化的三维高斯椭球集合直接表征场景,基于点云透明混合的可微渲染技术,具有高效性、稳定性和较强适应性。

  • 实时渲染能力强,视觉质量高
  • 连续表达能力强,交互效率突出

多源数据融合建模

通过融合空地倾斜影像、激光点云、矢量数据及语义属性等多源信息,可有效提升模型细节表达与整体精度。

  • 空地影像与点云融合
  • LiDAR与MVS协同建模

次生实景建模关键技术

场景语义分割

将三维几何基元映射至预定义语义类别,实现由几何表达向语义认知的转变,包括点云语义分割与Mesh语义分割。

几何对象单体化

依据空间边界与语义特征,将连续几何要素划分为相互独立、完整且唯一的实体单元,支撑对象级管理与精细化分析。

结构化建模

通过特征线与关键边界构建几何骨架,在规则约束下将对象拆解为结构化单元,实现几何与纹理的统一表达。

转化路径

原生实景三维模型向次生模型的转化遵循"语义解析 → 结构重构 → 信息注入"的技术路径,实现从"数据驱动的原生模型"向"需求驱动的次生模型"的系统转化。

应用范式四维度

时空底座
多源异构数据聚合与融合
Spatio-temporal Base
信息提取
线上三维协同作业新模式
Information Extraction
连通现实
动态监测与立体化分析
Connecting Reality
赋能行业
深度融合递进发展
Industry Empowerment

"时空底座-信息提取-连通现实-赋能行业"四个维度环环相扣,完整构成了从数据基底到行业赋能的逻辑闭环,推动各领域数字化转型。

行业赋能四大范式

空间可视化融合

将行业数据与实景三维底图进行空间叠加与一体化呈现,解决从二维抽象到三维实景的"认知鸿沟"问题,实现信息的直观化与场景化。

业务分析决策增强

将实景三维模型作为交互式分析计算环境,通过调用三维空间分析算子直接在场景中模拟、推演与评估,为复杂决策提供量化支撑。

全流程业务重构

以实景三维模型为统一空间操作界面和协同底座,将业务规则、审批逻辑、协同机制嵌入三维环境,实现全流程线上化、协同化与闭环管理。

AI智能体自主决策

模型核心服务对象从辅助"人"的决策转向直接作为"机器"感知、认知与行动的基础,实现从"人理解"到"机器理解"的根本性跨越。

典型应用领域

国土空间规划

三维论证、合规性审查、城市设计效果推演

自然资源管理

资产清查、生态监管、地质灾害防治

智慧城市运营

交通管理、应急指挥、基础设施监测

农业农村发展

宅基地管理、乡村规划、数字化治理

低空经济

无人机配送、飞行路径规划、空域管理

文化遗产保护

数字化存档、病害检测、虚拟展示

关键问题与挑战

01 地理信息认知范式转型

从"静态快照"到"四维动态孪生"的时空延展,需要构建能够实时反映物理世界动态变化、并能与人类认知逻辑无缝对接的"活"的数字空间。

02 特殊纹理区域三维重建

面对弱纹理区域(路面、墙面)和非朗伯体表面(玻璃、水面),传统方法往往失效,需要结合神经渲染技术和生成式AI实现认知推理建模。

03 大规模多粒度高效建模

如何实现从微观部件级到宏观地形级的多粒度实体一体化抽象、关联与协同管理,构建城市实体拓扑知识图谱,探索跨尺度衍生和聚合方法。

04 时空动态映射与增量更新

面对物联网传感器产生的海量流式数据,需要实现实时映射到三维空间基底中,并记录城市从规划到拆除更新的完整演变过程。

05 面向时空智能的新一代数据模型

需要具备可微特性或支持高维向量嵌入检索,能够直接与大语言模型等AI认知工具对接,实现开放词汇的场景理解与查询。

06 行业深度应用融合

测绘部门生产的"基础地理实体"与应用部门的"业务管理对象"存在语义鸿沟,不同行业的定制化开发成本高昂,缺乏统一的跨行业数据接口标准。

未来发展方向

向"时空智能中枢"演进

在需求升级、数据爆发与人工智能技术变革的三重驱动下,实景三维模型将从提供静态的"实景基座"向提供动态的"决策服务"转型。

海量泛在数据高效融合

构建能够实时"吞吐"与"消化"海量异构数据的活体数字空间,融合空、天、地、水下及物联网等多源感知网络,确保数字孪生体与物理世界的实时同步。

AI技术重塑全链路

生成式AI与隐式神经表征技术将加速解决大规模场景的低成本建模问题,结合大语言模型与多模态视觉大模型,实现自动化的全要素语义分割与知识提取。

人机物三元融合

通过"几何-语义-知识"的一体化构建,实景三维模型将成为AI智能体理解三维世界的认知基座,最终实现人机物三元融合的智能空间服务与自动化决策支持。

核心突破方向