3D感知技术与实践（第二期）

课程简介

《3D感知技术与实践（第二期）》随着大量机器视觉应用的井喷式发展，3D感知技术成为程序员、开发者需要掌握的重要技能【技能收获】学完可掌握：核心实战技能、项目驱动学习。课程以实战为导向，覆盖从基础概念到完整项目落地的关键步骤，配套章节笔记便于课后复盘与面试前快速回顾。【学习建议】建议按目录顺序学习，先打基础再进入综合实战章节；每完成 2～3 节可结合笔记整理一份学习小结，最终尝试独立复现一套完整 Demo 写入个人作品集。【就业发展】可面向岗位：AI 应用工程师、RAG 系统开发、Java 后端 + 大模型落地、企业知识库架构师。大模型应用岗需求持续走高，具备「后端 + RAG 落地」复合能力的

已有 1 人浏览发布 2026-09-15 更新 2026-09-20

3D 感知不是新概念，但近两年它在工业检测、机器人抓取、自动驾驶和 AR/VR 里的落地速度明显加快，导致很多做 2D 视觉或后端出身的开发者被迫补这一课。这门《3D感知技术与实践（第二期）》的定位比较明确：不是做概念科普，也不是只跑通一个 demo，而是把点云处理、深度估计、相机标定、配准重建这条链路拆成可复用的工程模块，配合第二期迭代后的案例讲清楚每一步的输入输出和踩坑点。

技术栈覆盖：从采集到感知输出

课程围绕两条主线展开。一条是几何主线：相机模型与标定、双目/结构光深度获取、点云滤波与分割、ICP 与特征配准、表面重建。另一条是学习主线：用深度网络做单目/双目深度估计、点云语义分割与 3D 检测。两条线在「如何把原始深度数据变成可用的场景表达」这个节点上交汇。工程实现上以 Python 为主，涉及 Open3D、PCL 绑定、OpenCV 以及主流深度学习框架；对性能敏感的部分会讨论 CUDA 加速和点云下采样的取舍。如果你之前只调用过现成的 SDK 拿深度图，这里能补上「为什么这个参数要这么设」的中间层。

项目结构：按可复用模块组织

第二期在组织方式上更偏工程化，章节之间不是线性堆叠，而是按模块切分：数据采集与标定模块、点云预处理模块、配准与重建模块、深度估计与检测模块、可视化与评估模块。每个模块都有相对独立的接口约定，意味着你可以把标定部分直接搬到自己的项目里，也可以只用点云预处理那一块。配套的章节笔记重点记录的是参数选择依据和失败案例分析，而不是代码逐行解释——这类笔记在排查「为什么我的点云配准总是发散」时比视频回放更高效。

适合拿来对照实践的几个点

相机标定与手眼标定的完整流程，包括标定板选择、误差评估和重投影误差的解读，这部分在真实产线上远比教程里复杂。
点云配准的工程调参：体素下采样尺寸、法线估计邻域、ICP 的最大迭代与收敛阈值如何联动，课程给出了不同场景下的经验区间。
深度估计模型的输入预处理与后处理对齐，尤其是尺度恢复和边缘保持，这是从论文 demo 走向可用结果的关键一步。
完整链路的数据流设计：从传感器帧到感知结果输出，中间哪些环节可以异步、哪些必须同步，直接影响实时性。

自学路径建议

建议按目录顺序推进，但不要一次只看不写。基础概念章节快速过，把时间留给标定和配准这两块——它们是后面所有实战的前提。每完成两到三节，用笔记整理一份小结，重点写「这一节的输入是什么、输出是什么、我改哪个参数会出问题」。综合实战章节不要只跟着敲，先自己按接口约定实现一版，再对照参考实现找差异。最终目标是独立复现一套从采集到感知输出的完整 Demo，并把其中一两个模块替换成自己的实现，这样在面试或项目里讲的时候，你能说清楚取舍而不只是「跑通了」。

如果你已经有一定编程基础，并且手头有深度相机或点云数据可以练手，这门资料的性价比会更高。它更适合当作对照实践的参考，而不是看完就结束的视频课。

随着大量机器视觉应用的井喷式发展，3D感知技术成为程序员、开发者需要掌握的重要技能

课程推荐

视频目录（19 节）

* │      1-1 1-2.mp4

* │      1.3.mp4

* │      1.4.mp4

* │      2-1 2-2 2-3.mp4

* │      2-4 2-5 2-6 2-7 2-8.mp4

* │      3.1 3.2 3.3 3.4.mp4

* │      3.5 3.6.mp4

* │      4.1 4.2.mp4

* │      4.3 4.4 4.5.mp4

* │      5.1 5.2 5.3.mp4

* │      5.4 5.5 5.6.mp4

* │      6.1 6.2.mp4

* │      6.3 6.4 6.5 6.6.mp4

* │      6.7.mp4

* │      7.1 7.2.mp4

* │      7.3 7.4 7.5 7.6.mp4

*         8.1 8.2.mp4

*         8.3.mp4

*         8.4 8.5 8.6.mp4

配套笔记（15 份 PDF）

* │  【3D感知】期末考试B卷.pdf

* │      CH1-课件.pdf

* │      CH1_CH5 -作业（复习周）.pdf

* │      CH2-课件.pdf

* │      CH3-课件.pdf

* │      CH4-作业.pdf

* │      CH4-课件.pdf

* │      CH5-作业.pdf

* │      CH5-课件.pdf

* │      CH6-作业.pdf

* │      CH6-课件.pdf

* │      CH7-作业.pdf

* │      CH7-课件.pdf

*         CH8-作业.pdf

*         CH8-课件.pdf