课程简介
这门课解决什么问题 大模型的非确定性输出与“幻觉”现象,使传统基于断言和确定性的测试方法失效。传统软件测试依赖明确的输入输出映射,但大模型回答往往存在随机性、主观性和事实偏差,导致回归测试难以用固定断言覆盖。这门课聚焦AI大模型的全栈测试开发,旨在解决从模型评估、提示词测试到自动化回归的工程落地难题,填补AI应用层测试的空白。学员将掌握如何构建可量化的评估…
这门课解决什么问题
大模型的非确定性输出与“幻觉”现象,使传统基于断言和确定性的测试方法失效。传统软件测试依赖明确的输入输出映射,但大模型回答往往存在随机性、主观性和事实偏差,导致回归测试难以用固定断言覆盖。这门课聚焦AI大模型的全栈测试开发,旨在解决从模型评估、提示词测试到自动化回归的工程落地难题,填补AI应用层测试的空白。学员将掌握如何构建可量化的评估体系,如何设计覆盖多种场景的提示词测试用例,以及如何搭建端到端的自动化回归系统,让大模型应用的测试从“靠人眼”升级为“靠系统”。
适合什么基础与建议学习顺序
适合具备Python编程基础和初步机器学习概念的开发者。建议学习顺序为:先掌握测试设计原理与大模型评估指标(如困惑度、BLEU、ROUGE等基础概念),再学习如何搭建测试Pipeline和基于Agent的自动化测试框架,最后切入全栈测试平台的工程实现。整体路径从评估指标理解入手,过渡到单点测试设计,再向上构建自动化系统,逐步建立从“测什么”到“怎么测”再到“谁来测”的完整认知。
学完能独立产出什么与资料配合练习方式
学完可独立完成大模型应用的测试基础设施建设,包括编写自定义评估脚本、设计覆盖多种场景的提示词测试用例集、构建端到端的自动化回归系统。资料包以源码和工程实现为主,建议配合练习时直接动手搭建项目骨架,复刻评估Pipeline,而非仅停留在理论观看。具体操作为:修改开源模型权重和测试数据进行实操,对照课程中的代码实现理解每一步的工程意图,通过动手调参和补全代码来深化对测试框架的理解。
网盘截图:
课程目录:
├── AI大模型20250316
│ ├── 3月30日
│ │ ├── 001.1-Ai应用搭建思路.mp4
│ │ ├── 007.7-Dify工作流搭建-下.mp4
│ │ ├── 003.3-Coze接口调用.mp4
│ │ ├── 002.2-Ai应用调试和优化.mp4
│ │ ├── 006.6-Dify工作流搭建-上.mp4
│ │ ├── 005.5-Dify的安装和配置.mp4
│ │ ├── 004.4-大模型本地部署+远程api申请.mp4
│ ├── 5月18日
│ │ ├── 007.7-接口自动化集成大模型功能实现-3.mp4
│ │ ├── 002.2-Langchain框架基本概念.mp4
│ │ ├── 003.3-Langchain框架实战.mp4
│ │ ├── 006.6-接口自动化集成大模型功能实现-2.mp4
│ │ ├── 004.4-接口自动化集成大模型设计思路.mp4
│ │ ├── 008.8-接口自动化集成大模型功能实现-4.mp4
│ │ ├── 005.5-接口自动化集成大模型功能实现-1.mp4
│ │ ├── 001.1-性能测试小助手补充讲解.mp4
│ ├── 4月13日
│ │ ├── 005.5-禅道平台业务讲解.mp4
│ │ ├── 002.2-优惠券工作流-1.mp4
│ │ ├── 004.4-优惠券工作流-3.mp4
│ │ ├── 003.3-优惠券工作流-2.mp4
│ │ ├── 001.1-优惠券业务讲解.mp4
│ ├── 5月25日
│ │ ├── 002.2-Mcp原理讲解.mp4
│ │ ├── 003.3-Mcp运行模式.mp4
│ │ ├── 001.1-接口自动化框架脚本生成.mp4
│ │ ├── 005.5-大模型微调-上.mp4
│ │ ├── 004.4-Mcp服务配置.mp4
│ │ ├── 006.6-大模型微调-中.mp4
│ │ ├── 007.7-大模型微调-下.mp4
│ ├── 4月20日
│ │ ├── 003.3-禅道智能体联调.mp4
│ │ ├── 002.2-接口开发:写用例到数据库-下.mp4
│ │ ├── 001.1-接口开发:写用例到数据库-上.mp4
│ ├── 3月16日
│ │ ├── 006.5-结构化提示词.mp4
│ │ ├── 002.2-Transformer架构-上.mp4
│ │ ├── 007.6-提示词实战:用例生成+Sql语句生成.mp4
│ │ ├── 003.2-Transformer架构-下.mp4
│ │ ├── 001.1-大模型原理.mp4
│ ├── 5月11日
│ │ ├── 004.4-性能测试执行助手-1.mp4
│ │ ├── 007.7-性能测试执行助手-4.mp4
│ │ ├── 008.8-性能测试执行助手-5.mp4
│ │ ├── 005.5-性能测试执行助手-2.mp4
│ │ ├── 006.6-性能测试执行助手-3.mp4
│ ├── 6月7日
│ │ ├── 001.1-Cursor编程工具-上.mp4
│ ├── 3月23日
│ │ ├── 003.3-智能体开发:软件测试简历分析优化.mp4
│ │ ├── 007.7-智能体开发:需求转用例到表格-下.mp4
│ │ ├── 001.1-智能体开发:软件测试面试官.mp4
│ │ ├── 005.5-智能体开发:需求转用例智能体.mp4
│ │ ├── 006.6-智能体开发:需求转用例到表格-上.mp4
│ │ ├── 004.4-智能体开发:需求转用例工作流.mp4
│ │ ├── 002.2-智能体开发:软件测试简历分析.mp4
├── AI培训课程
│ ├── AI培训课程.zip
课程目录
AI大模型20250316
3月30日
001.1-Ai应用搭建思路.mp4
007.7-Dify工作流搭建-下.mp4
003.3-Coze鎺ュ彛璋冪敤.mp4
002.2-Ai应用调试和优化.mp4
006.6-Dify工作流搭建-上.mp4
005.5-Dify的安装和配置.mp4
004.4-大模型本地部署+远程api申请.mp4
5月18日
007.7-接口自动化集成大模型功能实现-3.mp4
002.2-Langchain框架基本概念.mp4
003.3-Langchain框架实战.mp4
006.6-接口自动化集成大模型功能实现-2.mp4
004.4-接口自动化集成大模型设计思路.mp4
008.8-接口自动化集成大模型功能实现-4.mp4
005.5-接口自动化集成大模型功能实现-1.mp4
001.1-性能测试小助手补充讲解.mp4
4月13日
005.5-禅道平台业务讲解.mp4
002.2-优惠券工作流-1.mp4
004.4-优惠券工作流-3.mp4
003.3-优惠券工作流-2.mp4
001.1-优惠券业务讲解.mp4
5月25日
002.2-Mcp原理讲解.mp4
003.3-Mcp运行模式.mp4
001.1-接口自动化框架脚本生成.mp4
005.5-大模型微调-上.mp4
004.4-Mcp服务配置.mp4
006.6-大模型微调-中.mp4
007.7-大模型微调-下.mp4
4月20日
003.3-禅道智能体联调.mp4
002.2-接口开发:写用例到数据库-下.mp4
001.1-接口开发:写用例到数据库-上.mp4
3月16日
006.5-结构化提示词.mp4
002.2-Transformer架构-上.mp4
007.6-提示词实战:用例生成+Sql语句生成.mp4
003.2-Transformer架构-下.mp4
001.1-大模型原理.mp4
5月11日
004.4-性能测试执行助手-1.mp4
007.7-性能测试执行助手-4.mp4
008.8-性能测试执行助手-5.mp4
005.5-性能测试执行助手-2.mp4
006.6-性能测试执行助手-3.mp4
6月7日
3月23日
003.3-智能体开发:软件测试简历分析优化.mp4
007.7-智能体开发:需求转用例到表格-下.mp4
001.1-智能体开发:软件测试面试官.mp4
005.5-智能体开发:需求转用例智能体.mp4
006.6-智能体开发:需求转用例到表格-上.mp4
004.4-智能体开发:需求转用例工作流.mp4
002.2-智能体开发:软件测试简历分析.mp4
AI培训课程
AI培训课程.zip