- CLI + Web 双平台,基于 LLM 的 TDD+DDD 自动化测试生成 - 集成 unified-test-platform 903 个 D-Cloud 用例 + 13 个 Robogo 场景 - Agent 5 步流水线: 扫描 -> DDD -> LLM 生成测试 - 精确回归 + UI 变更检查 - 可视化 HTML 测试报告 - 暗色/亮色主题切换 - 19 个 API 端点 + 6 个 SPA 页面 - 15/15 项 TDD+DDD 合规
130 lines
5.0 KiB
Markdown
130 lines
5.0 KiB
Markdown
# 测试用例资产清单
|
||
|
||
## 一、D-Cloud 测试用例(22 模块,903 个测试函数)
|
||
|
||
### 按模块分布
|
||
|
||
| # | 模块 | 标记 | 用例数 | 测试文件 |
|
||
|---|------|------|--------|---------|
|
||
| 1 | data_generation | `data_generation` | 234 | 15 |
|
||
| 2 | data_space | `data_space or dataspace` | 155 | 7 |
|
||
| 3 | data_set | `dataset` | 80 | 9 |
|
||
| 4 | model_workshop | `model_workshop` | 80 | 6 |
|
||
| 5 | device_manage | `device_manage` | 58 | 3 |
|
||
| 6 | workbench | `workbench` | 34 | 3 |
|
||
| 7 | cloud_desktop | `cloud_desktop` | 20 | 4 |
|
||
| 8 | mirror_center | `mirror_center` | 20 | 4 |
|
||
| 9 | dev_machine | `dev_machine` | 13 | 4 |
|
||
| 10 | lora_finetune | `lora_finetune` | 20 | 3 |
|
||
| 11 | material_library | `material_library` | 20 | 3 |
|
||
| 12 | model_square | `model_square` | 20 | 3 |
|
||
| 13 | monitor | `monitor` | 20 | 3 |
|
||
| 14 | prompt_library | `prompt_library` | 20 | 3 |
|
||
| 15 | login | `login` | 15 | 2 |
|
||
| 16 | data | 基础 | 10 | 2 |
|
||
| 17 | base | 公共 | 8 | 2 |
|
||
| 18 | features | 特性 | 5 | 1 |
|
||
| 19 | fixtures | 夹具 | 5 | 1 |
|
||
| 20 | robogo | `robogo` | 3 | 1 |
|
||
| 21 | utils | 工具 | 2 | 1 |
|
||
| 22 | conftest | 配置 | 0 | 0 |
|
||
| **总计** | | | **903** | **73** |
|
||
|
||
### E2E 测试详情
|
||
|
||
#### API 全链路(8 条)
|
||
| 编号 | 名称 | 描述 | 测试路径 |
|
||
|------|------|------|---------|
|
||
| ① | 任务全链路 | 创建→列表→详情→停止→删除 | data_generation::test_full_pipeline_create_stop_delete |
|
||
| ② | 任务结果 | 创建→结果→详情→评价→删除 | data_generation::test_task_result_full_pipeline |
|
||
| ③ | 任务评测 | 创建→触发评测→停止评测 | data_generation::test_task_scoring_full_pipeline |
|
||
| ④ | LORA | 列表→创建→Pod→删除 | data_generation::test_lora_task_full_pipeline |
|
||
| ⑤ | 系统提示词 | 创建→详情→更新→列表→删除 | data_generation::test_system_prompt_full_pipeline |
|
||
| ⑥ | 工作流 | 创建→详情→更新→文件→删除 | data_generation::test_workflow_full_pipeline |
|
||
| ⑦ | 数据空间 | 创建→列表→文件→文件夹→删除 | data_generation::test_dataspace_full_pipeline |
|
||
| ⑧ | 跨模块组合 | 4 个列表接口组合调用 | data_generation::test_all_core_lists_return_ok |
|
||
|
||
#### UI 点击测试(3 条)
|
||
| 名称 | 描述 | 执行模式 |
|
||
|------|------|---------|
|
||
| 任务创建 | 点击创建→停止→删除 | 有头浏览器 |
|
||
| 数据空间 | 点击创建→删除空间 | 有头浏览器 |
|
||
| 跨模块导航 | 点击各模块 Tab 验证 | 有头浏览器 |
|
||
|
||
### 测试标记体系
|
||
|
||
| 标记 | 说明 |
|
||
|------|------|
|
||
| `smoke` | 冒烟测试(核心主流程) |
|
||
| `e2e` | 端到端测试 |
|
||
| `api` | API 接口测试 |
|
||
| `ui` | UI 交互测试 |
|
||
| `flow` | 流程/集成测试 |
|
||
| `login` | 登录相关测试 |
|
||
| `comprehensive` | 综合测试 |
|
||
| `real_creation` | 创建真实资源 |
|
||
| `flaky` | 已知不稳定(CI 自动重试) |
|
||
| `requires_cleanup` | 需要清理 fixture |
|
||
| `destructive` | 会修改/删除现有资源 |
|
||
| `external_dependency` | 依赖外部服务状态 |
|
||
|
||
---
|
||
|
||
## 二、Robogo 测试用例(13 个条目)
|
||
|
||
### 全量巡检
|
||
|
||
| 产品 | 描述 | 入口脚本 | 行数 |
|
||
|------|------|---------|------|
|
||
| Robogo 全量巡检 | 串行运行全部 13 个场景脚本 | `framework/scripts/run_all.py` | - |
|
||
| 数据闭环 | 端到端业务流水线验证 | `framework/scripts/run_data_loop.py` | - |
|
||
|
||
### 独立场景脚本
|
||
|
||
| # | 脚本 | 行数 | 状态 |
|
||
|---|------|------|------|
|
||
| 1 | compute_resource_scenario.py | - | ✅ |
|
||
| 2 | desktop_lifecycle.py | - | ✅ |
|
||
| 3 | file_system_scenario.py | - | ✅ |
|
||
| 4 | image_generation_scenario.py | - | ✅ |
|
||
| 5 | mirror_assets.py | - | ✅ |
|
||
| 6 | monkey_scenario.py | - | ✅ |
|
||
| 7 | openclaw_scenario.py | - | ✅ |
|
||
| 8 | quantization_scenario.py | - | ✅ |
|
||
| 9 | test_billing.py | - | ✅ |
|
||
| 10 | three_d_assets_scenario.py | - | ✅ |
|
||
| 11 | three_d_generation_scenario.py | - | ✅ |
|
||
|
||
---
|
||
|
||
## 三、LLM 生成的测试(Agent 输出)
|
||
|
||
| 源文件 | 生成文件 | 大小 | 行数 | 测试函数 | AAA | should |
|
||
|--------|---------|------|------|---------|-----|--------|
|
||
| agent/llm_client.py | test_llm_client.py | 23,857 | 652 | 35 | ✅ | ✅ |
|
||
| agent/git_ops.py | test_git_ops.py | 10,720 | 246 | 13 | ✅ | ✅ |
|
||
| **总计** | | **34,577** | **898** | **48** | | |
|
||
|
||
---
|
||
|
||
## 四、总览统计
|
||
|
||
| 平台 | 来源 | 数量 | 执行方式 |
|
||
|------|------|------|---------|
|
||
| D-Cloud | 已有用例 | 903 个测试函数 | pytest |
|
||
| Robogo | 已有用例 | 13 个场景脚本 | Python 脚本 |
|
||
| Agent 生成 | LLM 输出 | 48 个测试函数 | pytest |
|
||
| **总计** | | **964 个测试** | |
|
||
|
||
---
|
||
|
||
## 五、测试执行依赖
|
||
|
||
| 依赖 | 说明 | 配置位置 |
|
||
|------|------|---------|
|
||
| TEST_USERNAME | 地瓜机器人平台登录账号 | `.env` |
|
||
| TEST_PASSWORD | 对应密码 | `.env` |
|
||
| Playwright | 浏览器自动化(UI 测试) | pip install |
|
||
| Chromium | 浏览器引擎 | playwright install |
|
||
| OpenAI API Key | LLM 测试生成 | `.env` 或 Web 页面输入 |
|
||
| config/settings.py | 平台配置 | `config/` | |