Test_Agent/docs/TEST_ASSETS.md
jiawei.chen 6f6053ff51 feat: TestAgent 智能测试平台 v1.0
- CLI + Web 双平台,基于 LLM 的 TDD+DDD 自动化测试生成
- 集成 unified-test-platform 903 个 D-Cloud 用例 + 13 个 Robogo 场景
- Agent 5 步流水线: 扫描 -> DDD -> LLM 生成测试
- 精确回归 + UI 变更检查
- 可视化 HTML 测试报告
- 暗色/亮色主题切换
- 19 个 API 端点 + 6 个 SPA 页面
- 15/15 项 TDD+DDD 合规
2026-07-08 11:27:38 +08:00

130 lines
5.0 KiB
Markdown
Raw Permalink Blame History

This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

# 测试用例资产清单
## 一、D-Cloud 测试用例(22 模块,903 个测试函数)
### 按模块分布
| # | 模块 | 标记 | 用例数 | 测试文件 |
|---|------|------|--------|---------|
| 1 | data_generation | `data_generation` | 234 | 15 |
| 2 | data_space | `data_space or dataspace` | 155 | 7 |
| 3 | data_set | `dataset` | 80 | 9 |
| 4 | model_workshop | `model_workshop` | 80 | 6 |
| 5 | device_manage | `device_manage` | 58 | 3 |
| 6 | workbench | `workbench` | 34 | 3 |
| 7 | cloud_desktop | `cloud_desktop` | 20 | 4 |
| 8 | mirror_center | `mirror_center` | 20 | 4 |
| 9 | dev_machine | `dev_machine` | 13 | 4 |
| 10 | lora_finetune | `lora_finetune` | 20 | 3 |
| 11 | material_library | `material_library` | 20 | 3 |
| 12 | model_square | `model_square` | 20 | 3 |
| 13 | monitor | `monitor` | 20 | 3 |
| 14 | prompt_library | `prompt_library` | 20 | 3 |
| 15 | login | `login` | 15 | 2 |
| 16 | data | 基础 | 10 | 2 |
| 17 | base | 公共 | 8 | 2 |
| 18 | features | 特性 | 5 | 1 |
| 19 | fixtures | 夹具 | 5 | 1 |
| 20 | robogo | `robogo` | 3 | 1 |
| 21 | utils | 工具 | 2 | 1 |
| 22 | conftest | 配置 | 0 | 0 |
| **总计** | | | **903** | **73** |
### E2E 测试详情
#### API 全链路(8 条)
| 编号 | 名称 | 描述 | 测试路径 |
|------|------|------|---------|
| ① | 任务全链路 | 创建→列表→详情→停止→删除 | data_generation::test_full_pipeline_create_stop_delete |
| ② | 任务结果 | 创建→结果→详情→评价→删除 | data_generation::test_task_result_full_pipeline |
| ③ | 任务评测 | 创建→触发评测→停止评测 | data_generation::test_task_scoring_full_pipeline |
| ④ | LORA | 列表→创建→Pod→删除 | data_generation::test_lora_task_full_pipeline |
| ⑤ | 系统提示词 | 创建→详情→更新→列表→删除 | data_generation::test_system_prompt_full_pipeline |
| ⑥ | 工作流 | 创建→详情→更新→文件→删除 | data_generation::test_workflow_full_pipeline |
| ⑦ | 数据空间 | 创建→列表→文件→文件夹→删除 | data_generation::test_dataspace_full_pipeline |
| ⑧ | 跨模块组合 | 4 个列表接口组合调用 | data_generation::test_all_core_lists_return_ok |
#### UI 点击测试(3 条)
| 名称 | 描述 | 执行模式 |
|------|------|---------|
| 任务创建 | 点击创建→停止→删除 | 有头浏览器 |
| 数据空间 | 点击创建→删除空间 | 有头浏览器 |
| 跨模块导航 | 点击各模块 Tab 验证 | 有头浏览器 |
### 测试标记体系
| 标记 | 说明 |
|------|------|
| `smoke` | 冒烟测试(核心主流程) |
| `e2e` | 端到端测试 |
| `api` | API 接口测试 |
| `ui` | UI 交互测试 |
| `flow` | 流程/集成测试 |
| `login` | 登录相关测试 |
| `comprehensive` | 综合测试 |
| `real_creation` | 创建真实资源 |
| `flaky` | 已知不稳定(CI 自动重试) |
| `requires_cleanup` | 需要清理 fixture |
| `destructive` | 会修改/删除现有资源 |
| `external_dependency` | 依赖外部服务状态 |
---
## 二、Robogo 测试用例(13 个条目)
### 全量巡检
| 产品 | 描述 | 入口脚本 | 行数 |
|------|------|---------|------|
| Robogo 全量巡检 | 串行运行全部 13 个场景脚本 | `framework/scripts/run_all.py` | - |
| 数据闭环 | 端到端业务流水线验证 | `framework/scripts/run_data_loop.py` | - |
### 独立场景脚本
| # | 脚本 | 行数 | 状态 |
|---|------|------|------|
| 1 | compute_resource_scenario.py | - | ✅ |
| 2 | desktop_lifecycle.py | - | ✅ |
| 3 | file_system_scenario.py | - | ✅ |
| 4 | image_generation_scenario.py | - | ✅ |
| 5 | mirror_assets.py | - | ✅ |
| 6 | monkey_scenario.py | - | ✅ |
| 7 | openclaw_scenario.py | - | ✅ |
| 8 | quantization_scenario.py | - | ✅ |
| 9 | test_billing.py | - | ✅ |
| 10 | three_d_assets_scenario.py | - | ✅ |
| 11 | three_d_generation_scenario.py | - | ✅ |
---
## 三、LLM 生成的测试(Agent 输出)
| 源文件 | 生成文件 | 大小 | 行数 | 测试函数 | AAA | should |
|--------|---------|------|------|---------|-----|--------|
| agent/llm_client.py | test_llm_client.py | 23,857 | 652 | 35 | ✅ | ✅ |
| agent/git_ops.py | test_git_ops.py | 10,720 | 246 | 13 | ✅ | ✅ |
| **总计** | | **34,577** | **898** | **48** | | |
---
## 四、总览统计
| 平台 | 来源 | 数量 | 执行方式 |
|------|------|------|---------|
| D-Cloud | 已有用例 | 903 个测试函数 | pytest |
| Robogo | 已有用例 | 13 个场景脚本 | Python 脚本 |
| Agent 生成 | LLM 输出 | 48 个测试函数 | pytest |
| **总计** | | **964 个测试** | |
---
## 五、测试执行依赖
| 依赖 | 说明 | 配置位置 |
|------|------|---------|
| TEST_USERNAME | 地瓜机器人平台登录账号 | `.env` |
| TEST_PASSWORD | 对应密码 | `.env` |
| Playwright | 浏览器自动化(UI 测试) | pip install |
| Chromium | 浏览器引擎 | playwright install |
| OpenAI API Key | LLM 测试生成 | `.env` 或 Web 页面输入 |
| config/settings.py | 平台配置 | `config/` |