Keyboard shortcuts

Press or to navigate between chapters

Press S or / to search in the book

Press ? to show this help

Press Esc to hide this help


title: “Dogfood — Exploratory QA of web apps: find bugs, evidence, reports” sidebar_label: “Dogfood” description: “Exploratory QA of web apps: find bugs, evidence, reports”

{/* 本页面由 website/scripts/generate-skill-docs.py 根据技能对应的 SKILL.md 文件自动生成。请直接编辑源文件 SKILL.md,而非此页面。 */}

Dogfood

Web 应用程序的探索性质量检测:用于发现缺陷、收集证据并生成报告。

技能元数据

来源内置(默认已安装)
路径skills/dogfood
版本1.0.0
支持平台linux、macos、windows
标签qatestingbrowserwebdogfood

参考:完整 SKILL.md 文件

:::info 以下是当触发该技能时 Hermes 会加载的完整技能定义。当技能处于激活状态时,智能体将依据此内容执行操作。
::

Dogfood:系统化的 Web 应用程序质量检测

概述

该技能将指导您使用浏览器工具集对 Web 应用程序进行系统化的探索性质量检测。您需要浏览应用程序、与界面元素交互、收集问题相关证据,并生成结构化的缺陷报告。

先决条件

  • 必须具备浏览器工具集(包括 browser_navigatebrowser_snapshotbrowser_clickbrowser_typebrowser_visionbrowser_consolebrowser_scrollbrowser_backbrowser_press 等功能)
  • 需要用户提供目标网址及检测范围

输入参数

用户需提供以下信息:

  1. 目标网址——检测的入口地址
  2. 检测范围——需要重点检查的区域或功能(如需全面检测,可选择“整个网站”)
  3. 输出目录(可选)——用于保存截图和报告的路径(默认为 ./dogfood-output

工作流程

请按照以下五阶段的系统化流程操作:

第一阶段:规划

  1. 创建输出目录结构:
{output_dir}/
├── screenshots/       # Evidence screenshots
└── report.md          # Final report (generated in Phase 5)
  1. 根据用户输入确定测试范围。
  2. 规划需要测试的页面和功能,以此构建初步的站点地图:
    • 首页/主页
    • 导航链接(页头、页脚、侧边栏)
    • 关键用户流程(注册、登录、搜索、结账等)
    • 表单与交互元素
    • 边界情况(空状态、错误页面、404错误页)

第二阶段:探索

针对计划中的每个页面或功能:

  1. 导航至该页面:

    browser_navigate(url="https://example.com/page")
    
  2. 生成快照以了解 DOM 结构:

    browser_snapshot()
    
  3. 检查控制台是否存在 JavaScript 错误:

    browser_console(clear=true)
    

每次页面跳转以及发生任何重要交互后都应执行此操作。无声的 JavaScript 错误属于极具价值的发现。

  1. 截取带注释的屏幕截图,以便直观查看页面内容并识别其中的交互元素:
    browser_vision(question="Describe the page layout, identify any visual issues, broken elements, or accessibility concerns", annotate=true)
    

annotate=true 参数会在交互元素上叠加编号为 [N] 的标签。每个 [N] 都会对应一个引用 @eN,以便后续在浏览器中执行相应操作。

  1. 系统地测试交互元素

    • 点击按钮和链接:browser_click(ref="@eN")
    • 填写表单:browser_type(ref="@eN", text="test input")
    • 测试键盘导航:browser_press(key="Tab")browser_press(key="Enter")
    • 滚动页面内容:browser_scroll(direction="down")
    • 使用无效输入测试表单验证功能
    • 测试空值提交情况
  2. 每次交互后,需检查以下内容:

    • 控制台错误信息:browser_console()
    • 视觉变化:browser_vision(question="交互后发生了什么变化?")
    • 实际行为与预期行为的差异

第三阶段:收集证据

对于发现的每个问题:

  1. 截取显示该问题的屏幕截图
    browser_vision(question="Capture and describe the issue visible on this page", annotate=false)
    

请从响应结果中保存 screenshot_path —— 您将在报告中引用该路径。

  1. 记录详细信息

    • 问题出现的网址
    • 复现步骤
    • 预期行为
    • 实际表现
    • 控制台错误(如有)
    • 截图路径
  2. 根据问题分类体系对问题进行分类(参见 references/issue-taxonomy.md):

    • 严重程度:严重 / 高 / 中 / 低
    • 类别:功能问题 / 视觉问题 / 无障碍问题 / 控制台问题 / 用户体验问题 / 内容问题

第四阶段:分类处理

  1. 审核所有收集到的问题。
  2. 去重 —— 合并那些在不同位置出现的相同缺陷。
  3. 为每个问题确定最终的严重程度和类别。
  4. 按严重程度排序(先严重,再高、中、低)。
  5. 按严重程度和类别统计问题数量,用于生成执行摘要。

第五阶段:生成报告

使用 templates/dogfood-report-template.md 中的模板来生成最终报告。

报告必须包含以下内容:

  1. 执行摘要,说明问题总数、按严重程度分类的情况以及测试范围。
  2. 每个问题的详细部分,包括:
    • 问题编号和标题
    • 严重程度和类别标签
    • 问题出现的网址
    • 问题描述
    • 复现步骤
    • 预期行为与实际表现的对比
    • 截图引用(内联显示图片时使用 MEDIA:<screenshot_path>
    • 相关的控制台错误信息
  3. 所有问题的汇总表
  4. 测试说明 —— 已测试的内容、未测试的内容以及任何阻碍因素

将报告保存至 {output_dir}/report.md

工具参考

工具用途
browser_navigate访问指定网址
browser_snapshot获取 DOM 文本快照(无障碍结构)
browser_click根据引用编号(@eN)或文本点击元素
browser_type在输入框中输入内容
browser_scroll在页面上上下滚动
browser_back返回浏览器历史记录中的上一页
browser_press按下键盘按键
browser_vision截图并进行 AI 分析;如需标注元素,可使用 annotate=true
browser_console获取 JavaScript 控制台输出和错误信息

实用提示

  • 在导航完成后以及执行重要操作后,务必检查 browser_console()。那些无声的 JavaScript 错误往往是极具价值的发现。
  • 当需要判断交互元素的位置,或快照引用不明确时,请在调用 browser_vision 时添加 annotate=true 参数
  • 请使用有效和无效的输入数据进行测试 —— 表单验证错误十分常见。
  • 滚动查看长页面 —— 页面底部的内容可能存在渲染问题。
  • 测试完整的导航流程 —— 对多步骤操作进行端到端的点击测试。
  • 通过检查截图中的布局问题来评估响应式表现
  • 不要忽略边缘情况:空状态、过长的文本、特殊字符、快速连续点击等。
  • 在向用户展示截图时,记得使用 MEDIA:<screenshot_path> 格式,这样他们就能在页面中直接查看相关证据。