T/CAS 852—2024
正式发布
技术文档的用户体验评估规范
本标准规定了对技术文档执行用户体验评估的基本要求以及评估流程,并给出了确定评估目标和主体、制定评估计划、实施评估实验、完成评估结果的要求。适用于产品与服务的技术文档的用户体验评估。
1 范围
本文件规定了对技术文档执行用户体验评估的基本要求以及评估流程,并给出了确定评估目标和主体、设定评估计划、实施评估实验、完成评估结果的要求。
本文件适用于产品与服务的技术文档的用户体验评估。
2 规范性引用文件
- GB/T 18978.11—2023 人-系统交互工效学 第 11 部分:可用性:定义和概念
- GB/T 19678.1—2018 使用说明的编制 构成、内容和表示方法 第 1 部分:通则和详细要求
3 术语和定义
| 术语 | 英文 | 定义 |
|---|---|---|
| 技术文档 | technical documentation | 由产品生产者或服务提供者向使用者提供的信息,包含如何安全和有效使用产品或服务的所有必要信息。 |
| 用户 | user | 使用产品的个人或组织。 |
| 用户体验 | user experience | 用户对使用和/或预期使用产品、系统或服务的感知和反应。 |
| 用户画像 | user persona | 通过目标人群研究,对目标人群的形象化描述,包括对象的生活形态、特征、行为、动机、目标、偏好等。 |
| 用户旅程地图 | user journey map | 针对用户/客户与产品、服务或品牌互动过程和触达感受,以结构化、可视化的方式进行展现的导览图。 |
| 可用性 | usability | 以有效性、效率和满意度为指标,某一系统、产品或服务在特定使用情境下为了实现特定目标可被特定用户使用的程度。 |
4 基本要求和评估流程
4.1 基本要求
技术文档的用户体验评估过程应符合以下要求:
- 应能反映技术文档的真实使用场景
- 应严谨、客观、科学
- 应符合实验伦理要求
4.2 评估流程
评估流程包括四个阶段:确定评估目标和主体 → 制定评估计划 → 实施评估 → 完成评估结果。
5 确定评估目标和主体
包括界定评估目标和范围、确定目标用户(用户画像方法、信息收集、招募被试,推荐 30 人以上)、确定评估的文档内容(绘制用户旅程地图、确定关键任务)。
6 制定评估计划
评估从三个维度展开:
| 维度 | 度量方法 | 满分 | 权重 |
|---|---|---|---|
| 内容质量 | 内容质量检测系统 | 100 | 40% |
| 可用性 | 可用性实验 | 100 | 40% |
| 主观体验 | 量表 | 100 | 20% |
6.1 内容质量
应符合 GB/T 19678.1—2018 的要求,包括:使用清晰简洁的语言、术语一致、信息准确、适当使用图表和视觉元素等。
6.2 可用性
通过引入真实用户进行可用性实验,采集有效性(任务完成率和出错次数)、效率(任务完成时间)、满意度三项指标数据,归一化为单一可用性指标(SUM)值。
6.3 主观体验
用户在使用技术文档完成任务过程中形成的主观感受,包括:
- 感知体验:美观性(视觉美观)、组织性(布局合理)
- 认知体验:易找性(信息可搜索)、易理解(内容清晰)、易用性(任务可完成)
- 情感体验:愉悦感、信任感、吸引力
7 实施评估
包括实验与任务说明、仪器穿戴与调试(可选)、开始实验任务、结束实验任务、问卷与访谈、完成实验。
8 完成评估结果
包括实验数据整理与计算、撰写评估报告(等级评定、实验设计、实验数据、现状评估、优化建议)、结论确认。
技术文档用户体验等级评定标准:
- 优:总分大于 90 分
- 良:总分 80~89 分
- 中:总分 70~79 分
- 差:总分 60~69 分
- 不合格:总分小于 60 分