标准应用:小米SU7用户手册综合评估
北京大学信息体验课题组依据《技术文档的用户体验评估规范》对小米SU7用户手册进行全面评估,验证标准的实际操作性。
由北京大学信息体验课题组牵头起草的《T/CAS 852—2024 技术文档的用户体验评估规范》已于2024年4月11日正式实施。为验证标准的实际操作性,推动标准的应用落地,课题组依据该标准对小米SU7用户手册进行了全面的实验评估,并于2025年4月18日正式向小米交付了该评估报告。后续,课题组还将持续应用此标准对小米即将发布的YU7用户手册进行评估,助力提升用户的信息体验。
测评维度与测评方法简介
内容质量
内容质量依据《GB/T 19678.1—2018 使用说明的编制 构成、内容和表示方法 第1部分:通则和详细要求》中关于语言文字的要求进行评估。主要使用课题组自研的内容检测系统,并结合学界和业界的成熟工具,对内容进行检测。
可用性
可用性指标用于衡量《用户手册》在帮助典型用户完成具体任务时的表现。
课题组首先进行用户研究,识别出三种典型用户群,并基于用户画像进行被试招募。用户类型与被试数如下:
- 驾驶经验较少的用户(N=8)
- 有丰富油车但无(或较少)电动车使用经验的用户(N=7)
- 有丰富电动车使用经验的用户(N=6)
随后根据用户研究结果,绘制了用户从售前购买,到车辆使用,再到售后服务的完整用户旅程地图,并依据该旅程设置了包括开启车门与系统、座椅调节、记忆和通风以及视镜调节等在内的12个关键任务。
课题组依照《GB/T 18978.11—2023 人-系统交互工效学 第11部分:可用性:定义和概念》的规定,通过设计可用性实验,邀请典型用户实际使用文档,并根据实验结果,估算技术文档的可用性。采集的主要数据包括:有效性(Effectiveness)、效率(Efficiency)和满意度(Satisfaction),并将数据归一化为单一可用性指标(SUM)值,以便后续对比文档优化效果。
(被试同学在参与实验)
主观体验
主观体验是用户在使用技术文档完成任务过程中形成的主观感受。主要采用 User Experience Questionnaire(UEQ)量表,以及课题组自研的《技术文档主观体验评估量表》进行体验分值的计算。本次测评共招募了34名真实用户,并基于用户反馈获得主观体验得分。
总分计算
维度度量方法满分权重内容质量内容质量检测系统10040%可用性可用性实验10040%主观体验量表10020%
关于《技术文档的用户体验评估规范》
《技术文档的用户体验评估规范》(T/CAS 852—2024)规定了技术文档用户体验评估所需的流程,并提供一种量化用户体验得分的方法。文档服务需求方可以依据此标准评估供应商交付文档的质量;文档部门也可利用此标准评估内部文档质量及用户体验,以实现文档的持续改进。