ARTICLE DETAIL

资讯详情

深耕网站视觉设计与运营推广的一线实战洞察。

智库AI测试报告

智库AI测试报告 文章目录文章目录文章目录1、项目背景一、报告概述1、项目背景2、测试目的1.功能验证2.用户体验优化3.兼容性3、测试环境二、测试用例三、手动测试1、工作台功能2、知识问答功能3、文档管理功能4、效果评测功能5、运行日志功能6、全局通用功能四、兼容性测试五、Bug 描述六、测试总结1、功能验证结论2、兼容性结论3、Bug 汇总4、总体评价与建议一、报告概述1、项目背景2、测试目的3、测试环境二、测试用例三、手动测试1、工作台功能2、知识问答功能3、文档管理功能4、效果评测功能5、运行日志功能6、全局通用功能四、兼容性测试五、Bug 描述1.工作台页面2.知识问答页面3.文档管理页面4.效果评测页面5.运行日志页面6.浏览器兼容性页面一、报告概述1、项目背景项目名称智库 AI · 企业知识库助手项目背景智库 AI 是一款基于 RAG检索增强生成架构的企业级知识库问答系统。系统通过对企业上传的文档进行解析、切分、向量化与语义检索结合大语言模型生成有依据的回答并标注引用来源帮助企业将分散的制度、产品、服务资料转化为随时可问的智能知识资产。系统包含以下核心模块工作台数据概览知识库、已解析文档、问答会话、正向反馈、快捷入口、知识库卡片管理知识问答基于知识库的 RAG 对话、流式输出、引用来源标注、多轮上下文文档管理文件上传PDF/Word/Markdown/TXT、解析状态跟踪、知识片段统计、列表搜索与删除效果评测固定问题集自动评测、通过率与延迟量化、评测明细展示运行日志检索链路追踪召回片段、最高相关度、响应耗时、运行模式记录全局功能侧边栏导航、知识库切换、用户信息与系统设置2、测试目的1.功能验证确保工作台、知识问答、文档管理、效果评测、运行日志等核心功能符合需求规格说明书要求验证文档上传、解析、向量化入库的完整流程确认知识问答的 RAG 检索与生成链路正确性检查文档列表、运行日志、评测明细的数据展示完整性验证知识库切换、新建对话、数据统计联动等业务逻辑2.用户体验优化评估界面布局的合理性与实用性侧边栏、Banner、卡片、列表测试页面点击、输入、拖拽等交互是否符合用户习惯验证 AI 回答的错误提示与兜底话术的清晰度检查流式输出、加载动画、状态标签的响应表现优化提问 → 检索 → 回答 → 溯源的问答流程流畅性3.兼容性确保在主流浏览器能够正常使用验证在不同的操作系统上的运行表现测试多种设备类型和分辨率的适配情况检查 PC 端响应式布局3、测试环境操作系统Windows 11浏览器Edge、Firefox、Chrome测试工具Postman、Selenium测试地址http://139.196.211.24:443二、测试用例下图是测试用例脑图覆盖工作台、知识问答、文档管理、效果评测、运行日志五大模块详见第三章手动测试与第五章自动化测试。三、手动测试1、工作台功能测试场景一进入工作台查看顶部数据看板预期结果知识库(1)、已解析文档(5)、问答会话(6)、正向反馈(0) 数据与实际数据库一致随业务操作实时更新测试场景二点击深色 Banner 区域的开始提问按钮预期结果成功跳转到知识问答页面测试场景三点击知识库卡片内的管理资料预期结果成功跳转到文档管理页面且默认选中该知识库测试场景四点击知识库卡片内的开始问答预期结果成功跳转到知识问答页面且顶部知识库下拉框默认选中该知识库2、知识问答功能测试场景一点击推荐问题每周最多可以远程办公几天预期结果问题自动填入输入框并发送AI 开始流式输出回答测试场景二在输入框输入问题按 Enter 键预期结果消息成功发送输入框清空显示加载动画AI 返回结果测试场景三输入纯空格或直接按 Enter预期结果不允许发送输入框保持原状测试场景四点击 新对话预期结果当前聊天窗口清空回到初始欢迎界面测试场景五提问知识库中存在的明确问题预期结果打字机效果输出回答末尾附带引用来源标注点击来源可展开原文核对测试场景六提问知识库中不存在的问题如公司食堂菜谱预期结果明确回复未在知识库中找到相关依据不产生幻觉测试场景七多轮对话测试问员工远程办公手册有几条规定再问员工每周远程办公可以申请几天预期结果AI 能理解那指代的是假期政策正确回答病假规定3、文档管理功能测试场景一点击选择文件导入本地文件预期结果成功导入文件测试场景二将 PDF/Word/TXT 文件拖入虚线框预期结果文件上传成功测试场景三上传不支持的格式如 .exe预期结果提示格式不支持拦截上传测试场景四上传超过 10MB 的文件预期结果提示建议单文件不超过 10 MB请求失败请稍后再试测试场景五查看文档列表预期结果正确显示文档名称、类型、文件大小、知识片段数、处理状态、上传时间测试场景六上传新文件后观察状态预期结果状态从解析中变为已完成并显示正确片段数测试场景七点击某文档右侧的垃圾桶图标预期结果弹出二次确认框确认后文档从列表消失工作台统计数据减 14、效果评测功能测试场景一首次进入评测页预期结果综合通过率、通过问题、平均延迟显示为--明细显示还没有评测记录测试场景二点击运行自动评测按钮预期结果按钮变为 loading 状态系统开始逐题执行固定问题集测试场景三等待评测运行完成预期结果看板数据更新通过率、延迟等评测明细列表生成记录显示预期结果与实际回答测试场景四评测运行中刷新页面或断网预期结果页面应提示评测中断重新进入后状态恢复或提示重新运行5、运行日志功能测试场景一进入运行日志页面查看服务运行正常标签预期结果状态为正常绿色异常时显示红色警告测试场景二在知识问答提问后回到运行日志页面预期结果列表顶部新增记录含问题、运行模式、召回片段数、最高相关度、响应耗时、发生时间测试场景三查看列表中的相关度进度条预期结果进度条长度与百分比数值匹配如 66% 对应约 2/3 长度测试场景四在搜索问题框输入关键词如PO预期结果列表实时过滤只显示匹配的日志测试场景五持续提问超过 50 次预期结果列表只展示最近 50 条记录旧记录自动删除6、全局通用功能测试场景一点击搜索图标、点击用户头像预期结果弹出全局搜索框或用户下拉菜单测试场景二查看右上角真实模型标签鼠标悬停预期结果标签正常展示悬停有提示当前模型版本信息四、兼容性测试测试场景一在Edge浏览器下进入智库AI系统预期结果页面无异常显示功能与其一致测试场景二在Firefox浏览器下进入智库AI系统预期结果页面无异常显示功能与其一致五、Bug 描述问题出现的版本V1.0问题出现的环境windows11问题出现的步骤1.在“搜索文档”框输入文件名关键词预期结果搜索出文件名实际结果按下确认键搜索框没有任何反应问题出现的版本V1.0问题出现的环境windows11问题出现的步骤1.在Firefox浏览器下进入智库AI系统预期结果页面无异常显示功能与其一致实际结果页面加载不进去六、测试总结本次测试围绕智库 AI · 企业知识库助手 V1.0 版本覆盖工作台、知识问答、文档管理、效果评测、运行日志、全局通用六大模块以及浏览器兼容性共执行 20 余个测试场景整体测试结果如下1、功能验证结论工作台数据看板知识库、已解析文档、问答会话、正向反馈与实际数据库一致随业务操作实时更新“开始提问”“管理资料”开始问答等快捷入口均能正确跳转到对应页面并默认选中目标知识库。知识问答推荐问题点击、Enter 发送、空输入拦截、新对话重置、引用来源标注、无依据兜底话术、多轮上下文理解等场景全部符合预期RAG 检索与生成链路正确未出现幻觉回答。文档管理文件导入、拖拽上传、格式校验拦截 .exe、大小限制拦截超 10MB、列表字段展示、解析状态流转解析中 → 已完成、删除二次确认及数据联动均正常。效果评测首次进入空态展示、自动评测运行、结果看板更新、评测明细生成均符合预期评测中断场景能正确提示并恢复。运行日志服务状态标签、日志记录生成含问题、运行模式、召回片段数、最高相关度、响应耗时、相关度进度条、关键词过滤、50 条上限均正常。全局通用全局搜索框、用户下拉菜单、模型版本悬停提示均正常展示。2、兼容性结论Edge 浏览器页面无异常显示功能与预期一致通过。Firefox 浏览器页面加载不进去存在兼容性问题未通过。3、Bug 汇总编号模块问题描述严重程度Bug-1文档管理在搜索文档框输入文件名关键词按下确认键搜索框无任何反应中Bug-2兼容性Firefox 浏览器下页面加载不进去高4、总体评价与建议智库 AI 系统核心功能整体稳定RAG 问答链路、文档管理、效果评测等主流程均通过测试业务逻辑与数据联动符合需求规格说明书要求。但存在以下问题需在后续版本修复Firefox 兼容性问题高优先级需排查页面加载失败原因如资源加载、JS 兼容、证书等确保主流浏览器均可正常使用。文档搜索无响应中优先级需修复搜索文档输入框的搜索交互保证关键词检索可用。
返回列表