基于提升社区伙伴测试易用性的目标,现向各位社区测试代表收集社区测试诉求并在此话题上跟帖,同时邀请各位测试代表在9月29日16:00 - 18:00 QA SIG中做集中交流,诉求维度包括但不限于以下几点:
- 测试活动
- 测试策略分析
- 测试方案设计
- 测试用例设计
- 自动化开发
- DFX测试设计
- 问题管理
- 测试评估
- 测试报告
基于提升社区伙伴测试易用性的目标,现向各位社区测试代表收集社区测试诉求并在此话题上跟帖,同时邀请各位测试代表在9月29日16:00 - 18:00 QA SIG中做集中交流,诉求维度包括但不限于以下几点:
长江计算:
测试用例设计碰到的问题:
1.redfish url 大小写不敏感是否是问题?
2.未登录用户访问redfish,状态码openUBMC是400,V2是401?
3.web登陆失败无法锁定是否是问题?redfish无法对用户锁定状态Locked设置true是否是问题?
自动化开发诉求:
组织课程培训一下kptest部署和各个接口脚本实例开发演示;
itestsmart跑openubmc之前需要设置哪些配置(比如运行配置和静态配置),bmc功能检查点有哪些?有没有全面检查的方案和建议;
神码计算:
(1)iBMC V2和V3版本iTestSmart测试用例的区别?
(2)华为主线版本V5和openUBMC版本的区别?
(3)iTestSmart能否用于华为主线版本的测试?(比如:部件兼容性测试)
(4)iTestSmart工具openUBMC自动化测试用例设计:分类依据、自动化率
(5)DFX测试设计:多用户并发、压力测试等测试用例的设计
(6)开展kptest自动化框架培训。
百信:
1、缺少测试标准规范,如BMC性能、传感器属性(如名称、阈值上下限范围、告警等级形式、fault LED表现、数码管表现)、ipmitool sel和WEB告警&事件记录日志不是一对一的关系这个标准是否也做下统一 等
2、缺少BMC压力性能测试
3、社区基础版本发布时希望可以将已解决问题的问题详情单、复现步骤、验证结果、解决方案等同步出来
4、itestsmart自动化测试部分是否可以将itestsmart生成的测试过程详情报告同步出来 ,有的出错点不够详细。
5、缺少BMC RAS功能文档,如BMC shell命令mdtctl下各class类属性介绍、可键入值、可模拟日志种类等)
6、开展kptest自动化框架部署和简单用例编写培训。
软通华方
1、当前使用itestsmart执行用例时,有特别多的报错,但是很难定位实际原因,执行无意义,希望能提供一个思路;比如提供一些便捷的bug查看集合、或者经验贴,帮助解决报错
2、新增itestsmart用例级别标识,新增用例指南对当前开放用例类型、作用做一个说明,帮助能筛选出所需用例,更好的使用平台
3、社区开源版本要提供基本的验证报告,例如25.03、06应提供基本的验证可信报告
4、组织面向全体人员的itestsmart平台培训,关键点:比如配置内容(关键配置点)、机器要求、用例作用及用例挑选,以及问题排查等,希望由实际使用或者开发平台人员进行讲解,并总结出对应的经验贴,使用指南。
5、itestsmart能否用于兼容性或者部件测试,可以的话,希望能组织培训下
百敖: