软件质量保证与软件测试-大作业(参考模板案例)

天津工业大学

2017级软件质量保证与软件测试

大作业

项目名称:

专业方向：

专业班级:

姓名：

目录

一、引言 (1)

1.1项目概述 (1)

1.2运行环境 (1)

二、黑盒手工测试 (3)

3.1测试需求 (3)

3.2测试用例设计 (4)

3.3测试执行与缺陷记录 (5)

3.4测试总结 (7)

三、项目自动化测试 (8)

4.1自动化测试需求分析 (8)

4.2自动化测试设计 (8)

4.2.1测试用例 (8)

4.3自动化测试执行 (9)

4.4自动化测试总结 (15)

四、性能测试 (16)

5.1 性能测试需求分析 (16)

5.2 性能化测试设计及执行 (16)

5.3脚本参数化 (22)

5.4测试执行 (23)

5.4.1设置运行环境 (24)

5.4.2系统资源监控设置 (27)

5.4.3执行结果 (28)

5.5摘要分析 (30)

5.6windows资源 (40)

5.7 性能测试执行结果及总结 (47)

五、总结与展望 (49)

一、引言

1.1项目概述

本次实训共使用两款系统，分别为在黑盒测试中以及原型开发中使用到的测评项目管理系统，和性能测试以及自动化测试使用到的医药管理系统。各系统具体内容如下：

测评项目管理系统主要负责控制测试工作的任务量，共提供3种角色：系统管理员、项目管理员、责任专家。每个角色具有相应的权限。该系统主要包括以下功能：

1）测试任务管理：完成接收测试任务申请、下达任务、启动测试功能；

2）测试过程管理：管理已下达测试项目的测试技术文档和审查意见；

3）项目审查管理：管理项目审查计划和审查会记录；

4）项目信息查询：查询项目状态及其项目信息；

5）系统管理：对本系统的用户和组织机构信息进行管理；

6）基础信息管理：维护参与测评项目活动的相关单位及其人员信息；

7）系统监控：记录系统操作日志。

医药管理系统主要负责管理顾客、经办人和药品信息。可以创建多条用户统一对资源进行管理。该系统主要包括以下功能：

1）信息查询：查询顾客、经办人和药品信息；

2）信息录入：录入顾客、经办人和药品信息；

3）信息删除：删除顾客、经办人和药品信息；

4）信息修改：修改顾客、经办人和药品信息；

5）信息浏览：浏览顾客、经办人和药品信息；

6）数据报表：打印顾客、经办人和药品信息；

7）用户管理：添加、编辑、删除用户信息；

8）系统帮助：提供关闭全部窗口和系统帮助提示功能。

1.2运行环境

表1-1 电脑环境

二、黑盒手工测试

3.1测试需求

1.软件概述

测评项目管理系统主要负责控制测试工作的任务量，共提供3种角色：系统管理员、项目管理员、责任专家。每个角色具有相应的权限。该系统主要包括以下功能：

1）测试任务管理：完成接收测试任务申请、下达任务、启动测试功能；

2）测试过程管理：管理已下达测试项目的测试技术文档和审查意见；

3）项目审查管理：管理项目审查计划和审查会记录；

4）项目信息查询：查询项目状态及其项目信息；

5）系统管理：对本系统的用户和组织机构信息进行管理；

6）基础信息管理：维护参与测评项目活动的相关单位及其人员信息；

7）系统监控：记录系统操作日志。

2.测试环境

表3-1 软硬件测试环境

3.测试范围

表3-3 测试范围

附：本次测试的测试计划如下：

3.2测试用例设计

本次黑盒手工测试用例包括基础信息管理模块中的单位信息管理和人员信息管理及以下的三级模块。针对以上测试内容共编写测试用例30个，如图3-1和表3-3所示，具体内容见禅道ztt001用户。

表3-4 黑盒测试用例案例

3.3测试执行与缺陷记录

黑盒手工测试用例包括基础信息管理模块中的单位信息管理和人员信息管理及以下的三级模块以及其他相关功能一共执行测试用例36个，通过14个，不通过22个。

测试过程中发现的缺陷共15个，如下表3-4所示。

表3-5 测试问题汇总

3.4测试总结

针对测评项目管理系统的黑盒测试工作基本结束，本次黑盒测试主要针对其功能性、可用性、易用性进行测试。测试过程为：编写测试计划、编写测试用例、执行测试用例、提交Bug、最终根据测试结果编写测试报告以及测试问题报告。本次由小组分工对该系统的基础信息管理进行手工测试，并使用禅达对测试内容进行管理。在测试过程中，将各个功能编写成两个测试用例，一是正确判断，二是错误判断，有利于对测试用例进行管理。最终共编写测试用例36个，通过14个，不通过22个，bug数15个。

通过这次的实训课程，进一步的熟悉黑盒测试过程，梳理测试逻辑，提高测试效率，为优质的软件质量做好充分的准备。黑盒测试是软件测试的基础，是提升专业技能的基石，只有做好基础工作，才能在以后的道路上走得更加平稳且游刃有余，

三、项目自动化测试

4.1自动化测试需求分析

本次自动化测试选择医药管理系统，对顾客信息的录入、查询、修改进行脚本的录制。使用火狐54.0版本来承载selenium IDE 进行测试，保证能够成功回放上述功能。

4.2自动化测试设计

4.2.1测试用例

表4-2 查询顾客信息功能的测试用例

表4-3 修改顾客信息功能的测试用例

表4-4 录入顾客信息功能的测试用例

4.3自动化测试执行

//顾客信息录入

package test;

import java.util.regex.Pattern;

import java.util.concurrent.TimeUnit;

import org.junit.*;

import static org.junit.Assert.*;

import static org.hamcrest.CoreMatchers.*;

public class Add {

private WebDriver driver;

private String baseUrl;

private boolean acceptNextAlert = true;

private StringBuffer verificationErrors = new StringBuffer();

@Before

public void setUp() throws Exception {

driver = new WebDriver();

baseUrl = "http://192.168.1.125:8080/mms/";

((Object) driver).manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);

}

@Test

public void testAdd() throws Exception {

driver.get(baseUrl + "/mms/");

driver.findElement(By.id("username")).clear();

driver.findElement(By.id("username")).sendKeys("admir");

driver.findElement(By.id("password")).clear();

driver.findElement(By.id("password")).sendKeys("1234");

driver.findElement(By.cssSelector("input[type=\"submit\"]")).click();

driver.findElement(By.xpath("//div[2]/div/div[2]/div/div")).click();

driver.findElement(By.xpath("//div[@id='EC']/a/span/span")).click();

driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).clear(); driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).sendKeys("03"); driver.findElement(By.xpath("//form[@id='ECMform']/div/div[3]/span/span/a")).click(); driver.findElement(By.xpath("//tr[5]/td[4]")).click();

driver.findElement(By.xpath("//form[@id='ECMform']/div/div[3]/span[2]/span/a")).click(); driver.findElement(By.id("_easyui_combobox_i3_11")).click();

driver.findElement(By.xpath("//form[@id='ECMform']/div/div[2]/span[3]/span/a")).click(); driver.findElement(By.id("_easyui_combobox_i2_11")).click();

driver.findElement(By.linkText("录入")).click();

driver.findElement(By.xpath("//div[3]/a/span/span")).click();

}

@After

public void tearDown() throws Exception {

driver.quit();

String verificationErrorString = verificationErrors.toString();

if (!"".equals(verificationErrorString)) {

fail(verificationErrorString);

}

}

private boolean isElementPresent(By by) {

try {

driver.findElement(by);

return true;

} catch (NoSuchElementException e) {

return false;

}

}

private boolean isAlertPresent() {

try {

driver.switchTo().alert();

return true;

} catch (NoAlertPresentException e) {

return false;

}

}

private String closeAlertAndGetItsText() {

try {

Alert alert = driver.switchTo().alert();

String alertText = alert.getText();

if (acceptNextAlert) {

alert.accept();

} else {

alert.dismiss();

}

return alertText;

} finally {

acceptNextAlert = true;

}

}

}

//顾客信息查询

package test;

import java.util.regex.Pattern;

import java.util.concurrent.TimeUnit;

import org.junit.*;

import static org.junit.Assert.*;

import static org.hamcrest.CoreMatchers.*;

import org.openqa.selenium.*;

import org.openqa.selenium.firefox.FirefoxDriver;

import org.openqa.selenium.support.ui.Select;

public class require {

private WebDriver driver;

private String baseUrl;

private boolean acceptNextAlert = true;

private StringBuffer verificationErrors = new StringBuffer(); @Before

public void setUp() throws Exception {

driver = new FirefoxDriver();

baseUrl = "http://192.168.1.125:8080/mms/";

driver.manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);

}

@Test

public void testRequire() throws Exception {

driver.get(baseUrl + "/mms/login.html");

driver.findElement(By.id("username")).clear();

driver.findElement(By.id("username")).sendKeys("admir");

driver.findElement(By.id("password")).clear();

driver.findElement(By.id("password")).sendKeys("1234");

driver.findElement(By.cssSelector("input[type=\"submit\"]")).click();

driver.findElement(By.cssSelector("div.panel-title.panel-with-icon")).click();

driver.findElement(By.cssSelector("span.l-btn-text")).click();

driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).clear(); driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).sendKeys("02"); driver.findElement(By.cssSelector("span.l-btn-icon.icon-ok")).click();

driver.findElement(By.cssSelector("a.panel-tool-close")).click();

}

@After

public void tearDown() throws Exception {

driver.quit();

String verificationErrorString = verificationErrors.toString();

if (!"".equals(verificationErrorString)) {

fail(verificationErrorString);

}

}

private boolean isElementPresent(By by) {

try {

driver.findElement(by);

return true;

} catch (NoSuchElementException e) {

return false;

}

}

private boolean isAlertPresent() {

try {

driver.switchTo().alert();

return true;

} catch (NoAlertPresentException e) {

return false;

}

}

private String closeAlertAndGetItsText() {

try {

Alert alert = driver.switchTo().alert();

String alertText = alert.getText();

if (acceptNextAlert) {

alert.accept();

} else {

alert.dismiss();

}

return alertText;

} finally {

acceptNextAlert = true;

}

}

}

//顾客信息修改

package test;

import java.util.regex.Pattern;

import java.util.concurrent.TimeUnit;

import org.junit.*;

import static org.junit.Assert.*;

import static org.hamcrest.CoreMatchers.*;

import org.openqa.selenium.*;

import org.openqa.selenium.firefox.FirefoxDriver;

import org.openqa.selenium.support.ui.Select;

public class Alt {

private WebDriver driver;

private String baseUrl;

private boolean acceptNextAlert = true;

private StringBuffer verificationErrors = new StringBuffer();

@Before

public void setUp() throws Exception {

driver = new FirefoxDriver();

baseUrl = "http://192.168.1.125:8080/mms/";

driver.manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);

}

@Test

public void testAlt() throws Exception {

driver.get(baseUrl + "/mms/login.html");

driver.findElement(By.id("username")).clear();

driver.findElement(By.id("username")).sendKeys("admir");

driver.findElement(By.id("password")).clear();

driver.findElement(By.id("password")).sendKeys("1234");

driver.findElement(By.cssSelector("input[type=\"submit\"]")).click();

driver.findElement(By.xpath("//div[4]/div/div")).click();

driver.findElement(By.xpath("//div[@id='MC']/a/span/span")).click();

driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).clear();

driver.findElement(By.cssSelector("input.textbox-text.validatebox-text")).sendKeys("02");

driver.findElement(By.linkText("查询")).click();

driver.findElement(By.cssSelector("textarea.textbox-text.validatebox-text")).clear();

driver.findElement(By.cssSelector("textarea.textbox-text.validatebox-text")).sendKeys("111");

driver.findElement(By.cssSelector("h1")).click();

driver.findElement(By.xpath("//div[3]/a/span/span")).click();

}

@After

public void tearDown() throws Exception {

driver.quit();

String verificationErrorString = verificationErrors.toString();

if (!"".equals(verificationErrorString)) {

fail(verificationErrorString);

}

}

private boolean isElementPresent(By by) {

try {

driver.findElement(by);

return true;

} catch (NoSuchElementException e) {

return false;

}

}

private boolean isAlertPresent() {

try {

driver.switchTo().alert();

return true;

} catch (NoAlertPresentException e) {

return false;

}

}

private String closeAlertAndGetItsText() {

try {

Alert alert = driver.switchTo().alert();

String alertText = alert.getText();

if (acceptNextAlert) {

alert.accept();

} else {

alert.dismiss();

}

return alertText;

} finally {

acceptNextAlert = true;

}

}

}

4.4自动化测试总结

Selenium是专为web测试而设计的一款软件，相对于uft而言更能适用于不同的浏览器且依附于浏览器中的IDE组件操作更为简易。使用IDE录制完测试脚本后，保存为java脚本格式，导入eclipse当中，进行进一步的调试过程。

自动化测试应当是在回归测试以及功能性测试完毕后，待系统相对稳定的情况下进行更有效的测试，但由于本次实践仅针对于自动化测试，所以在此省略前两项测试类型。然而，在使用selenium测试医药管理系统时依然存在着显而易见的错误功能点。此外，由于系统的不够稳定，造成了回放过程中，时能成功时而不能成功的问题。有时因为不能寻找到元件而报错停止运行，这时候需要加入wait代码行，给界面充分的加载时间。最终导致回放过程中，要花费比手工测试更多的时间，这恰恰违背了自动测试高效率的基本特性。

四、性能测试

5.1 性能测试需求分析

使用LoadRunner对系统的添加经办人信息、查询经办人信息、删除经办人信息三个功能点进行负载测试，并给100、200、300的虚拟用户量，观察不同虚拟用户数下的响应时间以及CPU瓶颈、内存泄漏。

在互联网上对于用户响应时间，有一个普遍的标准，2/5/10秒原则。也就是说，在2秒之内响应被用户认为是“非常有吸引力”的用户体验。在5秒之内响应被用户认为是“比较不错”的用户体验，在10秒之内响应被用户认为是“糟糕”的用户体验。如果超过10秒还没有得到响应，那么大多用户会认为这次请求是失败的。通常响应时间在4秒之内，大部分用户可以接受；4-8秒以内，30%的用户选择离开；8-9秒，则有60%的用户选择离开；超过10秒，则90%以上的用户选择离开。

系统的整体测试性能标准可以参考如下：

（1）事务的的响应时间<=5秒。

（2）%Processor time的值小于90%。

（3）Processor Queue Length的值小于2。

（4）Available Mbytes 的值大于4。

5.2 性能化测试设计及执行

1. 查询顾客信息脚本

require()

{

//访问网址为：http://192.168.1.125:8080/mms/

web_url("mms",

"URL=http://192.168.1.125:8080/mms/",

"Resource=0",

"Referer=",

"Mode=HTTP",

LAST);

//思考时间为6秒

lr_think_time(6);

//admir用户登陆脚本

web_submit_data("loginUser",

"Action=http://192.168.1.125:8080/mms/Login/loginUser",

"Method=POST",

"RecContentType=text/html",

"Referer=http://192.168.1.125:8080/mms/",

"Mode=HTTP",

ITEMDATA,

"Name=username", "Value=admir", ENDITEM,

"Name=password", "Value=1234", ENDITEM,

LAST);

web_url("index.html",

"URL=http://192.168.1.125:8080/mms/mms/index.html",

"Resource=0",

"Referer=http://192.168.1.125:8080/mms/",

"Mode=HTTP",

LAST);

web_url("GetLoginName",

"URL=http://192.168.1.125:8080/mms/Login/GetLoginName",

"Resource=1",

"RecContentType=application/json",

"Referer=http://192.168.1.125:8080/mms/mms/index.html",

"Snapshot=t1.inf",

LAST);

//查询顾客信息事件开始

lr_start_transaction("consumer-require");

//设置集合点，名为“require”

lr_rendezvous("require");

//思考时间为“36”

lr_think_time(36);

web_url("Search.html",

"URL=http://192.168.1.125:8080/mms/mms/tabs/client/Search.html?_=1558920115001", "Resource=0",

"RecContentType=text/html",

"Referer=http://192.168.1.125:8080/mms/mms/index.html",

"Snapshot=t2.inf",

"Mode=HTTP",

LAST);

lr_think_time(6);

web_submit_data("GetClient",

"Action=http://192.168.1.125:8080/mms/Client/GetClient",

"Method=POST",

"RecContentType=application/json",

"Referer=http://192.168.1.125:8080/mms/mms/index.html",

"Snapshot=t3.inf",

"Mode=HTTP",

ITEMDATA,

"Name=cno", "Value={NewParam}", ENDITEM,

LAST);

//查询顾客信息事件结束

lr_end_transaction("consumer-require",LR_AUTO);

return 0;

}

2. 修改顾客信息脚本

alter()

{

//访问网址为：http://192.168.1.125:8080/mms/

web_url("mms",

"URL=http://192.168.1.125:8080/mms/",

"Resource=0",

"Referer=",

"Mode=HTTP",

LAST);

//思考时间为“8”

lr_think_time(8);

web_submit_data("loginUser",

"Action=http://192.168.1.125:8080/mms/Login/loginUser",

"Method=POST",

"RecContentType=text/html",

"Referer=http://192.168.1.125:8080/mms/",

"Mode=HTTP",

ITEMDATA,

"Name=username", "Value=admir", ENDITEM,

"Name=password", "Value=1234", ENDITEM,

LAST);

web_url("index.html",

"URL=http://192.168.1.125:8080/mms/mms/index.html",

"Resource=0",

"Referer=http://192.168.1.125:8080/mms/",

"Mode=HTTP",

LAST);

web_url("GetLoginName",

"URL=http://192.168.1.125:8080/mms/Login/GetLoginName",

"Resource=1",

"RecContentType=application/json",

"Referer=http://192.168.1.125:8080/mms/mms/index.html",

"Snapshot=t1.inf",

LAST);

//修改顾客信息事件开始

lr_start_transaction("consumer-alter");

//设置集合点，名为“alter”

lr_rendezvous("alter");