Test Automation 수행 후에는 테스트 결과를 갖는 txt, XML 파일을 읽어 통계와 의미있는 테스트 결과를 보여주는 리포팅이 중요하다.
여기에서는 테스트 결과 생성된 txt나 XML 파일을 읽고 HTML, Excel 형식의 리포트를 생성하는 방법에 대해 설명한다.
테스트 수행한 결과를 의미있는 리포트를 만드는 데에도 Ant와 Maven 빌드도구를 사용한다.
다만, 리포트를 생성하는 기능을 수행하는 Ant Task와 Maven Plug-in이 있어야 하는데, HTML 형식은 오픈소스에서 제공한다.
각각 JUnit Report Task와 maven-surefire-report-plugin 이라는 라이브러리가 그것이다.
그리고, Excel 형식의 리포트를 생성하는 기능은 전자정부 표준 프레임워크 개발환경에서 추가했는데, Ant Task와 Maven plugin으로 제공된다.
리포트를 생성하는 방법은 다음과 같다.
리포트를 생성하는 방법도 기본적인 흐름은 테스트 수행과 동일하다. CI 서버에 등록할 경우의 goal 설정이나 target 설정만 리포트 생성을 위한 것으로 설정하면 된다.
생성된 리포트의 결과는 다음과 같은 모습이다.
테스트 결과 리포트는 텍스트(.txt), HTML(.html), XML(.xml), 엑셀(.xls) 형식으로 생성할 수 있다.
텍스트와 XML 형식 리포트는 리포트라기보다 테스트 결과 데이터를 갖고 있는 파일이므로 주로 테스트 수행시에 생성하게 된다. 따라서, 테스트 수행을 참조하도록 하고, 여기서는 HTML과 XML 형식의 리포트 생성 방법에 대해 설명한다.
테스트 결과를 엑셀 형식으로 리포트하는 기능은 오픈소스가 아닌 전자정부 개발프레임워크 개발환경에서 추가 개발한 내용이다.
해당 기능에 대해 자세한 내용은 테스트 결과 Excel 리포트을 참조하도록 하고, 여기에서는 디폴트로 설정하고 엑셀 리포트를 생성하는 방법에 대해 설명하도록 한다.
기본적으로 Ant나 Maven을 사용할 경우 스타일이 달라지지는 않으며, 별도로 커스터마이즈된 템플릿 엑셀 파일을 사용할 경우 그 스타일에 따른 엑셀 리포트를 만들게 된다.
<reporting> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-surefire-report-plugin</artifactId> <version>2.4.2</version> </plugin> </plugins> </reporting>
<!-- Junit Test Result Report --> <target name="junitreport" depends="tests"> <junitreport todir="${testhtml.dir}"> <fileset dir="${testreports.dir}"> <include name="TEST-*.xml" /> </fileset> <report format="frames" todir="${testhtml.dir}" /> </junitreport> </target>
<build> <defaultGoal>egovtest:junit-xls</defaultGoal> <plugins> <!-- Egovframework JUnit Excel Reporting --> <plugin> <groupId>egovframework.dev</groupId> <artifactId>egovtest-maven-plugin</artifactId> </plugin> </plugins> </build>
<plugin> <groupId>egovframework.dev</groupId> <artifactId>egovtest-maven-plugin</artifactId> <version>2.0.1</version> <configuration> <outputDirectory>${project.build.directory}/egovtest</outputDirectory> <reportsDirectory>${project.build.directory}/site/egovtest</reportsDirectory> <outputName>egovtest-report.xls</outputName> <templatePath>${basedir}/src/test/resources/template-kr.xls</templatePath> <headerPosition> <!-- <summary>0,A,4</summary> <package>0,A,8</package> --> <summary>0,B,6</summary> <package>0,B,11</package> <lists>1,A,4</lists> </headerPosition> </configuration> <dependencies> <!-- Dependencies for developing functions of reporting --> <dependency> <groupId>egovframework.dev</groupId> <artifactId>egovframework-dev-tst</artifactId> <version>2.0.1</version> </dependency> <dependency> <groupId>org.apache.poi</groupId> <artifactId>poi</artifactId> <version>3.6</version> </dependency> <dependency> <groupId>commons-io</groupId> <artifactId>commons-io</artifactId> <version>1.4</version> </dependency> </dependencies> </plugin> </plugins> * **Ant - build.xml** - 디폴트 설정 \\ <code:xml> <path id="egov.lib"> <path refid="master-classpath" /> <path location="${antlib.dir}/egovtest/egovframework-dev-tst-ant.jar" /> </path> <taskdef resource="egovtest.properties" classpathref="egov.lib" /> <!-- JUnit Excel Report --> <target name="egovtest" depends="tests"> <egov-junitreport todir="${testxls.dir}"> <fileset dir="${testreports.dir}" includes="**/TEST-*.xml" /> </egov-junitreport> </target>
<path id="egov.lib"> <path refid="master-classpath" /> <path location="${antlib.dir}/egovtest/egovframework-dev-tst-ant.jar" /> </path> <taskdef resource="egovtest.properties" classpathref="egov.lib" /> <!-- JUnit Excel Report --> <target name="egovtest-full" depends="tests"> <egov-junitreport todir="${testxls.dir}" outputname="egovtest-junit-full.xls" templatepath="${basedir}/build/template-kr.xls" summary="0,B,6" packages="0,B,11" lists="1,A,5"> <fileset dir="${testreports.dir}" includes="**/TEST-*.xml" /> </egov-junitreport> </target>