2018년 6월 15일 (금) 17:30 판

※ 다운로드 파일 (업데이트 일자 : 2018/06/15) : tools.zip

1.     Dualport를 이용한 Running Mode 테스트 시, 데이터 값 주입되는 시간 간격을 유저가 정의할 수 있도록 기능 추가 (TEST_MODE : RUNNING)

 테스트 케이스의 헤더에 다음처럼 입력되어야 합니다.

2.      Float Type으로 테스트 결과 비교 시 발생하는 문법오류 수정 

     3.  매개변수가 테스트포인트에서 아직 할당되지 않을경우 사용자에게 정보를 알려주도록 예외처리 추가

2018.4.27

      - Evaluation 기간 연장 : 2018년 6월까지 유지보수와 관계없이 사용 가능

      - 특정 변수값 증가 테스트 기능 추가

      - 테스트 타임아웃 시간 설정 가능

      - 타겟 동작중에 듀얼포트를 통해 전역 변수값 설정 및 확인 기능 추가

1. 기능 소개

  본 페이지에서는 SW 프로그램을 테스트하는 여러 방법 중, 실제 타겟 프로세서에서 SW 테스트를 진행하는 방법에 대해 설명한다.

실제 타겟에서의 SW 테스트를 위해서는 "코드가 다운로드된 타겟" 과 "HW 디버깅 장비 TRACE32" 가 필요하다.

 이 때, HW 디버깅 장비는 원하는 프로그램 위치에서 타겟 코어의 동작을 멈춘 후 입력 값을 변경하고, 연산이 완료된 출력 값을

가져오는 역할을 수행한다. 특히 TRACE32 는 수많은 테스트케이스를 수행하는데 있어서 개발자가 직접 수동/반복적으로 테스트

해야 했던 일을 자동화하여 많은 시간과 비용을 줄여줄 수 있다.

2. 실행 방법

    1. 받은 tools.zip 파일을 “T32설치폴더(C:\T32)” 안에 tools라는 이름으로 압축해제 한다.

     2. tools 폴더안에 있는 t32.men 파일을 복사하여 “T3설치폴더(C:\T32)”에 덮어쓰기를 한다.

      3. 이후 TRACE32프로그램을 실행하면 아래와 같이 [mds]버튼이 추가된다.

       4. 생성된 [mds]버튼을 누르면 SW Testing Tool 이 실행된다.

3. 화면 구성 및 사용법

3-1. Main UI

①   Add Test Case File : Test Case를 설정/정의한 CSV파일을 등록하거나 새로 생성

②  Test Scenario:    테스트 시나리오 리스트 (T32_Test_List.txt 파일)

테스트케이스를 만들거나 추가 등록시키면 리스트가 업데이트 된다.

Start버튼을 누르면 테스트케이스 파일과 T32 커맨드를 정의한 순서대로 수행한다.

[Edit Test Scenario]버튼을 통해 시나리오를 직접 수정 가능

-  TEST_FILE : [테스트케이스 파일의 경로]

-  T32_CMD : [T32 명령어]

③   Simulator Debugging : 디버깅 환경을 시뮬레이터로 전환

시뮬레이터에서는 코드 커버리지나 백트레이스 등 고급 기능들을 사용 가능하다.

※ 전환할 경우 PowerView가 재시작 되니 주의하십시오.

④   ETC :

- Coverage : 코드 커버리지를 보거나 리셋한다.

- Load Symbol : 심볼를 로딩한다.

⑤    Test Start :  정의한 시나리오대로 테스트를 시작한다.

3-2. Test Case 생성

- Main UI에 있는 [Create] 버튼을 누르면 아래와 같은 창이 나타난다.

①  Test Unit : [Sel] 버튼을 눌러 테스트 함수를 검색하거나

   주소나 심볼을 직접 입력한다.

- 테스트 시작 지점 (Input/ Pre-Condition 대입 시점)

- 테스트 끝 지점   (예상 Output 값과  실제 Output 값 비교 시점)

※ End Address를 입력하지 않을 경우 함수 종료 시점이 자동 입력된다.

②  Test Setting :  테스트 방법이나 항목을 설정한다.

1. TEST MODE : 테스트 방식을 결정

- CALL 모드 : 함수 단위 테스트시 함수 호출을 TRACE32가 대신 실행

                    테스트 대상이 반복적으로 호출되지 않더라도 이 모드를 이용하면 반복하여 빠르게 테스트가 가능함

- BREAK 모드 : 테스트 시작점에 Breakpoint를 잡고 테스트하는 방식

           코드 흐름에 맞추어 테스트 진행됨

        ※ CMD : 각 테스트 케이스가 실행되기 전에 수행되는 명령어

2. FLASH Download : 타겟에 ELF 이미지파일의 다운로드와 관련된 설정 항목이다.

3. Debug Option : 테스트중 FAIL이 발생하면 그 시점에 타겟을 멈추게하는 기능

 타겟이 멈추면 그 시점을 디버깅하여 FAIL의 원인을 찾을수 있음

 [Continue Test] 버튼을 누르면 이어서 테스트 시작

4. RUNTIME Test : 각 테스트케이스별 수행시간을 측정하는 기능이다.

-   Timer Register Address : 타이밍 측정에 사용할 내부 타이머 레지스터 주소

-   Timer 1 Tick Time : Timer 1 tick 당 시간 정보

-   MAX Timer Value : 16bit or 32bit 선택, Max Timer 값 지정

5. Step Num : 함수 진입시 매개변수나 지역변수가 할당 되지 않을 경우에  테스트 시작점에서 지정한 횟수만큼 Step을 하고 테스트를 진행한다.

③     DONE : Testcase를 작성하기 위한 csv파일 포맷이 자동 완성되어 열린다.

※ 엑셀과 연동하기 위해서는 config폴더의 excel_path.txt 안에 excel 실행파일 경로를 반드시 설정해주어야함

3-3. Test Case 입력 (CSV파일)

1. 기본 포맷 :  TYPE/[심볼or주소]

2. TYPE 정보

1. INP : Parameter, 매개변수

2. PRE : Pre-Condition, 전역변수 입력

3. OUT : 함수 Return값, 전역변수 출력 확인

3. 심볼/ 주소/ 레지스터

1.     심볼 : 심볼이 로딩되어 있는 경우 변수 이름 입력

ex) INP/tmp ,  OUT/result,  PRE/^coeff  (※ float 소수점 자료형은 심볼앞에 “^” 마킹)

  2.     주소 : 직접 주소값과 포맷을 입력 (INP 타입은 사용 불가)

ex) PRE/0x90000100(long)   ,  OUT/0x1000(short)

  3.     레지스터 : r( )함수를 이용하여 원하는 레지스터 이름 입력

ex) PRE/r(r2)   ,   OUT/R(D15)

4. 테스트케이스 값 입력

아래와 같이 calculator 함수의 명세서가 있다고 가정해 보자.

이러한 함수 사양 명세서를 보고 아래와 같이 여러개의 테스트케이스를 만들 수 있다.

참고로 아래처럼 입력값을 넣지 않고 빈칸으로 놔두게 되면 이전 테스트케이스의 값을 유지한다.

5. 랜덤값 입력

만약 원하는 범위내의 임의의 값을 대입하고 싶다면 아래처럼 rand(min~max) 형태로 입력할 수 있다.

6. 증가값 입력 (신규 추가 기능)

특정 변수의 Min부터 Max까지의 Delta증가값에 따른 결과를 보고싶을 때 사용하는 기능으로 OUT 변수들의 결과값을 뽑아낼 수 있는 기능이다.

사용 방법은 inc(min~max:Delta)  형태로 입력할 수 있다. 

해당 결과는 아래와 같이 나온다.

<TEST CASE>

<REPORT>

3-4. Test 시작

   1. Main UI의   버튼을 누르면 테스트가 시작된다.

   2. Main UI의 AREA창을 통해 테스트 진행상황을 모니터링할 수 있다.

3-5. Test Report 결과 확인

     테스트케이스 대상 별로 폴더가 각각 생성되고 테스트 결과는 csv포맷으로 출력된다.

      RES/ 로 출력되는 TYPE은 실제 타겟에서 출력된 결과를 의미한다.

    아래와 같이 결과를 받아서 테스트케이스의 예상결과값과 다르게 나온 부분이 어디인지 한눈에 파악이 가능하다.