SamProject/sam-hotfix
4
0
Fork 0
Code Issues 1 Pull Requests Actions Packages Projects Releases Wiki Activity
Files
93cd4a2e2a4e6d4bce2788e0d3bb503daf91e610
sam-hotfix/e2e/results/hotfix/E2E_FULL_TEST_SUMMARY_2026-02-19_09-55-59.md
김보곤 93cd4a2e2a test: E2E 184개 시나리오 전체 테스트 결과 (180 PASS / 4 FAIL, 97.8%) 
- run-all.js: 184개 시나리오 순차 실행 러너 고도화
- step-executor.js: 액션 핸들러 확장 및 안정성 개선
- 매출관리 4개 시나리오 실패 원인: 페이지네이션(20행 제한) 환경에서
  행수 기반 검증 로직의 구조적 한계 (API 전부 성공, CRUD 동작 정상)
  → 검색/필터 기반 검증으로 시나리오 수정 필요

Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
2026-02-19 11:24:42 +09:00

20 KiB
Raw Blame History

E2E 전체 테스트 결과 요약

실행 시간: 2026-02-19_09-55-59 총 소요 시간: 71.2분 전체 시나리오: 184개 | 성공: 180개 | 실패: 4개

카테고리별 요약

카테고리 시나리오 수 성공 실패 성공률
접근성 검사 18 18 0 100%
기능 테스트 127 123 4 97%
엣지 케이스 17 17 0 100%
성능 테스트 17 17 0 100%
비즈니스 워크플로우 5 5 0 100%

시나리오별 결과

# 시나리오 결과 스텝 성공 실패 소요(초)
1 접근성 검사: 회계관리 > 거래처관리 ✅ 4 3 0 10.6
2 접근성 검사: 회계관리 > 입금관리 ✅ 4 3 0 10.5
3 접근성 검사: 회계관리 > 매입관리 ✅ 4 3 0 10.4
4 접근성 검사: 회계관리 > 매출관리 ✅ 4 3 0 10.4
5 접근성 검사: 결재관리 > 결재함 ✅ 4 3 0 10.3
6 접근성 검사: 결재관리 > 기안함 ✅ 4 3 0 10.3
7 접근성 검사: 게시판 > 자유게시판 ✅ 4 3 0 10.3
8 접근성 검사: 인사관리 > 근태관리 ✅ 4 3 0 10.3
9 접근성 검사: 인사관리 > 부서관리 ✅ 4 3 0 10.3
10 접근성 검사: 인사관리 > 사원관리 ✅ 4 3 0 10.4
11 접근성 검사: 인사관리 > 급여관리 ✅ 4 3 0 10.5
12 접근성 검사: 자재관리 > 입고관리 ✅ 4 3 0 10.4
13 접근성 검사: 자재관리 > 재고현황 ✅ 4 3 0 10.4
14 접근성 검사: 생산관리 > 품목관리 ✅ 4 4 0 9.5
15 접근성 검사: 생산관리 > 작업지시 ✅ 4 3 0 10.5
16 접근성 검사: 판매관리 > 거래처관리 ✅ 4 3 0 10.4
17 접근성 검사: 판매관리 > 견적관리 ✅ 4 3 0 10.5
18 접근성 검사: 판매관리 > 수주관리 ✅ 4 3 0 10.4
19 악성채권추심관리 테스트 ✅ 24 22 0 10.4
20 계좌입출금내역 테스트 ✅ 19 16 0 10.2
21 어음관리 테스트 ✅ 24 18 0 19.6
22 카드사용내역 테스트 ✅ 19 16 0 10.3
23 회계거래처관리 테스트 ✅ 23 20 0 16.6
24 입금관리 테스트 ✅ 25 19 0 19.5
25 지출예상내역서 테스트 ✅ 19 14 0 11.7
26 결제내역 테스트 ✅ 19 15 0 13.4
27 매입관리 테스트 ✅ 18 14 0 13.6
28 미수금현황 테스트 ✅ 19 16 0 11.5
29 매출관리 테스트 ✅ 18 14 0 13.6
30 출금관리 테스트 ✅ 25 19 0 19.6
31 API 건강성 감사: 회계 ✅ 39 39 0 26.4
32 API 건강성 감사: 생산/기타 ✅ 35 35 0 28.9
33 API 건강성 감사: 판매/인사 ✅ 35 35 0 28.8
34 결재함 E2E 테스트 ✅ 20 12 0 45.7
35 근태현황 출퇴근 테스트 ✅ 17 12 0 32.9
36 연속 등록 테스트: 어음관리 ✅ 39 39 0 85.8
37 연속 등록 테스트: 입금관리 ✅ 39 39 0 90.5
38 연속 등록 테스트: 자유게시판 ✅ 33 33 0 74.9
39 계정과목 일괄변경 버그 회귀 테스트 (BUG-SALES-20260115-001): 매출관리 ✅ 14 14 0 19.0
40 게시판 관리 테스트 ✅ 22 22 0 11.5
41 설정 - 회사정보 ✅ 31 14 0 48.0
42 Create+Delete 테스트: 어음관리 ✅ 12 12 0 30.6
43 Create+Delete 테스트: 입금관리 ✅ 12 12 0 28.0
44 Create+Delete 테스트: 자유게시판 ✅ 12 12 0 27.6
45 모듈 간 데이터 일관성 검증 (판매↔회계, 판매↔생산) ✅ 15 15 0 31.3
46 이벤트 게시판 테스트 ✅ 19 14 0 13.8
47 FAQ 테스트 ✅ 16 12 0 11.0
48 공지사항 테스트 ✅ 19 15 0 13.8
49 부서관리 테스트 ✅ 16 12 0 13.1
50 입금관리 테스트 ✅ 21 20 0 27.8
51 상세 조회 왕복 검증: 회계 ✅ 23 23 0 26.9
52 상세 조회 왕복 검증: 인사/게시판 ✅ 15 15 0 21.7
53 상세 조회 왕복 검증: 판매 ✅ 23 23 0 26.8
54 목록↔상세 필드별 대조 검증: 매출관리 ❌ 12 11 1 18.4
55 기안함 테스트 ✅ 17 15 0 11.8
56 엣지 케이스: 경계값 입력 검증 (회계 > 매출관리) ✅ 14 14 0 17.8
57 엣지 케이스: 경계값 입력 (회계 > 입금관리) ✅ 14 14 0 20.5
58 엣지 케이스: 경계값 입력 (인사 > 사원관리) ✅ 14 14 0 20.5
59 엣지 케이스: 경계값 입력 (판매 > 거래처관리) ✅ 14 14 0 20.5
60 엣지 케이스: 동시 액션 (인사 > 근태관리) ✅ 5 5 0 11.9
61 엣지 케이스: 빈 폼 제출 (회계 > 입금관리) ✅ 7 7 0 16.2
62 엣지 케이스: 빈 폼 제출 (게시판 > 자유게시판) ✅ 7 7 0 16.2
63 엣지 케이스: 빈 폼 제출 (인사 > 사원관리) ✅ 7 7 0 16.2
64 엣지 케이스: 빈 폼 제출 (판매 > 거래처관리) ✅ 7 7 0 16.2
65 엣지 케이스: 숫자 경계값 (회계 > 입금관리) ✅ 13 13 0 20.8
66 엣지 케이스: UI 내구성 연타 테스트 (회계 > 매출관리) ✅ 10 10 0 22.5
67 엣지 케이스: 삭제 버튼 연타 (게시판 > 자유게시판) ✅ 6 6 0 12.9
68 엣지 케이스: 저장 버튼 연타 (게시판 > 자유게시판) ✅ 7 7 0 17.0
69 엣지 케이스: 저장 버튼 연타 (판매 > 거래처관리) ✅ 7 7 0 17.0
70 엣지 케이스: 특수문자 검색 (게시판 > 자유게시판) ✅ 14 14 0 30.1
71 엣지 케이스: 특수문자 검색 (판매 > 거래처관리) ✅ 14 14 0 30.1
72 엣지 케이스: 유니코드 입력 (게시판 > 자유게시판) ✅ 10 10 0 17.7
73 직원 등록 테스트 ✅ 21 21 0 9.7
74 폼 유효성 검증 감사: 회계 (어음/입금/출금) ✅ 20 20 0 34.4
75 폼 유효성 검증 감사: 생산/게시판 ✅ 13 13 0 19.3
76 폼 유효성 검증 감사: 판매 (거래처/수주/견적) ✅ 20 20 0 34.3
77 자유게시판 E2E 테스트 ✅ 22 22 0 13.6
78 Full CRUD 테스트: 어음관리 ✅ 20 20 0 39.2
79 Full CRUD 테스트: 입금관리 ✅ 20 20 0 38.2
80 Full CRUD 테스트: 매출관리 ❌ 18 12 6 39.4
81 Full CRUD 테스트: 자유게시판 ✅ 20 20 0 40.0
82 근태관리 테스트 ✅ 14 14 0 10.3
83 근태현황 테스트 ✅ 19 14 0 12.0
84 부서관리 테스트 ✅ 14 14 0 10.2
85 사원관리 테스트 ✅ 22 22 0 13.5
86 급여관리 테스트 ✅ 22 22 0 13.3
87 휴가관리 테스트 ✅ 25 19 0 19.0
88 입력 필드 전수 테스트: 어음/입금/출금 (1/5) ✅ 20 20 0 46.9
89 입력 필드 전수 테스트: 거래처(회계)/악성채권 (2/5) ✅ 13 13 0 57.3
90 입력 필드 전수 테스트: 입고/제품검사 (5/5) ✅ 13 13 0 27.8
91 입력 필드 전수 테스트: 작업지시/작업실적 (4/5) ✅ 13 13 0 15.8
92 입력 필드 전수 테스트: 거래처(판매)/수주/견적 (3/5) ✅ 20 20 0 34.4
93 재고현황 테스트 ✅ 12 12 0 14.3
94 품목관리 테스트 ✅ 16 11 0 20.6
95 품목기준관리 테스트 ✅ 14 13 0 10.7
96 로그인 테스트 (끝판왕) ✅ 24 22 0 11.9
97 입고관리 테스트 ✅ 25 19 0 17.8
98 재고현황 테스트 ✅ 19 16 0 10.3
99 다중 품목 등록 + 자동계산 + 품목삭제 재계산: 매출관리 ❌ 22 21 1 33.8
100 페이지네이션 & 정렬 검증: 회계 ✅ 17 17 0 33.5
101 페이지네이션 & 정렬 검증: 인사/게시판 ✅ 11 11 0 23.9
102 페이지네이션 & 정렬 검증: 판매 ✅ 17 17 0 31.5
103 PDF 다운로드 전체 검사 ✅ 5 5 0 1.2
104 성능 측정: 회계관리 > 거래처관리 ✅ 5 5 0 7.2
105 성능 측정: 회계관리 > 입금관리 ✅ 5 5 0 7.1
106 성능 측정: 회계관리 > 매입관리 ✅ 5 5 0 7.1
107 성능 측정: 회계관리 > 매출관리 ✅ 5 5 0 7.3
108 성능 측정: 인사관리 > 근태관리 ✅ 5 5 0 7.1
109 성능 측정: 인사관리 > 부서관리 ✅ 5 5 0 7.3
110 성능 측정: 인사관리 > 사원관리 ✅ 5 5 0 7.1
111 성능 측정: 인사관리 > 급여관리 ✅ 5 5 0 7.1
112 성능 측정: 자재관리 > 입고관리 ✅ 5 5 0 7.2
113 성능 측정: 자재관리 > 재고현황 ✅ 5 5 0 7.2
114 성능 측정: 생산관리 > 품목관리 ✅ 5 5 0 7.2
115 성능 측정: 생산관리 > 작업지시 ✅ 5 5 0 7.1
116 성능 측정: 생산관리 > 작업실적 ✅ 5 5 0 7.2
117 성능 측정: 판매관리 > 거래처관리 ✅ 5 5 0 7.2
118 성능 측정: 판매관리 > 견적관리 ✅ 5 5 0 7.3
119 성능 측정: 판매관리 > 수주관리 ✅ 5 5 0 7.2
120 성능 측정: 판매관리 > 단가관리 ✅ 5 5 0 7.2
121 생산 현황판 테스트 ✅ 12 10 0 12.1
122 생산품목관리 테스트 ✅ 14 13 0 10.7
123 작업지시 관리 테스트 ✅ 25 21 0 15.0
124 작업실적 테스트 ✅ 23 19 0 16.8
125 작업자 화면 테스트 ✅ 14 13 0 10.7
126 품질인정심사 시스템 테스트 ✅ 14 14 0 9.6
127 제품검사관리 테스트 ✅ 25 19 0 17.5
128 입고관리 테스트 ✅ 9 9 0 11.3
129 참조함 E2E 테스트 ✅ 40 37 0 37.3
130 새로고침 데이터 유지 검증: 어음관리 ✅ 16 16 0 34.2
131 새로고침 데이터 유지 검증: 입금관리 ✅ 16 16 0 31.6
132 새로고침 데이터 유지 검증: 매출관리 ✅ 16 16 0 32.9
133 새로고침 데이터 유지 검증: 자유게시판 ✅ 16 16 0 33.4
134 판매거래처관리 테스트 ✅ 24 19 0 19.0
135 Full CRUD 테스트: 매출관리 ❌ 23 21 2 49.3
136 수주관리 테스트 ✅ 25 21 0 14.2
137 단가관리 테스트 ✅ 27 24 0 14.5
138 견적관리 테스트 ✅ 25 19 0 18.0
139 기안함 검색 버그 상세 검증 ✅ 11 11 0 27.5
140 급여관리 검색 버그 상세 검증 ✅ 10 10 0 27.5
141 검색/필터/페이지네이션 테스트: 매출관리 ✅ 18 18 0 25.9
142 검색 기능 동작 검증: 회계 ✅ 20 20 0 43.5
143 검색 기능 감사: 회계관리 (1/6) ✅ 20 20 0 43.8
144 검색 기능 감사: 회계관리2+인사관리 (2/6) ✅ 20 20 0 39.2
145 검색 기능 감사: 게시판/고객센터/설정1 (5/6) ✅ 20 20 0 36.9
146 검색 기능 감사: 생산/품목/품질/자재 (3/6) ✅ 20 20 0 30.2
147 검색 기능 감사: 판매/출고/결재 (4/6) ✅ 16 16 0 38.0
148 검색 기능 감사: 설정2 (6/6) ✅ 14 14 0 24.0
149 검색 기능 동작 검증: 인사/게시판 ✅ 13 13 0 33.8
150 검색 기능 동작 검증: 판매 ✅ 20 20 0 32.2
151 검색 옵션 전수 테스트: 회계거래처/입금/출금 (1/10) ✅ 11 11 0 81.7
152 검색 옵션 전수 테스트: 매입/매출/카드내역 (2/10) ✅ 11 11 0 79.3
153 검색 옵션 전수 테스트: 어음/추심/계좌 (3/11) ✅ 11 11 0 95.2
154 검색 옵션 전수 테스트: 미수금/결제/지출예상 (4/11) ✅ 11 11 0 44.4
155 검색 옵션 전수 테스트: 결재관리 (6/10) ✅ 11 11 0 69.4
156 검색 옵션 전수 테스트: 게시판/고객센터 (5/10) ✅ 19 19 0 75.1
157 검색 옵션 전수 테스트: 인사관리 전체 (4/10) ✅ 27 27 0 93.2
158 검색 옵션 전수 테스트: 생산/품목관리 (8/11) ✅ 19 19 0 52.3
159 검색 옵션 전수 테스트: 품질/자재관리 (9/10) ✅ 15 15 0 65.9
160 검색 옵션 전수 테스트: 판매관리/출고 (7/11) ✅ 19 19 0 31.4
161 검색 옵션 전수 테스트: 설정 (10/11) ✅ 19 19 0 26.4
162 계정정보 테스트 ✅ 16 14 0 11.4
163 근태설정 테스트 ✅ 16 13 0 10.2
164 계좌관리 테스트 ✅ 23 21 0 12.3
165 회사정보 테스트 ✅ 16 13 0 13.1
166 알림설정 테스트 ✅ 16 13 0 12.5
167 권한관리 테스트 ✅ 20 18 0 12.6
168 팝업관리 테스트 ✅ 23 21 0 14.0
169 직책관리 테스트 ✅ 12 11 0 11.0
170 직급관리 테스트 ✅ 12 11 0 11.2
171 구독관리 테스트 ✅ 16 12 0 12.7
172 휴가정책 테스트 ✅ 16 15 0 8.9
173 근무일정 테스트 ✅ 16 15 0 9.9
174 출고관리 테스트 ✅ 13 11 0 18.2
175 Test bills 14 steps ✅ 14 14 0 56.0
176 Test bills page minimal ✅ 3 3 0 7.3
177 거래처원장 테스트 ✅ 34 30 0 20.8
178 거래처관리 테스트 ✅ 34 34 0 35.5
179 출금관리 테스트 ✅ 21 21 0 10.0
180 비즈니스 워크플로우: 게시판→결재기안→결재함 흐름 ✅ 15 15 0 21.8
181 비즈니스 워크플로우: 사원등록→부서→근태→급여 흐름 ✅ 14 14 0 29.8
182 비즈니스 워크플로우: 품목→입고→재고→출고 흐름 ✅ 15 15 0 22.8
183 비즈니스 워크플로우: 구매→매입 흐름 ✅ 7 7 0 18.0
184 비즈니스 워크플로우: 거래처→단가→수주→매출 흐름 ✅ 15 15 0 19.3

비즈니스 워크플로우 상세

✅ 비즈니스 워크플로우: 게시판→결재기안→결재함 흐름

  • 스텝: 15/15 성공 | 소요: 21.8초
  • 단계: CAPTURE_POST(✅) → CHECK_DRAFTS(✅) → CHECK_APPROVALS(✅) → CHECK_REFERENCES(✅)

✅ 비즈니스 워크플로우: 사원등록→부서→근태→급여 흐름

  • 스텝: 14/14 성공 | 소요: 29.8초
  • 단계: CAPTURE_EMPLOYEE(✅) → CHECK_DEPARTMENTS(✅) → VERIFY_EMPLOYEE_ATTEND(✅) → VERIFY_EMPLOYEE_SALARY(✅)

✅ 비즈니스 워크플로우: 품목→입고→재고→출고 흐름

  • 스텝: 15/15 성공 | 소요: 22.8초
  • 단계: CAPTURE_ITEM(✅) → VERIFY_ITEM_RECEIVING(✅) → VERIFY_ITEM_STOCK(✅) → CHECK_WITHDRAWAL(✅)

✅ 비즈니스 워크플로우: 구매→매입 흐름

  • 스텝: 7/7 성공 | 소요: 18.0초
  • 단계: CAPTURE_VENDOR(✅) → VERIFY_VENDOR_ACC(✅)

✅ 비즈니스 워크플로우: 거래처→단가→수주→매출 흐름

  • 스텝: 15/15 성공 | 소요: 19.3초
  • 단계: CAPTURE_CLIENT(✅) → CAPTURE_PRICE_ITEM(✅) → CHECK_ORDERS(✅) → CHECK_SALES(✅)

성능 테스트 요약

페이지 로드 시간 등급 API 평균 DOM 노드
성능 측정: 회계관리 > 거래처관리 - - - -
성능 측정: 회계관리 > 입금관리 - - - -
성능 측정: 회계관리 > 매입관리 - - - -
성능 측정: 회계관리 > 매출관리 - - - -
성능 측정: 인사관리 > 근태관리 - - - -
성능 측정: 인사관리 > 부서관리 - - - -
성능 측정: 인사관리 > 사원관리 - - - -
성능 측정: 인사관리 > 급여관리 - - - -
성능 측정: 자재관리 > 입고관리 - - - -
성능 측정: 자재관리 > 재고현황 - - - -
성능 측정: 생산관리 > 품목관리 - - - -
성능 측정: 생산관리 > 작업지시 - - - -
성능 측정: 생산관리 > 작업실적 - - - -
성능 측정: 판매관리 > 거래처관리 - - - -
성능 측정: 판매관리 > 견적관리 - - - -
성능 측정: 판매관리 > 수주관리 - - - -
성능 측정: 판매관리 > 단가관리 - - - -

접근성 검사 요약

페이지 점수 등급 Critical Serious Moderate
접근성 검사: 회계관리 > 거래처관리 - - - - -
접근성 검사: 회계관리 > 입금관리 - - - - -
접근성 검사: 회계관리 > 매입관리 - - - - -
접근성 검사: 회계관리 > 매출관리 - - - - -
접근성 검사: 결재관리 > 결재함 - - - - -
접근성 검사: 결재관리 > 기안함 - - - - -
접근성 검사: 게시판 > 자유게시판 - - - - -
접근성 검사: 인사관리 > 근태관리 - - - - -
접근성 검사: 인사관리 > 부서관리 - - - - -
접근성 검사: 인사관리 > 사원관리 - - - - -
접근성 검사: 인사관리 > 급여관리 - - - - -
접근성 검사: 자재관리 > 입고관리 - - - - -
접근성 검사: 자재관리 > 재고현황 - - - - -
접근성 검사: 생산관리 > 품목관리 - - - - -
접근성 검사: 생산관리 > 작업지시 - - - - -
접근성 검사: 판매관리 > 거래처관리 - - - - -
접근성 검사: 판매관리 > 견적관리 - - - - -
접근성 검사: 판매관리 > 수주관리 - - - - -

실패 시나리오 상세

❌ 목록↔상세 필드별 대조 검증: 매출관리 (detail-verify-acc-sales)

  • Step 6 ([회계관리 > 매출관리] [VERIFY] 상세 페이지 필드 1:1 대조): evaluate returned ok:false

❌ Full CRUD 테스트: 매출관리 (full-crud-acc-sales)

  • Step 9 ([회계관리 > 매출관리] [VERIFY] 생성 데이터 확인): evaluate returned ok:false
  • Step 10 ([회계관리 > 매출관리] [READ] 상세 페이지 진입): E2E_TEST_ 행 없음
  • Step 12 ([회계관리 > 매출관리] [READ] 상세 데이터 검증 (품목/수량/단가/공급가액)): evaluate returned ok:false
  • Step 13 ([회계관리 > 매출관리] [UPDATE] 수정 모드 진입 + 수량 변경 + 저장): 수정 버튼 없음
  • Step 15 ([회계관리 > 매출관리] [UPDATE] 수정 내용 검증 (공급가액 1,000,000 재계산)): evaluate returned ok:false
  • Step 18 ([회계관리 > 매출관리] [DELETE] 데이터 삭제): E2E_TEST_ 행 없음

❌ 다중 품목 등록 + 자동계산 + 품목삭제 재계산: 매출관리 (multi-item-acc-sales)

  • Step 20 ([회계관리 > 매출관리] [VERIFY] 목록에서 합계 확인): evaluate returned ok:false

❌ Full CRUD 테스트: 매출관리 (sales-management)

  • Step 10 ([회계관리 > 매출관리] [VERIFY] 생성 데이터 확인 (행수 증가 + 금액 대조)): evaluate returned ok:false
  • Step 23 ([회계관리 > 매출관리] [VERIFY] 삭제 확인 (행수 원복 검증)): evaluate returned ok:false