Files
sam-hotfix/E2E_FULL_TEST_SUMMARY_2026-03-08_13-04-25.md
kimbokon 0df8f503bd feat: 전체 E2E 재테스트 결과 (204 시나리오, 202 PASS / 2 FAIL, 99.0%)
- fill_form 필드 라벨 수정 후 재테스트 (종목→업종)
- accounting-client: fill_form 5/5 정상 입력 확인
- sales-client: fill_form 5/5 정상 입력 확인
- 실패 2건: search-options-hr (부서관리 테이블 타임아웃), vendor-management (저장 후 확인 evaluate false)

Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
2026-03-08 13:12:59 +09:00

23 KiB

E2E 전체 테스트 결과 요약

실행 시간: 2026-03-08_13-04-25 총 소요 시간: 89.2분 전체 시나리오: 204개 | 성공: 202개 | 실패: 2개 📉 (이전: 204/204 성공)

카테고리별 요약

카테고리 시나리오 수 성공 실패 성공률
접근성 검사 18 18 0 100%
기능 테스트 147 145 2 99%
엣지 케이스 17 17 0 100%
성능 테스트 17 17 0 100%
비즈니스 워크플로우 5 5 0 100%

시나리오별 결과

# 시나리오 결과 스텝 성공 실패 소요(초)
1 접근성 검사: 회계관리 > 거래처관리 4 3 0 12.8
2 접근성 검사: 회계관리 > 입금관리 4 3 0 12.7
3 접근성 검사: 회계관리 > 매입관리 4 4 0 11.2
4 접근성 검사: 회계관리 > 매출관리 4 3 0 12.6
5 접근성 검사: 결재관리 > 결재함 4 4 0 11.2
6 접근성 검사: 결재관리 > 기안함 4 4 0 11.2
7 접근성 검사: 게시판 > 자유게시판 4 3 0 12.7
8 접근성 검사: 인사관리 > 근태관리 4 3 0 12.7
9 접근성 검사: 인사관리 > 부서관리 4 3 0 12.7
10 접근성 검사: 인사관리 > 사원관리 4 3 0 12.7
11 접근성 검사: 인사관리 > 급여관리 4 4 0 11.2
12 접근성 검사: 자재관리 > 입고관리 4 3 0 12.7
13 접근성 검사: 자재관리 > 재고현황 4 4 0 11.2
14 접근성 검사: 생산관리 > 품목관리 4 4 0 11.2
15 접근성 검사: 생산관리 > 작업지시 4 3 0 12.7
16 접근성 검사: 판매관리 > 거래처관리 4 3 0 12.7
17 접근성 검사: 판매관리 > 견적관리 4 4 0 11.2
18 접근성 검사: 판매관리 > 수주관리 4 3 0 12.7
19 악성채권추심관리 테스트 24 22 0 11.2
20 계좌입출금내역 테스트 18 16 0 10.2
21 어음관리 테스트 24 18 0 23.3
22 카드사용내역 테스트 18 16 0 10.2
23 회계거래처관리 테스트 23 20 0 17.8
24 일일 일보 테스트 10 10 0 11.5
25 입금관리 테스트 25 19 0 22.3
26 지출예상내역서 테스트 16 14 0 9.5
27 상품권관리 테스트 11 9 0 13.1
28 일반전표입력 테스트 12 10 0 15.0
29 결제내역 테스트 18 14 0 15.2
30 매입관리 테스트 16 14 0 12.5
31 미수금현황 테스트 19 16 0 13.1
32 매출관리 테스트 16 14 0 12.5
33 세금계산서발행 테스트 11 10 0 11.3
34 세금계산서관리 테스트 11 10 0 11.3
35 출금관리 테스트 25 19 0 22.3
36 API 건강성 감사: 회계 39 39 0 46.1
37 API 건강성 감사: 생산/기타 35 35 0 46.7
38 API 건강성 감사: 판매/인사 35 35 0 46.7
39 결재함 E2E 테스트 25 23 0 26.3
40 근태현황 출퇴근 테스트 12 12 0 12.8
41 근태관리 테스트 25 25 0 19.1
42 연속 등록 테스트: 어음관리 39 39 0 120.7
43 연속 등록 테스트: 입금관리 39 39 0 89.2
44 연속 등록 테스트: 자유게시판 39 39 0 94.5
45 계정과목 일괄변경 버그 회귀 테스트 (BUG-SALES-20260115-001): 매출관리 14 14 0 26.5
46 게시판 관리 테스트 22 22 0 11.3
47 게시판 테스트 페이지 테스트 13 11 0 15.3
48 설정 - 회사정보 31 29 0 23.5
49 Create+Delete 테스트: 어음관리 12 12 0 38.2
50 Create+Delete 테스트: 입금관리 12 12 0 35.7
51 Create+Delete 테스트: 자유게시판 15 15 0 42.0
52 모듈 간 데이터 일관성 검증 (판매↔회계, 판매↔생산) 15 15 0 39.0
53 이벤트 게시판 테스트 19 14 0 16.2
54 FAQ 테스트 16 12 0 12.8
55 공지사항 테스트 19 15 0 15.7
56 부서관리 테스트 16 16 0 8.8
57 입금관리 테스트 21 20 0 16.1
58 상세 조회 왕복 검증: 회계 23 23 0 32.6
59 상세 조회 왕복 검증: 인사/게시판 15 15 0 25.6
60 상세 조회 왕복 검증: 판매 23 23 0 32.6
61 목록↔상세 필드별 대조 검증: 매출관리 12 12 0 23.0
62 기안함 테스트 17 15 0 12.6
63 엣지 케이스: 경계값 입력 검증 (회계 > 매출관리) 14 14 0 23.5
64 엣지 케이스: 경계값 입력 (회계 > 입금관리) 14 14 0 23.2
65 엣지 케이스: 경계값 입력 (인사 > 사원관리) 14 14 0 23.3
66 엣지 케이스: 경계값 입력 (판매 > 거래처관리) 14 14 0 23.3
67 엣지 케이스: 동시 액션 (인사 > 근태관리) 5 5 0 13.8
68 엣지 케이스: 빈 폼 제출 (회계 > 입금관리) 7 7 0 19.0
69 엣지 케이스: 빈 폼 제출 (게시판 > 자유게시판) 7 7 0 19.0
70 엣지 케이스: 빈 폼 제출 (인사 > 사원관리) 7 7 0 19.0
71 엣지 케이스: 빈 폼 제출 (판매 > 거래처관리) 7 7 0 19.0
72 엣지 케이스: 숫자 경계값 (회계 > 입금관리) 13 13 0 23.5
73 엣지 케이스: UI 내구성 연타 테스트 (회계 > 매출관리) 10 10 0 27.2
74 엣지 케이스: 삭제 버튼 연타 (게시판 > 자유게시판) 6 6 0 15.8
75 엣지 케이스: 저장 버튼 연타 (게시판 > 자유게시판) 7 7 0 19.8
76 엣지 케이스: 저장 버튼 연타 (판매 > 거래처관리) 7 7 0 19.8
77 엣지 케이스: 특수문자 검색 (게시판 > 자유게시판) 14 14 0 31.9
78 엣지 케이스: 특수문자 검색 (판매 > 거래처관리) 14 14 0 31.9
79 엣지 케이스: 유니코드 입력 (게시판 > 자유게시판) 10 10 0 20.3
80 폼 유효성 검증 감사: 회계 (어음/입금/출금) 20 20 0 43.1
81 폼 유효성 검증 감사: 생산/게시판 13 13 0 25.1
82 폼 유효성 검증 감사: 판매 (거래처/수주/견적) 20 20 0 43.1
83 자유게시판 E2E 테스트 22 22 0 13.4
84 Full CRUD 테스트: 어음관리 (Enhanced) 32 32 0 66.2
85 Full CRUD 테스트: 입금관리 (금액포맷+상세대조+API검증) 35 35 0 55.8
86 Full CRUD 테스트: 매출관리 (계산검증+상세대조+API검증) 33 33 0 54.0
87 Full CRUD 테스트: 자유게시판 (Enhanced) 33 33 0 63.8
88 근태관리 테스트 14 14 0 10.1
89 근태현황 테스트 17 14 0 11.3
90 부서관리 테스트 14 14 0 9.8
91 사원관리 테스트 22 22 0 13.3
92 급여 장기요양보험 필드 검증 테스트 16 16 0 17.0
93 급여관리 테스트 23 23 0 13.0
94 휴가관리 테스트 25 19 0 23.1
95 입력 필드 전수 테스트: 어음/입금/출금 (1/5) 20 20 0 75.2
96 입력 필드 전수 테스트: 거래처(회계)/악성채권 (2/5) 13 13 0 60.3
97 입력 필드 전수 테스트: 입고/제품검사 (5/5) 13 13 0 30.4
98 입력 필드 전수 테스트: 작업지시/작업실적 (4/5) 13 13 0 20.5
99 입력 필드 전수 테스트: 거래처(판매)/수주/견적 (3/5) 20 20 0 41.2
100 품목관리 테스트 16 12 0 15.2
101 품목기준관리 테스트 14 13 0 11.0
102 인증 세션 테스트 13 12 0 4.8
103 배차차량관리 목록/검색/상세/등록폼/필터/페이지네이션 테스트 23 22 0 14.3
104 입고관리 테스트 25 19 0 20.6
105 재고현황 테스트 18 16 0 10.0
106 다중 품목 등록 + 자동계산 + 품목삭제 재계산: 매출관리 22 22 0 43.3
107 페이지네이션 & 정렬 검증: 회계 17 17 0 39.1
108 페이지네이션 & 정렬 검증: 인사/게시판 11 11 0 27.6
109 페이지네이션 & 정렬 검증: 판매 17 17 0 37.1
110 PDF 다운로드 전체 검사 5 5 0 1.1
111 성능 측정: 회계관리 > 거래처관리 5 5 0 9.0
112 성능 측정: 회계관리 > 입금관리 5 5 0 9.0
113 성능 측정: 회계관리 > 매입관리 5 5 0 9.0
114 성능 측정: 회계관리 > 매출관리 5 5 0 9.0
115 성능 측정: 인사관리 > 근태관리 5 5 0 9.0
116 성능 측정: 인사관리 > 부서관리 5 5 0 9.0
117 성능 측정: 인사관리 > 사원관리 5 5 0 8.9
118 성능 측정: 인사관리 > 급여관리 5 5 0 8.9
119 성능 측정: 자재관리 > 입고관리 5 5 0 9.0
120 성능 측정: 자재관리 > 재고현황 5 5 0 9.0
121 성능 측정: 생산관리 > 품목관리 5 5 0 9.0
122 성능 측정: 생산관리 > 작업지시 5 5 0 9.0
123 성능 측정: 생산관리 > 작업실적 5 5 0 9.0
124 성능 측정: 판매관리 > 거래처관리 5 5 0 9.0
125 성능 측정: 판매관리 > 견적관리 5 5 0 8.9
126 성능 측정: 판매관리 > 수주관리 5 5 0 9.0
127 성능 측정: 판매관리 > 단가관리 5 5 0 9.0
128 생산 현황판 테스트 12 10 0 12.8
129 생산품목관리 테스트 14 13 0 11.0
130 작업지시 CRUD + 필드검증 + API확인: 생산관리 30 30 0 41.4
131 작업실적 테스트 23 19 0 18.5
132 작업자 화면 테스트 14 13 0 11.0
133 발주관리 테스트 12 10 0 14.8
134 구매 단가관리 테스트 11 8 0 21.6
135 구매현황 테스트 9 8 0 13.0
136 구매관리 거래처관리 테스트 11 9 0 14.8
137 품질인정심사 시스템 테스트 14 14 0 9.5
138 제품검사관리 테스트 17 17 0 12.0
139 실적신고관리 테스트 12 12 0 9.5
140 참조함 E2E 테스트 40 37 0 29.7
141 새로고침 데이터 유지 검증: 어음관리 18 18 0 45.2
142 새로고침 데이터 유지 검증: 입금관리 16 16 0 52.0
143 새로고침 데이터 유지 검증: 매출관리 16 16 0 48.3
144 새로고침 데이터 유지 검증: 자유게시판 19 19 0 55.5
145 판매거래처관리 테스트 23 19 0 19.4
146 Full CRUD 테스트: 매출관리 23 23 0 60.7
147 수주 일괄삭제 테스트 20 20 0 39.5
148 수주관리 CRUD + 계산검증 테스트 32 32 0 48.2
149 단가관리 테스트 26 24 0 14.3
150 견적관리 CRUD + 계산검증 테스트 32 31 0 45.5
151 현장관리 테스트 11 9 0 14.8
152 기안함 검색 버그 상세 검증 11 11 0 25.1
153 급여관리 검색 버그 상세 검증 10 10 0 27.1
154 검색/필터/페이지네이션 테스트: 매출관리 18 18 0 32.6
155 검색 기능 동작 검증: 회계 20 20 0 52.2
156 검색 기능 감사: 회계관리 (1/6) 20 20 0 43.3
157 검색 기능 감사: 회계관리2+인사관리 (2/6) 20 20 0 36.4
158 검색 기능 감사: 게시판/고객센터/설정1 (5/6) 20 20 0 36.6
159 검색 기능 감사: 생산/품목/품질/자재 (3/6) 20 20 0 29.8
160 검색 기능 감사: 판매/출고/결재 (4/6) 16 16 0 37.6
161 검색 기능 감사: 설정2 (6/6) 14 14 0 23.5
162 검색 기능 동작 검증: 인사/게시판 13 13 0 39.5
163 검색 기능 동작 검증: 판매 20 20 0 40.7
164 검색 옵션 전수 테스트: 회계거래처/입금/출금 (1/10) 11 11 0 90.8
165 검색 옵션 전수 테스트: 매입/매출/카드내역 (2/10) 11 11 0 72.5
166 검색 옵션 전수 테스트: 어음/추심/계좌 (3/11) 11 11 0 59.9
167 검색 옵션 전수 테스트: 미수금/결제/지출예상 (4/11) 11 11 0 50.2
168 검색 옵션 전수 테스트: 결재관리 (6/10) 11 11 0 78.4
169 검색 옵션 전수 테스트: 게시판/고객센터 (5/10) 19 19 0 84.6
170 검색 옵션 전수 테스트: 인사관리 전체 (4/10) 27 26 1 128.4
171 검색 옵션 전수 테스트: 생산/품목관리 (8/11) 19 19 0 49.3
172 검색 옵션 전수 테스트: 품질/자재관리 (9/10) 15 15 0 73.6
173 검색 옵션 전수 테스트: 판매관리/출고 (7/11) 19 19 0 41.2
174 검색 옵션 전수 테스트: 설정 (10/11) 19 19 0 40.2
175 계정정보 테스트 16 14 0 12.2
176 근태설정 테스트 16 13 0 11.4
177 계좌관리 테스트 23 21 0 13.2
178 바로빌연동관리 테스트 8 6 0 12.5
179 달력 일정 CRUD 테스트 16 16 0 33.8
180 달력관리 테스트 8 7 0 11.0
181 카드관리 목록/검색/상세/등록폼/페이지네이션 테스트 23 22 0 14.3
182 회사정보 테스트 16 13 0 14.5
183 알림설정 테스트 16 13 0 14.2
184 권한관리 테스트 20 18 0 13.7
185 팝업관리 테스트 23 21 0 14.8
186 직책관리 테스트 13 13 0 11.3
187 직급관리 테스트 13 12 0 11.3
188 구독관리 테스트 16 12 0 14.6
189 휴가정책 테스트 16 15 0 8.6
190 근무일정 테스트 16 15 0 10.2
191 점검표 관리 테스트 11 8 0 19.1
192 단가배포관리 테스트 11 8 0 19.1
193 공정관리 테스트 12 10 0 13.0
194 시스템 대시보드 위젯/통계/현황판/자금현황/지출예상/설정 테스트 20 19 0 11.6
195 Test bills 14 steps 14 14 0 99.4
196 Test bills page minimal 3 3 0 7.0
197 거래처원장 테스트 34 30 0 22.4
198 거래처관리 검색/필터/상세/수정/복원 + 네거티브 + 섹션검증: 회계관리 36 35 1 47.5
199 출금관리 테스트 21 20 0 16.2
200 비즈니스 워크플로우: 게시판→결재기안→결재함 흐름 15 15 0 29.6
201 비즈니스 워크플로우: 사원등록→부서→근태→급여 흐름 14 14 0 37.5
202 비즈니스 워크플로우: 품목→입고→재고→출고 흐름 15 15 0 38.8
203 비즈니스 워크플로우: 구매→매입 흐름 7 7 0 21.7
204 비즈니스 워크플로우: 거래처→단가→수주→매출 흐름 22 22 0 27.0

비즈니스 워크플로우 상세

비즈니스 워크플로우: 게시판→결재기안→결재함 흐름

  • 스텝: 15/15 성공 | 소요: 29.6초
  • 단계: CAPTURE_POST() → CHECK_DRAFTS() → CHECK_APPROVALS() → CHECK_REFERENCES()

비즈니스 워크플로우: 사원등록→부서→근태→급여 흐름

  • 스텝: 14/14 성공 | 소요: 37.5초
  • 단계: CAPTURE_EMPLOYEE() → CHECK_DEPARTMENTS() → VERIFY_EMPLOYEE_ATTEND() → VERIFY_EMPLOYEE_SALARY()

비즈니스 워크플로우: 품목→입고→재고→출고 흐름

  • 스텝: 15/15 성공 | 소요: 38.8초
  • 단계: CAPTURE_ITEM() → VERIFY_ITEM_RECEIVING() → VERIFY_ITEM_STOCK() → CHECK_WITHDRAWAL()

비즈니스 워크플로우: 구매→매입 흐름

  • 스텝: 7/7 성공 | 소요: 21.7초
  • 단계: CAPTURE_VENDOR() → VERIFY_VENDOR_ACC()

비즈니스 워크플로우: 거래처→단가→수주→매출 흐름

  • 스텝: 22/22 성공 | 소요: 27.0초
  • 단계: INIT() → CAPTURE_CLIENT() → VERIFY() → CAPTURE_PRICE_ITEM() → VERIFY() → CHECK_ORDERS() → VERIFY() → CHECK_SALES() → VERIFY() → VERIFY() → SUMMARY()

성능 테스트 요약

페이지 로드 시간 등급 API 평균 DOM 노드
성능 측정: 회계관리 > 거래처관리 - - - -
성능 측정: 회계관리 > 입금관리 - - - -
성능 측정: 회계관리 > 매입관리 - - - -
성능 측정: 회계관리 > 매출관리 - - - -
성능 측정: 인사관리 > 근태관리 - - - -
성능 측정: 인사관리 > 부서관리 - - - -
성능 측정: 인사관리 > 사원관리 - - - -
성능 측정: 인사관리 > 급여관리 - - - -
성능 측정: 자재관리 > 입고관리 - - - -
성능 측정: 자재관리 > 재고현황 - - - -
성능 측정: 생산관리 > 품목관리 - - - -
성능 측정: 생산관리 > 작업지시 - - - -
성능 측정: 생산관리 > 작업실적 - - - -
성능 측정: 판매관리 > 거래처관리 - - - -
성능 측정: 판매관리 > 견적관리 - - - -
성능 측정: 판매관리 > 수주관리 - - - -
성능 측정: 판매관리 > 단가관리 - - - -

접근성 검사 요약

페이지 점수 등급 Critical Serious Moderate
접근성 검사: 회계관리 > 거래처관리 - - - - -
접근성 검사: 회계관리 > 입금관리 - - - - -
접근성 검사: 회계관리 > 매입관리 - - - - -
접근성 검사: 회계관리 > 매출관리 - - - - -
접근성 검사: 결재관리 > 결재함 - - - - -
접근성 검사: 결재관리 > 기안함 - - - - -
접근성 검사: 게시판 > 자유게시판 - - - - -
접근성 검사: 인사관리 > 근태관리 - - - - -
접근성 검사: 인사관리 > 부서관리 - - - - -
접근성 검사: 인사관리 > 사원관리 - - - - -
접근성 검사: 인사관리 > 급여관리 - - - - -
접근성 검사: 자재관리 > 입고관리 - - - - -
접근성 검사: 자재관리 > 재고현황 - - - - -
접근성 검사: 생산관리 > 품목관리 - - - - -
접근성 검사: 생산관리 > 작업지시 - - - - -
접근성 검사: 판매관리 > 거래처관리 - - - - -
접근성 검사: 판매관리 > 견적관리 - - - - -
접근성 검사: 판매관리 > 수주관리 - - - - -

실패 시나리오 상세

검색 옵션 전수 테스트: 인사관리 전체 (4/10) (search-options-hr)

  • 진단: empty_data → API 응답은 있으나 테이블 데이터 없음. 데이터 변환 또는 필터 문제
  • Step 26 ([인사관리 > 부서관리] 테이블 로드 대기): Step timeout (>5s): [인사관리 > 부서관리] 테이블 로드 대기

거래처관리 검색/필터/상세/수정/복원 + 네거티브 + 섹션검증: 회계관리 (vendor-management)

  • Step 28 ([회계관리 > 거래처관리] [EDIT] 저장 완료 확인 (목록 복귀 + 에러 없음)): evaluate returned ok:false

⚠️ 불안정 테스트 (Flaky Tests)

최근 3일간 성공과 실패가 모두 발생한 시나리오:

시나리오 성공 횟수 실패 횟수 안정성
login-test 3 5 🔴 38%
attendance-management 4 3 🟠 57%
inspection-management 1 3 🔴 25%
approval-box 4 2 🟠 67%
attendance-checkin 4 2 🟠 67%
attendance-settings 1 2 🔴 33%
company-info 4 2 🟠 67%
customer-inquiry 1 2 🔴 33%
department-add 4 2 🟠 67%
employee-register 1 2 🔴 33%
item-management 4 2 🟠 67%
vendor-management 3 2 🟠 60%
bad-debt-collection 1 1 🟠 50%
bank-account-management 1 1 🟠 50%
bank-transactions 1 1 🟠 50%
bill-management 1 1 🟠 50%
board-management 4 1 🟡 80%
board-test 5 1 🟡 83%
card-add 1 1 🟠 50%
card-transactions 1 1 🟠 50%
comprehensive-analysis 1 1 🟠 50%
daily-report 1 1 🟠 50%
deposit-management 4 1 🟡 80%
draft-box 5 1 🟡 83%
event-board 1 1 🟠 50%
expected-expenses 1 1 🟠 50%
faq 1 1 🟠 50%
free-board 5 1 🟡 83%
inventory-status 1 1 🟠 50%
item-standard-management 1 1 🟠 50%
leave-policy 1 1 🟠 50%
notification-settings 1 1 🟠 50%
order-management 1 1 🟠 50%
permission-management 1 1 🟠 50%
popup-management 1 1 🟠 50%
position-management 1 1 🟠 50%
price-management 1 1 🟠 50%
process-management 1 1 🟠 50%
production-dashboard 4 1 🟡 80%
quality-certification 4 1 🟡 80%
rank-management 1 1 🟠 50%
receivables-status 1 1 🟠 50%
receiving-management 1 1 🟠 50%
reference-box 4 1 🟡 80%
salary-management 1 1 🟠 50%
sales-management 4 1 🟡 80%
search-options-hr 2 1 🟠 67%
shipment-management 1 1 🟠 50%
vacation-management 1 1 🟠 50%
vendor-ledger 4 1 🟡 80%
withdrawal-management 4 1 🟡 80%
work-order-management 1 1 🟠 50%
worker-screen 1 1 🟠 50%

📊 트렌드 분석

항목 이전 실행 현재 실행 변화
전체 204 204 +0
성공 204 202 📉 -2
실패 0 2 📉 +2

이전 실행: 2026-03-08_10-41-29

🔴 새로 실패한 시나리오 (2개)

  • 검색 옵션 전수 테스트: 인사관리 전체 (4/10)
  • 거래처관리 검색/필터/상세/수정/복원 + 네거티브 + 섹션검증: 회계관리