보안·권한 · 권장
flaky test
실행할 때마다 결과가 들쭉날쭉한 불안정 테스트.
flaky test는 코드를 바꾸지 않았는데도 돌릴 때마다 성공과 실패를 오가는 불안정한 테스트입니다. 실패가 진짜 문제인지 그냥 변덕인지 알 수 없게 만들어 테스트의 신뢰를 떨어뜨립니다. AI 결과처럼 실행마다 조금씩 달라지는 요소가 섞이면 이런 테스트가 생기기 쉬워, 원인을 없애거나 불변식으로 검증 방식을 바꿔야 합니다.
“이 테스트 또 flaky하네요, 세 번 중 한 번은 실패해요.”
다른 이름변덕스러운 테스트 · 플래키 테스트 · 간헐적 실패 테스트