We are looking for the best
Quality Assurance Engineer (Gleo AI)는 차량 IVI 환경에서 동작하는 AI 기반 음성인식 서비스의 기능, 성능, 연동 품질을 검증하는 역할을 담당합니다. 음성인식 품질 기준(정확도, 인식률, 톤앤매너 등)을 수립하고, 지표 기반으로 개선 사항을 도출하여 서비스 완성도를 높입니다. 또한 LLM의 백엔드 연동 안정성을 평가하고, 오류·지연·데이터 누락 발생 시 이를 재현하고 개선 방안을 제시함으로써, 서비스가 안정적이고 일관되게 동작할 수 있도록 지원합니다.
Responsibilities
- 검증 계획 수립 및 일정 관리
- 기능 요구사항 기반 테스트 시나리오를 설계합니다.
- 정상·예외·노이즈 환경을 포함한 음성 인식 테스트 커버리지를 설계합니다.
- 검증 환경 구성
- 실차, H/U(Head Unit), 에뮬레이터, 오디오 챔버 기반의 검증 환경을 구성합니다.
- TTS/STT 엔진, LLM API, 네트워크 지연·패킷 손실 환경 및 다양한 노이즈 조건을 구성하고 시험합니다.
- 검증 수행
- 다양한 대화 흐름을 반영한 시나리오를 설계·수행하여 맥락 유지, 응답 적합성, 연속 대화 품질을 평가합니다.
- 음성 인식률, LLM 응답 정확도, 응답 시간을 측정합니다.
- 검증 자동화
- 음성 입력 자동화 스크립트 및 API 테스트 자동화 환경을 구축합니다.
- CI/CD 파이프라인과 연계한 반복 테스트 및 결과 리포트를 자동화합니다.
- 결과 분석 및 보고
- 로그, 녹음 파일, LLM 응답 데이터 기반의 품질 분석을 수행합니다.
- 품질 대시보드를 구성하고 이해관계자와 결과를 공유합니다.
- 프로세스 개선
- 음성·대화 서비스 품질 지표 및 기준을 고도화합니다.
- 테스트 도구 및 절차를 최적화하고 재현성을 강화합니다.
Qualifications
- 3년 이상의 음성 인식·대화형 AI·IVI 시스템 검증 업무 경험을 보유하신 분
- 테스트 시나리오 설계 및 품질 리포트 작성 역량을 보유하신 분
- LLM, STT/TTS 엔진 검증 경험이 있으신 분
- 네트워크 환경(3G/LTE/5G, Wi-Fi, Bluetooth) 이해가 있으신 분
- Linux/Android 환경 로그 분석 능력이 있으신 분
- 영어 커뮤니케이션 역량을 보유하신 분 (Verbal & Written)
Preferred Qualifications
- LLM Prompt·응답 품질 평가 경험
- 음성·대화 서비스 자동화 스크립팅 능력 (Python, adb 등)
- RAG(Retrieval-Augmented Generation) 검증 경험
- 다국어 음성인식 테스트 경험
- 자동차 양산 프로세스 경험
