업체 선택이 생각보다 중요한 이유
작년, 헬스케어 음성 비서를 만드는 스타트업이 음성 데이터에 수억원을 투자했습니다. 표면적으로는 깔끔해 보였습니다 — 전사 정확, 다양한 화자, 올바른 메타데이터. 하지만 모델을 학습시키자 의료 용어의 단어 오류율이 34%에 달했습니다. 업체가 일반인을 모집하다 보니 약물 이름, 해부학 용어, 임상 용어의 발음이 모두 부정확했던 것입니다. 데이터 자체는 나쁘지 않았습니다. 사용 사례에 맞지 않았을 뿐이죠.
업체가 거짓말을 한 것은 아닙니다. 주문서에 명시된 대로 정확히제공했습니다. 문제는 계약 전에 올바른 질문을 하지 않았다는 것이죠.
진짜 업체와 주문량처리 회사를 구분하는 8가지 질문
1. 제 특정 도메인을 위해 화자를 어떻게 모집하시나요?
"대규모 화자 데이터베이스가 있습니다" — 이 답변은불합격입니다. 도메인 전문성을 어떻게 필터링하는지 알아야 합니다. 금융 ASR 데이터를 만드는 업체라면 금융 분야에서 실제로 일하는 사람을 모집해야 합니다. 일반 풀에서 무작위로 뽑아 행운을 바라는 게 아니라요. 화자 심사 프로세스를 문서로 요청하세요. 세부적으로 설명하지 못한다면 프로세스가 없는 것입니다.
2. 품질 검토 프로세스는 실제로 어떻게 진행되나요?
모두가 "다중 레이어 품질 검토"를 주장합니다. 실제 사례를 통해 walkthrough를 요청하세요: 누가 검토하는지, 어떤 기준을 사용하는지, 일반적인 거부율은 얼마인지, 경계 케이스를 어떻게 처리하는지. 실제 프로세스가 있는 업체는 검토 루브릭, 어노테이터 교육 자료, 이의 해결 워크플로우를 보여줄 수 있어야 합니다. 답변이 "팀에서 모두 확인합니다"라면 더 깊이 파고드세요.
3. 계약 전에 샘플 데이터를 보여줄 수 있나요?
이것은 협상의 여지가 없습니다. 신뢰할 수 있는 업체라면 귀하와 유사한 프로젝트에서 30분에서 1시간의 오디오와 전사 텍스트 샘플을 제공할 수 있어야 합니다. 거부한다면 뭔가 숨기고 있거나 유사한 프로젝트를 해본 적이 없는 것입니다.어느 쪽이든 답은 명확합니다.
4. 첫 납품이 품질 기준에 미달하면 어떻게 하시나요?
답변 방식을 주의 깊게관찰하세요. 좋은 업체는 재녹음, 재전사, 또는 다음 배치에 대한 크레딧 같은 구제 프로세스를 설명할 것입니다. "그런 일은 발생하지 않습니다"라고 말하는 업체는 불완전한 데이터를 납품한 적이 없거나(있을 리 없는) 이를 계획하고 싶지 않은 것입니다(더 우려스러운). 모든 프로젝트에는 경계 케이스가 있습니다. 중요한 것은어떻게处理입니다.
5. 동의, 개인정보, 데이터 권리를 어떻게 처리하시나요?
이것은 단순한준법 체크박스가 아닙니다. 동의서 양식, 데이터 보관 정책, 화자 철회 요청 처리 프로세스를 요청하세요. EU에서 데이터를 수집한다면 GDPR 준수프레임워크이 필요합니다. 상업적으로 사용할 계획이라면 모든 화자로부터 명시적인 상업적 사용 동의가 필요합니다. 이것을 서류작업으로 취급하는 업체는 책임 소재가 불분명합니다.
6. 어떤 기술 사양을 납품할 수 있나요?
샘플링 레이트, 비트 심도, 파일 형식, 채널 구성, 노이즈 플로어 요구사항, 화자 분할 — 이것들은 계약 후에 정리할 세부사항이 아닙니다. 기술 사양을 보내고 모든 항목을 확인해 달라고 요청하세요. 필요한 항목에 대해 이의를 제기한다면 이유를 이해하세요. 때로는 그들이 맞을 수도 있고, 때로는 코너를 깎고 있는 것입니다.
7. 제 프로젝트를 실제로 관리할 사람은 누구인가요?
영업팀은 판매에 뛰어납니다. 하지만 거의 프로젝트를 관리하지 않습니다. 계약 전에 프로젝트 매니저를 만나세요. 그 사람은 귀하의 기술 요구사항, 품질 기대치, 타임라인을 이해해야 합니다. 프로젝트 매니저가 대본을 읽는 것처럼 들리거나 도메인의 기술적 질문에 답할 수 없다면 앞으로 몇 달이 고통스러울 것입니다.
8. 유사한 프로젝트를 진행한 고객 레퍼런스를 공유할 수 있나요?
아무 고객이 아니라 — 언어, 도메인, 규모, 품질 기대치가 유사한 고객 레퍼런스를 요청하세요. 일상 영어 회화 수집에 능숙한 업체가 의료 일본어 프로젝트에는 적합하지 않을 수 있습니다. 레퍼런스 고객에게 응답성, 품질 일관성, 문제 발생 시 처리 방식에 대해 물어보세요.
업체 점수 비교 방법
간단한 점수 매트릭스를 만드세요. 각 질문에 대해 1-5점으로 평가하세요: 1점은 답변 불가, 3점은 합리적인 답변이지만 증거가 없음, 5점은 문서, 샘플, 또는 레퍼런스로 주장을 입증. 복잡한 시스템이 필요 없습니다. 스프레드시트로 충분합니다.
총점이 가장 높은 업체가 무조건 정답은 아닙니다. 어디서 낮게 점수를 받았는지 보세요. 동의 및 데이터 권리를 제외한 모든 항목에서 5점을 받은 업체라면 무시할 수 없는 리스크입니다. 기술 사양에서 낮지만 도메인 전문성에서 높다면 더 명확한 브리프로 해결 가능할 수 있습니다.
이런 신호가 보이면 바로 떠나세요
다음 신호가 보이면 대화를 중단하세요:
- 샘플 데이터 불가 — 납품물을 보여주지 못하거나 보여주지 않는 것
- 품질 지표 논의 거부 — "품질을 보장합니다"지만 품질을 정의하지 않으면 무의미
- 모호한 동의 프로세스 — 동의서 양식을 제시하지 못하면 데이터 권리가 위험
- 빠른 계약 압박 — 좋은 업체는 바쁘고, 나쁜 업체는 절박합니다
- 계약 전 프로젝트 매니저 미지정 — 프로세스가 아닌 약속을 사는 것입니다
요약
- 도메인 타겟 모집이 화자 수보다 중요합니다 — 200명의 적합한 화자가 2,000명의 무작위 화자보다 낫습니다.
- "팀에서 모두 확인합니다"가 아닌 문서화된 실제 품질 검토 프로세스를 요구하세요.
- 계약 전 샘플 데이터는 필수 — 샘플 없으면 계약 없습니다.
- 동의 및 데이터 권리는 구조적 요구사항입니다 — 계약 전 프레임워크를 검증하세요.
- 약속이 아닌 증거로 업체를 평가하세요 — 문서와 레퍼런스가 영업 피치를 항상 이깁니다.
음성 데이터 수집 업체 평가가 필요하신가요? Smart Language Service에 연락하여 프로젝트 요구사항에 대한 무료 상담을 받으세요. →