AI 면접 파일럿 설계: 범위와 평가 기준 정하기

왜 파일럿부터 하나

AI 면접의 결과는 직무, 지원자군, 질문 설계, 면접관이 결과를 쓰는 방식에 따라 달라집니다. 영국 개인정보 감독기구(ICO)는 채용 AI 도구 공급사들을 점검한 뒤 편향 점검, 지원자에 대한 투명한 안내, 필요한 정보만 처리하는 최소화, 도입 전 개인정보 영향평가, 공급사와 고객사의 역할과 처리 지시를 문서로 정리하라고 권고했습니다. 이름 등에서 추정한 속성으로는 편향을 제대로 점검하기 어렵고, 사람이 결과를 무작위나 위험 기준으로 다시 살펴봐야 한다는 점도 지적했습니다.

국내에서도 인공지능 기본법은 고영향 인공지능을 제공하는 사업자에게 위험관리와 사람의 관리·감독을 요구합니다. 한 전형에서 미리 정한 기준으로 확인하고 기록을 남기는 파일럿은 이런 검토의 근거 자료가 됩니다.

근거 [1][2]

범위 정하기

한 사업부의 직무 한두 개, 지금 실제로 진행 중인 전형을 고릅니다. 지원자가 너무 적으면 운영 문제를 확인하기 어렵고, 너무 많으면 문제가 생겼을 때 영향이 커집니다. 기간은 응시 기한과 면접관 검토, 결과 점검 회의까지 넣어 4주 안팎으로 잡으면 한 번의 전형을 처음부터 끝까지 볼 수 있습니다.

기존 1차 면접과 병행할지도 정합니다. 병행하면 비교 자료가 생기지만 지원자가 면접을 두 번 보게 되므로, 지원자 부담과 안내 방법을 함께 고려합니다.

처음 쓰는 전형이라면 AI 면접 결과를 판단에 쓰지 않는 비교 운영도 방법입니다. 기존 방식으로 합격자를 정하고, 전형이 끝난 뒤 AI 면접 결과와 실제 면접 평가를 나란히 놓고 어디서 같고 어디서 다른지 봅니다. 결과가 채용 판단에 들어가지 않아 사내 검토가 단순해지고, 다음 전형에서 결과를 참고 자료로 쓸지, 2차 면접 질문 자료로 쓸지 근거를 갖고 정할 수 있습니다.

• 대상 직무와 전형, 예상 응시 인원
• 기간과 일정(응시 기한, 검토 마감, 결과 점검 회의)
• 결과를 판단에 쓸지, 비교 운영으로 대조만 할지
• 기존 방식과 병행 여부, 병행한다면 지원자 안내
• 참여하는 면접관과 검토 방식
• 중단 기준(장애, 지원자 민원, 근거 부족 비율 등)

채용 인원이 적다면 비용보다 먼저 범위를 맞추기

첫 전형의 실제 예상 인원과 담당자가 직접 할 수 있는 일을 적습니다. 포함 인원이 많아도 다 쓰지 않으면 그만큼 비용을 회수하는 것은 아닙니다. 전체 포함 인원으로 나눈 최저 단가보다 이번 전형의 총액, 실제 완료 인원, 담당자에게 남는 업무를 함께 봅니다.

인터뷰닷 시작형은 한 직무의 소규모 전형에서 채용팀이 링크·알림을 보내고 일반 문의를 받는 방식입니다. 첫 20명은 무료이고 이후 응시를 마친 인원만큼 냅니다. 인터뷰닷은 초기 설정, 템플릿과 기술 지원을 제공합니다. 안내 발송과 응시 문의까지 맡길 필요가 있으면 운영 지원형을 검토합니다. 회사 규모만으로 상품을 정하지 않습니다.

가상 샘플에서 먼저 질문과 리포트 형식을 확인하고, 첫 전형의 범위를 확정합니다. 실제 지원자 응시는 계약과 운영 준비 뒤에 시작합니다. 첫 전형이 끝나도 연간 계약 의무는 없습니다.

성공 기준을 먼저 정하기

파일럿이 끝난 뒤 기준을 정하면 결과를 원하는 쪽으로 읽기 쉽습니다. 무엇을 보면 확대하고 무엇을 보면 멈출지 시작 전에 적어 두고, 비교할 수 있도록 기존 방식의 값도 같은 방법으로 기록합니다. 측정하지 않은 효과는 결과 보고서에 쓰지 않습니다.

근거 [1][3]

내부 검토안에 적을 여섯 가지

채용팀, 현업 면접관, 예산 승인자가 같은 범위로 검토할 수 있도록 아래 항목을 사내 품의 양식에 옮겨 적습니다. 인터뷰닷이 제안하는 작성 예시이며, 수치 목표와 승인 담당자는 회사가 정합니다.

문의 전에 직무 샘플로 결과물의 형식을 확인하고, 상담에서는 실제 공고와 예상 인원으로 범위를 좁힙니다. 비용은 견적서의 공급가액과 부가세를 나누어 적고, 추가 구축이 필요한 항목은 기본 운영 범위와 구분합니다.

• 질문·답변·리포트 샘플을 현업 면접관과 함께 읽었는가
• 작은 전형에 필요 이상의 인원·운영 대행을 포함하지 않았는가
• 작업 시간과 면접관 의견 등 별도로 기록할 항목의 담당자를 정했는가
• 비교 운영이면 지원자의 추가 응시 부담과 안내 내용을 검토했는가
• ATS 연동과 SSO 등 별도 구축 항목을 기본 제공으로 적지 않았는가

시작 전에 준비할 것

파일럿도 실제 지원자를 대상으로 하므로 본도입과 같은 수준으로 준비합니다. 개인정보 처리위탁 계약과 지원자 안내문이 없는 상태에서 시험 삼아 응시를 받으면 안 됩니다. 개인정보보호위원회의 AI 프라이버시 리스크 관리 모델은 채용 AI를 예로 들어 위험 유형을 파악하고, 위험을 식별·측정한 뒤 경감 조치를 정하는 순서를 제시합니다. 구속력 있는 기준은 아니지만 사내 검토 문서의 틀로 쓸 수 있습니다.

• 직무별 질문·후속 질문·확인 기준 승인
• 지원자 안내문(AI 사용, 처리 항목, 보관 기간, 사람의 검토, 문의 창구)
• 개인정보 처리위탁 계약과 재위탁 목록, 국외 이전 여부 확인
• 지원자 문의 창구와 장애 시 기한 연장·재응시 기준
• 사내 법무·보안 검토와 면접관 사전 안내

근거 [4]

진행 중에 볼 것

매주 한 번 응시 진행 상황, 지원자 문의, 면접관 검토 상황을 함께 봅니다. 문의가 같은 단계에 몰리면 안내문이나 화면을 고치고, 근거가 부족한 항목이 특정 질문에 몰리면 질문이나 후속 질문을 다음 전형부터 고칩니다. 진행 중인 지원자의 질문을 바꾸면 비교가 어려워지므로 바꾼 날짜와 내용을 기록합니다.

끝난 뒤 결정하기

결과 점검 회의에서 처음 정한 기준과 실제 기록을 나란히 놓고, 같은 범위로 재구매할지, 조건을 바꿔 다시 확인할지, 확대할지, 중단할지 정합니다. 한 전형이 끝났다는 이유만으로 연간 계약으로 넘어갈 필요는 없습니다. 다음 채용 일정과 운영 부담까지 함께 확인합니다.

결정 이유와 함께 질문 세트, 안내문, 기록 요약을 남겨 두면 다음 전형이나 다른 사업부로 넓힐 때 무엇을 유지하고 무엇을 고칠지 알 수 있습니다. 관찰하지 못한 효과나 검토하지 않은 규모까지 성과를 확대해서 적지 않습니다.

파일럿에서 받은 지원자 정보는 안내한 보관 기간이 지나면 지우고 삭제 기록을 확인합니다. 본도입 계약으로 넘어가더라도 파일럿 지원자의 정보를 다른 목적으로 쓰지 않습니다.

근거 [3]

출처

1. AI tools in recruitment – Audit outcomes report영국 정보위원회(ICO) · 2024.11.06
2. 고영향 인공지능 사업자의 책무(생활법령정보)법제처
3. Artificial Intelligence Risk Management Framework (AI RMF 1.0, NIST AI 100-1)미국 국립표준기술연구소(NIST) · 2023.01.26
4. 인공지능(AI) 프라이버시 리스크 관리 모델개인정보보호위원회 · 2025.02.21

출처 확인 2026.10.29