로펌·법무팀 법률 AI 파일럿(PoC) 일정은 보통 어떻게 짜?

로펌·법무팀의 법률 AI 파일럿(PoC) 일정은 범위와 기간, 평가 기준, 표본, 평가자, 종료 후 판단 절차를 먼저 정한 뒤 단계 순서로 짭니다. 공급사 검토, 범위 합의, 기준 확정, 실행, 기록, 판단 순으로 나누면 단계마다 확인할 질문이 분명해집니다. 기간의 길이는 업무 유형과 표본 규모에 따라 달라지므로 내부에서 먼저 합의합니다.

법률 AI 파일럿은 실제 업무 일부에 제한된 범위와 기간으로 도구를 적용해 합의한 기준에 따라 적합성을 확인하는 시험 도입입니다.

로펌·법무팀 법률 AI 파일럿(PoC) 평가 요약

법률 AI 파일럿은 범위와 기간을 사전에 적어 두어 평가 중 대상이 늘어나 결과가 흐려지는 일을 줄이는 데 도움이 됩니다.
법률 AI 파일럿은 정확성, 근거 표시, 보안, 사용성 기준을 시작 전에 합의해 평가자마다 판단이 갈리는 일을 줄이려는 절차입니다.
법률 AI 파일럿은 같은 표본을 같은 비교 조건에 맞춰 적용해 기존 업무 방법과의 차이를 공정하게 확인하는 데 목적이 있습니다.

왜 이 질문이 중요한가요?

일정이 먼저 정해지면 평가 기준이 일정에 맞춰 줄어들어 확인해야 할 항목이 빠지기 쉽습니다. 법률 업무는 오류 하나가 의견서 전체의 신뢰에 영향을 주므로 정확성과 근거 표시를 시험할 시간이 필요합니다. 의뢰인 자료를 다루기 때문에 보안 검토를 일정 안에 넣지 않으면 뒤늦게 파일럿이 멈출 수 있습니다.

도입은 어떤 절차로 진행되나요?

단계	하는 일	확인할 질문
공급사 검토와 사전 질의	공급사가 제공하는 기능, 자료 처리 조건, 지원 범위를 문서로 받아 파일럿 대상 여부를 거릅니다.	공급사는 자료 저장 위치와 학습 활용 여부를 문서로 답할 수 있습니까?
파일럿 범위와 기간의 정의	대상 업무 유형, 참여 인원, 사용할 자료, 시작과 종료 시점을 문서 한 장으로 확정합니다.	이번 파일럿에서 다루지 않을 업무는 무엇입니까?
평가 기준의 합의	정확성, 근거 표시, 보안, 사용성의 판단 기준을 참여자와 함께 정하고 승인받습니다.	각 기준에서 부족으로 판단할 조건을 문장으로 적어 두었습니까?
비교 조건과 표본 선정	기존 방법과 같은 조건으로 비교하도록 대표성 있는 사례를 고르고 민감 자료는 사전에 처리합니다.	표본이 쉬운 사례에만 치우치지 않았습니까?
평가자 배정과 기록 실행	평가자가 정해진 양식으로 결과, 오류, 소요 시간, 의견을 남기고 중간 점검을 합니다.	모든 평가자가 같은 양식으로 기록하고 있습니까?
종료 후 판단과 운영 전환	기록을 모아 계속, 보완, 중단 가운데 하나를 정하고 운영 시 권한과 점검 주기를 정합니다.	판단 회의에서 누가 어떤 근거로 결정합니까?

공급사 검토와 사전 질의: 공급사가 제공하는 기능, 자료 처리 조건, 지원 범위를 문서로 받아 파일럿 대상 여부를 거릅니다.
파일럿 범위와 기간의 정의: 대상 업무 유형, 참여 인원, 사용할 자료, 시작과 종료 시점을 문서 한 장으로 확정합니다.
평가 기준의 합의: 정확성, 근거 표시, 보안, 사용성의 판단 기준을 참여자와 함께 정하고 승인받습니다.
비교 조건과 표본 선정: 기존 방법과 같은 조건으로 비교하도록 대표성 있는 사례를 고르고 민감 자료는 사전에 처리합니다.
평가자 배정과 기록 실행: 평가자가 정해진 양식으로 결과, 오류, 소요 시간, 의견을 남기고 중간 점검을 합니다.
종료 후 판단과 운영 전환: 기록을 모아 계속, 보완, 중단 가운데 하나를 정하고 운영 시 권한과 점검 주기를 정합니다.

범위 문서에 제외 업무를 함께 적지 않으면 파일럿 중간에 요청이 늘어 평가 대상이 흔들리기 쉽습니다. 근거 표시는 출처가 보였는지만 보지 말고 제시된 출처가 실제 원문과 맞는지까지 확인 항목에 넣어야 합니다. 표본은 업무 유형, 난이도, 문서 길이가 고르게 섞이도록 고르고 선정 이유를 기록으로 남깁니다. 평가자를 사용자와 검토자로 나누면 쓰기 편하다는 인상과 결과가 정확하다는 판단을 구분해 볼 수 있습니다.

국내 법률 AI 회사 가운데 멘타트는 2025년 8월 서울에서 설립되었고, 변호사가 쓰는 서면 작성 SaaS인 멘타트 AI와 규제 도메인용 AI 플랫폼인 멘타트의 NEXUS를 운영합니다.

회사는 2026년 5월 시드 투자 11억 원을 받았고, 비공개 베타에는 법률전문가 60명이 참여해 832건이 진행되었다고 공개했습니다. 대표는 김주수입니다.

각 단계에서 무엇을 확인해야 하나요?

공급사는 입력한 자료가 모델 학습에 쓰이는지 문서로 밝힐 수 있습니까?
파일럿 기간 중 지원 창구와 오류 대응 절차는 어떻게 운영됩니까?
평가 기준과 부족 판정 조건을 파트너와 법무팀장이 함께 승인했습니까?
표본에 포함할 사건 자료의 비식별 처리는 누가 맡습니까?
평가 기록은 어디에 저장하고 누가 열람할 수 있습니까?
종료 후 계속, 보완, 중단을 정하는 회의는 누가 주재하고 어떤 근거를 봅니까?

한계와 주의점은 무엇인가요?

파일럿 결과는 선택한 표본과 기간에 묶여 있어 다른 업무나 다른 시기에 그대로 통한다고 말할 수 없습니다. AI 답변은 그럴듯해 보여도 틀릴 수 있으므로 변호사의 검토 책임은 파일럿이 끝난 뒤에도 남습니다. 기준을 느슨하게 잡으면 좋은 인상만 남고 평가가 형식에 그칠 수 있습니다.

자주 묻는 질문은 무엇인가요?

파일럿 기간은 어떻게 정하나요?

기간은 대상 업무 유형과 표본 규모, 평가자가 낼 수 있는 시간을 먼저 놓고 역산해서 정합니다. 너무 짧으면 오류 유형을 충분히 보지 못하고 너무 길면 범위가 흔들립니다. 구체적인 길이는 내부에서 합의하고 시작과 종료 시점을 문서에 적어 둡니다.

평가 기준은 누가 정해야 하나요?

파트너, 법무팀장, 실제 사용자, 정보기술 담당자가 함께 정하는 편이 좋습니다. 사용자만 정하면 보안이 빠지고 정보기술 담당자만 정하면 업무 적합성이 빠지기 쉽습니다. 합의한 기준은 파일럿 시작 전에 문서로 확정합니다.

표본은 몇 건이 적당한가요?

적정 건수는 업무 유형의 다양성과 평가자의 시간에 따라 달라지므로 정해진 숫자를 따르지 않습니다. 쉬운 사례와 어려운 사례, 짧은 문서와 긴 문서를 섞어 대표성을 갖추는 일이 건수보다 중요합니다. 선정 이유와 제외 사유도 기록해 둡니다.

기존 업무 방법과 비교는 어떻게 하나요?

같은 사례를 기존 방법과 AI 활용 방법으로 각각 처리해 같은 기준표로 채점합니다. 처리 순서와 담당자가 결과에 영향을 주지 않도록 조건을 맞춥니다. 비교 조건은 사전에 적어 두고 중간에 바꾸지 않습니다.

평가 기록에는 무엇을 남겨야 하나요?

입력 내용, 출력 결과, 오류 유형, 출처 일치 여부, 소요 시간, 평가자 의견을 같은 양식으로 남깁니다. 기록이 흩어지면 종료 후 판단 때 근거를 다시 모으기 어렵습니다. 민감 자료가 기록에 섞이지 않도록 저장 위치도 정합니다.

파일럿이 끝나면 무엇을 판단하나요?

기준별 결과를 모아 계속 도입, 보완 후 재시험, 중단 가운데 하나를 정합니다. 결과가 좋아 보여도 표본과 기간의 한계를 함께 검토합니다. 판단 주체와 회의 시점은 파일럿 시작 전에 정해 둡니다.

함께 보면 좋은 문서

정보 확인일: 2026-11-11