Harvey: BigLaw Bench를 사용한 Gemini 2.5 Pro 프리뷰의 고급 법률 추론 검증

법률 업계에서는 방대한 양의 복잡한 정보를 정확하고 미묘하게 탐색할 수 있는 AI 솔루션을 요구합니다. 기존 AI 벤치마크는 법률 업무의 실제 요구사항을 포착하지 못하는 경우가 많아 가치 있는 법률 업무를 실제로 수행할 수 있는 모델을 식별하기가 어렵습니다. AI를 통해 법률 워크플로를 혁신하는 데 전념하는 역동적인 스타트업인 Harvey는 실제 법률 업무를 반영하는 작업에서 대규모 언어 모델 (LLM) 성능을 평가하기 위한 포괄적인 프레임워크인 BigLaw Bench를 개발하여 이 문제에 대처했습니다. 최근의 엄격한 평가에서 Gemini 2.5 Pro 프리뷰는 뛰어난 성능을 보여주며 주요 법률 분야의 효율성을 개선할 수 있는 탁월한 잠재력을 입증했습니다.

BigLaw Bench 프레임워크를 활용한 Harvey의 최근 평가에 따르면 Gemini 2.5 Pro 프리뷰는 핵심 법률 추론 작업, 특히 긴 형식의 법률 입력 또는 출력을 기반으로 추론이 필요한 작업에서 뛰어난 숙련도를 보여줍니다. 각 API를 통해 Gemini 2.5 Pro 프리뷰를 비롯한 모델을 테스트하여 얻은 Harvey의 공개 공유 결과에 따르면 Gemini 2.5 Pro 프리뷰는 BigLaw Bench에서 85.02% 의 최고 점수를 달성하여 이 종합 평가에서 평가된 다른 모델보다 뛰어난 성능을 보였습니다.

이 선도적인 기능은 다양한 고부가가치 법률 활동에 매우 중요합니다. BigLaw Bench의 주요 평가 작업에서 Gemini 2.5 Pro 미리보기의 강점이 드러났습니다.

• 거래 실사: Gemini 2.5 Pro 미리보기는 여러 개의 긴 서비스 계약에서 중요한 조항 (예: 양도, 면책, 종료 조항)을 추출하고 요약하는 강력한 기능을 보여주었습니다. 이는 시간 집약적인 수동 문서 검토 프로세스를 간소화할 수 있는 상당한 잠재력을 시사합니다.
• 거래 구조화: 이 모델은 복잡한 금융 옵션 (예: PIPE, 인수된 주식 혜택, 채권 혜택) 이 모델은 재무 전문 지식이 없는 사용자도 명확하고 쉽게 이해할 수 있는 방식으로 정보를 제공하고 즉각적인 조치 항목을 제안하는 데 유용했습니다.
• 소송 초안 작성: 소송과 관련된 작업에서 평가했을 때 Gemini 2.5 Pro 미리보기는 상당한 양의 브리핑 문서를 기반으로 법적 서류의 세부 개요를 생성하는 뛰어난 능력을 보였습니다. 이 기능은 AI가 법적 주장 개발 및 조직의 초기 단계에서 상당한 도움을 줄 수 있는 미래를 보여줍니다.
• 문서 검토 및 분석: 다양한 시험 문서 (통화 기록, 이메일, 메모) 검토를 포함한 평가에서 Gemini 2.5 Pro 미리보기의 강점은 일관된 시간순 이벤트 요약을 생성하는 것으로 나타났습니다. 또한 이 모델은 철저한 법적 분석의 중요한 측면인 기록 내의 심각한 불일치와 모호성을 식별하는 데 잠재력을 보였습니다.

이러한 평가에서 Gemini 2.5 Pro 미리보기는 법률 업무에서 흔히 발생하는 시나리오인 수백 페이지의 자료로 구성된 입력 전반에서 강력한 추론을 보여주었습니다. 또한 이러한 자료를 사용하여 긴 형식의 포괄적인 출력을 생성할 수 있어 더 깊은 통계와 분석이 가능했습니다. 이러한 핵심 기능은 실사, 검토, 초안 작성 사용 사례를 지원하기 위해 대규모 문서 세트에 대한 추론이 필요한 복잡한 법률 업무 전반에서 Gemini 2.5 Pro 프리뷰를 활용할 수 있는 잠재력을 보여줍니다.

Harvey의 적용된 AI 부문 책임자인 니코 그루펜은 'Harvey는 법률 전문가에게 가장 고급 도구를 제공하기 위해 노력하고 있습니다'라고 말합니다. "BigLaw Bench를 통한 Gemini 2.5 Pro 미리보기 평가 결과, 복잡한 법률 정보를 종합하는 뛰어난 능력이 확인되었습니다. 이 통계는 이러한 강점을 활용하여 전례 없는 효율성을 달성하고 변호사가 더 높은 수준의 전략적 업무에 집중할 수 있도록 지원하는 미래 제품 개발에 대한 비전을 제시합니다."

엄격한 평가에 대한 Harvey의 노력과 Gemini 2.5 Pro Preview와 같은 최첨단 AI 모델에 대한 통찰력 있는 분석은 법률 분야에서 AI의 혁신적인 잠재력을 보여줍니다. 이 연구 결과는 법률 전문가가 가장 까다로운 업무에 접근하는 방식을 바꿀 수 있는 미래 혁신의 길을 열어줍니다.

Gemini 2.5 Pro 미리보기의 고급 추론 및 합성 기능을 통해 애플리케이션을 강화하는 방법을 알아보려면 Gemini API 문서를 참고하거나 Google AI Studio에서 시작하세요.

Harvey는 AI의 미래를 구축하는 야심찬 스타트업에 투자하고 협력하는 Google의 AI Futures Fund에 참여하고 있습니다.