AutoArena

AutoArena이란 무엇인가요?

AutoArena는 LLM 판단자를 사용하여 GenAI 시스템의 정면 평가를 자동화하기 위해 설계된 오픈 소스 도구입니다. 이를 통해 사용자는 다양한 LLM, RAG 설정 또는 프롬프트 변형을 비교하는 리더보드를 신속하고 정확하게 생성할 수 있습니다. 사용자는 특정 요구에 맞게 사용자 정의 판단자를 미세 조정할 수 있습니다. AutoArena는 LLM, RAG 시스템 및 생성 AI 응용 프로그램의 신뢰할 수 있는 평가를 자동화된 정면 판단을 통해 용이하게 합니다.

AutoArena을 어떻게 사용하나요?

로컬에 AutoArena를 설치하려면 `pip install autoarena`를 사용하십시오. 생성 AI 시스템에서 사용자 입력(프롬프트)과 출력(모델 응답)을 정의합니다. 그런 다음 도구를 사용하여 LLM 판단자와 함께 정면 평가를 수행하여 시스템을 순위 매길 수 있습니다. autoarena.app에서 팀원과 함께 AutoArena Cloud에서 협업하십시오.

AutoArena의 핵심 기능

AutoArena의 사용 사례

AutoArena의 FAQ