[이 기사에 나온 스타트업에 대한 보다 다양한 기업정보는 유니콘팩토리 빅데이터 플랫폼 '데이터랩'에서 볼 수 있습니다.]
AI(인공지능) 모델 개발·운영 솔루션을 개발하는 스타트업 프렌들리에이아이가 일반 사용자들이 블라인드로 AI 모델의 성능을 평가할 수 있는 플랫폼 'WBA(월드 베스트 AI)'를 출시했다고 6일 밝혔다.
WBA는 블라인드 테스트 방식으로 사용자가 AI 언어모델을 평가하는 서비스다. 최근 국내외 다양한 기업들이 AI 모델을 개발해 공개하고 있지만, 자체적으로 공개하는 벤치마크 점수만으로는 실사용 환경에서의 성능 비교가 어려운 점을 해결하기 위해 개발됐다.
WBA는 사용자는 원하는 질문을 입력하면 무작위로 선택된 2개의 AI 모델이 즉시 답변을 제공하도록 한다. 사용자는 두 답변 중 마음에 드는 답변을 선택하면 된다. 추론모델도 마찬가지 방식으로 평가할 수 있다. 사용자가 평가한 모델의 이름은 투표가 끝나야 공개되므로 조작은 불가능하다. WBA는 투표 점수를 합산해 순위표(리더보드)를 공개한다.
특히 WBA는 과학기술정보통신부가 지난 4일 선정한 독자 AI 파운데이션 모델 사업(국가대표 AI 정예팀)에 선정된 LG AI 연구원, 업스테이지, SK텔레콤, 네이버 등의 AI 모델도 제공하고 있다. 또한 오픈AI, 앤트로픽, 구글, 딥시크, 큐웬 등 글로벌 AI모델도 등록돼 있어 국내 언어모델과 해외 언어모델 간의 직접적인 비교 평가도 가능하다.
WBA 서비스는 누구나 사이트에 접속해 무료로 사용할 수 있다. 전병곤 프렌들리AI 대표는 "한국에서 AI 언어모델 개발 경쟁이 본격화된 지금, 실제로 대중이 선택하는 진짜 고성능 AI가 무엇인지 확인해볼 기회"라고 말했다.
