세일즈포스, 업계 최초 CRM 전용 AI 벤치마크 출시
- •세일즈포스 AI 리서치가 기업용 CRM 애플리케이션에 특화된 최초의 대규모언어모델(LLM) 벤치마크를 공개했다.
- •잠재 고객 발굴 및 서비스 사례 요약 등 실제 비즈니스 과업 처리 능력을 평가하는 새로운 지표가 도입됐다.
- •과학적 검증과 인간 평가를 결합하여 산업별 특수성에 맞춘 정확도를 보장하는 것이 특징이다.
세일즈포스 AI 리서치(Salesforce AI Research)가 고객 관계 관리(CRM)라는 복잡한 생태계 내에서 생성형 AI의 성능을 측정하기 위한 선구적인 평가 프레임워크를 도입했다. 기존의 벤치마크들이 주로 추상적인 논리에 집중했다면, 이번에 공개된 도구는 기업의 실질적인 가치를 창출하는 실무 운영 능력에 초점을 맞춘다. 특히 기능적 효용성에 중점을 둠으로써, 기업들은 특정 모델이 핵심 비즈니스 워크플로우를 처리할 역량을 갖추었는지 비로소 명확히 판단할 수 있게 됐다.
세일즈포스 CRM 벤치마크는 영업 기회 식별이나 고객 서비스 상호작용 요약과 같이 미묘한 차이가 중요한 프로세스를 모델이 얼마나 잘 수행하는지 평가한다. 업계 특유의 전문 용어를 간과할 수 있는 자동화된 스크립트와 달리, 이 프레임워크는 인간 평가자(Human-in-the-loop)를 참여시켜 전문적인 소통 과정의 복잡성을 세밀하게 포착한다. 이러한 방식을 통해 AI의 결과물이 단순히 기술적으로 정확한 수준을 넘어, 검증된 관계 관리 모범 사례와 일치하도록 보장한다.
이러한 시도는 파운데이션 모델의 단순한 성능보다 특정 산업 내에서의 정밀도가 더 중요해지는 ‘도메인 특화 AI’로의 거대한 흐름을 반영한다. 세일즈포스는 속도와 신뢰성에 대한 표준화된 평가 기준을 제시함으로써 의사 결정권자들이 AI 모델을 선택하는 과정의 모호함을 해소하고자 한다. 실제로 기업들이 단순 실험 단계를 넘어 본격적인 도입을 추진함에 따라, 이러한 맞춤형 지표는 향후 모델 배포의 핵심 결정 요인이 될 것이며, 궁극적으로는 AI 시스템이 각 비즈니스 과업에 최적화된 엔진을 스스로 선택하는 시대를 열 것으로 기대된다.