오픈AI의 강력한 라이벌로 주목받고 있는 엔트로픽이 챗GPT-4 omni의 대항마인 Claude 3에 대한 첫 번째 주요 업그레이드 버전인 클로드 3.5 소네트(Claude 3.5 Sonnet) 를 출시했다고 밝혔다.
새로운 모델을 공개하면서 앤트로픽측은 클로드 3.5 소네트가 "인텔리전스에 대한 업계의 기준을 높였으며 OpenAI의 GPT-4o 및 Google의 Gemini 1.5 Pro를 비롯한 경쟁 모델보다 성능이 뛰어나다. 특히 대학원 수준의 추론(GPQA), 학부 수준의 지식(MMLU), 코딩 능력(HumanEval)에 대한 새로운 업계 벤치마크를 설정했다"고 주장하고 있다. 또한 내부 에이전트 코딩 평가에서 64%의 문제를 해결하여 38%에 그친 Claude 3 Opus를 크게 앞질렀으며 불완전한 이미지의 텍스트를 정확하게 전사할 수 있어 소매, 물류, 금융 서비스와 같은 산업에 유용한 기능을 제공할 것으로 보인다.