Claude3 출시, GPT-4를 완전히 능가할 수 있을까?

지금 Anthropic은 다양한 인지 작업에 걸쳐 새로운 업계 기준을 설정하는 Claude 3 모델 시리즈의 출시를 발표했습니다. 이 제품군에는 Claude 3 Haiku, Claude 3 Sonnet 및 Claude 3 Opus의 세 가지 최첨단 모델이 포함되어 있으며 성능이 높은 순서대로 배열되어 있습니다. 각 후속 모델은 점점 더 강력한 성능을 제공하여 사용자가 특정 애플리케이션에 대한 지능, 속도 및 비용의 최상의 균형을 선택할 수 있도록 합니다.

Opus와 Sonnet은 이제 claude.ai와 Claude API에서 사용할 수 있으며, 후자는 이제 159개국에서 완전히 사용할 수 있습니다. 하이쿠도 곧 출시될 예정입니다.

Claude 3 모델 시리즈

지능의 새로운 표준

Anthropic의 가장 지능적인 모델인 Opus는 학부 수준 전문 지식(MMLU), 대학원 수준 전문가 추론(GPQA)을 포함한 가장 일반적인 AI 시스템 평가 벤치마크에서 우수한 성능을 발휘합니다. ), 기초수학(GSM8K) 등 복잡한 작업에 대해 인간 수준에 가까운 이해력과 유창함을 보여주며 일반 지능의 최전선을 선도합니다.

Claude 3 모델은 분석 및 예측, 콘텐츠 생성 세부사항, 코드 생성, 스페인어, 일본어, 프랑스어 등 영어가 아닌 언어로 대화하는 데 강력한 능력을 보여줍니다.

다음은 여러 기능 벤치마크에서 Claude 3 모델을 Anthropic 모델과 비교하는 방법입니다[1]:

거의 즉각적인 결과

Claude 3 모델은 즉각적인 고객 채팅, 자동 완성 및 데이터 추출 작업을 지원할 수 있습니다. 즉각적이고 실시간이어야 합니다.

지능 분야에서 하이쿠는 시장에서 가장 빠른 속도를 갖춘 매우 비용 효율적인 모델입니다. 차트와 그래프가 포함된 정보 밀도가 높은 arXiv 연구 논문(~10,000개 토큰)을 3초 이내에 해독할 수 있었습니다. Anthropic은 가까운 시일 내에 성능을 더욱 최적화할 예정이며, Haiku의 성능도 향상될 것입니다.

Sonnet은 대부분의 워크로드에서 Claude 2 및 Claude 2.1보다 2배 이상 빠르며 더 높은 수준의 지능을 갖추고 있습니다. 지식 검색이나 영업 자동화 등 빠른 응답이 필요한 작업에 탁월합니다. Opus는 Claude 2 및 2.1과 속도가 비슷하지만 지능 수준이 더 높습니다.

강력한 비주얼 능력

클로드 3 모델은 다른 선두 모델들과 동등한 수준의 세련된 비주얼 능력을 가지고 있습니다. 사진, 차트, 그래프, 기술 다이어그램을 포함한 다양한 시각적 형식을 처리할 수 있습니다. Anthropic은 특히 지식 기반의 50% 정도가 PDF, 순서도 또는 프레젠테이션 슬라이드와 같은 다양한 형식으로 인코딩된 기업 고객에게 이 새로운 양식을 제공하게 된 것을 기쁘게 생각합니다.

거부 감소

이전 Claude 모델은 불필요한 거부를 자주 하여 상황에 대한 이해가 부족함을 나타냅니다. Anthropic은 이와 관련하여 상당한 진전을 이루었습니다. Opus, Sonnet 및 Haiku는 시스템의 경계선에 접근하는 프롬프트에 응답을 거부할 가능성이 훨씬 적으며 이전 모델보다 훨씬 적습니다. 아래 그림에서 볼 수 있듯이 Claude 3 모델은 요청에 대한 보다 미묘한 이해를 갖고 실제 피해를 식별하며 무해한 프롬프트에 대한 응답을 훨씬 덜 자주 거부합니다.

정확도 향상

모든 규모의 기업은 Anthropic의 모델을 사용하여 고객에게 서비스를 제공하므로 Anthropic의 모델 출력이 규모에 따라 매우 정확한 상태를 유지하는 것이 중요합니다. 이를 평가하기 위해 Anthropic은 현재 모델의 알려진 약점을 대상으로 하는 복잡하고 사실에 기반한 일련의 질문을 사용했습니다. Anthropic은 반응을 정답, 오답(또는 환각), 불확실성 인정으로 분류하는데, 여기서 모델은 잘못된 정보를 제공하기보다는 답을 모른다는 것을 표현합니다. Claude 2.1과 비교하여 Opus는 이러한 까다로운 개방형 질문에 대한 정확성(또는 정답)이 두 배 향상되는 동시에 오답 수준도 감소했습니다.

더 신뢰할 수 있는 응답을 생성하는 것 외에도 Anthropic은 곧 Anthropic의 Claude 3 모델에서 인용을 활성화하여 참조에서 정확한 문장을 가리켜 답변을 확인할 수 있도록 할 예정입니다.

긴 컨텍스트 및 거의 완벽한 리콜

Claude 3 시리즈 모델은 출시 시 200k 마크 컨텍스트 창을 제공합니다. 그러나 세 가지 모델 모두 100만 개 이상의 토큰 입력을 수용할 수 있으며, Anthropic은 향상된 처리 능력이 필요한 특정 고객에게 이를 제공할 수 있습니다.

긴 상황별 단서를 효과적으로 처리하려면 모델에 강력한 회상 기능이 필요합니다. "Needle In A Haystack"(NIAH)은 대규모 데이터 코퍼스에서 정보를 정확하게 불러내는 측정 모델의 능력을 평가합니다. Anthropic은 각 프롬프트에 대해 30개의 무작위 핀/질문 쌍 중 하나를 사용하고 다양한 크라우드소싱 문서 모음에 대한 테스트를 통해 이 벤치마크의 견고성을 강화합니다.

Claude 3 Opus는 99%가 넘는 정확도로 거의 완벽한 재현율을 달성할 뿐만 아니라, 경우에 따라 원문 성별에 인위적으로 삽입된 것처럼 보이는 "바늘" 문장을 식별하여 평가 자체의 한계까지 식별합니다.

책임감 있는 디자인

Anthropic은 기능과 함께 신뢰성을 제공하기 위해 Claude 3 시리즈 모델을 개발했습니다. Anthropic에는 잘못된 정보 및 CSAM부터 생물학적 남용, 선거 간섭 및 자율 복제 기술에 이르기까지 다양한 위험을 추적하고 완화하는 여러 전담 팀이 있습니다. Anthropic은 Anthropic 모델의 보안과 투명성을 개선하고 새로운 방식으로 인해 발생할 수 있는 개인 정보 보호 문제를 완화하기 위해 Anthropic 모델을 조정하기 위해 Constitutional AI와 같은 방법을 계속 개발하고 있습니다.

점점 복잡해지는 모델의 편향을 해결하기 위한 지속적인 노력이 진행되고 있으며 Anthropic은 이번 새 릴리스를 통해 진전을 이루고 있습니다. 모델 카드에서 볼 수 있듯이 Claude 3은 Bias Question Answering Benchmark(BBQ)에 따르면 Anthropic의 이전 모델보다 편향이 적은 것으로 나타났습니다. Anthropic은 편견을 줄이고 모델의 중립성을 높여 모델이 특정 당파적 입장에 편향되지 않도록 하는 기술 발전에 계속 전념하고 있습니다.

Claude 3 모델 시리즈는 이전 모델에 비해 생물학적 지식, 사이버 관련 지식, 자율성이 향상되었지만 Anthropic의 Responsible Scaling 정책에 따라 AI 안전 레벨 2(ASL-2)를 유지합니다. Anthropic의 레드팀 평가(Anthropic의 백악관 약속 및 2023년 미국 행정 명령에 따라 수행됨)에서는 현재 모델이 치명적인 위험에 대한 잠재력을 무시할 수 있다고 결론지었습니다. Anthropic은 향후 모델을 면밀히 모니터링하여 ASL-3 임계값에 얼마나 가까운지 평가할 것입니다. 추가 보안 세부정보는 Claude 3 모델 카드에 제공됩니다.

사용하기 쉬워졌습니다

Claude 3 모델은 복잡한 다단계 지침을 더 효과적으로 수행합니다. 특히 브랜드 보이스 및 응답 지침을 따르고 사용자가 신뢰할 수 있는 고객 대면 경험을 개발하는 데 능숙합니다. 또한 Claude 3 모델은 JSON 형식과 같은 널리 사용되는 구조화된 출력을 생성하는 데 더 나은 성능을 발휘하므로 자연어 분류 및 감정 분석과 같은 사용 사례에 대해 Claude를 더 쉽게 지도할 수 있습니다.

모델 세부 정보

Claude 3 Opus는 Anthropic의 가장 스마트한 모델로 매우 복잡한 작업에서 시장 최고의 성능을 보여줍니다. 개방형 프롬프트와 보이지 않는 상황에서 인간과 같은 이해력으로 훌륭하게 흐릅니다. Opus는 Anthropic에게 생성 AI로 가능한 것의 한계를 보여줍니다.

Claude 3 Sonnet은 특히 기업 작업 부하에 있어 지능과 속도 사이의 이상적인 균형을 유지합니다. 동종 제품보다 저렴한 비용으로 강력한 성능을 제공하며 대규모 AI 배포를 위한 높은 내구성을 제공하도록 설계되었습니다.

Claude 3 Haiku는 Anthropic의 가장 빠르고 컴팩트한 모델로 거의 즉각적인 반응이 가능합니다. 비교할 수 없는 속도로 간단한 쿼리와 요청에 응답합니다. 사용자는 인간 상호 작용을 시뮬레이션하는 원활한 AI 경험을 구축할 수 있습니다.

모델 가용성

Opus 및 Sonnet은 현재 Anthropic의 API에서 사용할 수 있으며, 이제 일반 공급이 가능하며 개발자는 등록하여 이러한 모델을 즉시 사용할 수 있습니다. 하이쿠도 곧 출시될 예정입니다. Sonnet은 claude.ai에서 무료 경험을 제공하고 Opus는 Claude Pro 가입자에게 제공됩니다.

Sonnet은 Amazon의 Bedrock 및 Google Cloud의 Vertex AI Model Garden을 통해서도 제공되며 Opus 및 Haiku도 곧 출시될 예정입니다.

더 똑똑하고, 더 빠르고, 더 안전합니다

Anthropic은 모델 지능이 한계에 도달하기에는 아직 멀었다고 믿으며, 앞으로 몇 달 동안 Claude 3 모델 시리즈를 자주 업데이트할 계획입니다. Anthropic은 또한 특히 기업 사용 사례 및 대규모 배포를 위해 Anthropic 모델의 기능을 향상시키는 일련의 기능을 출시하게 된 것을 기쁘게 생각합니다. 이러한 새로운 기능에는 도구 사용(함수 호출이라고도 함), 대화형 코딩(REPL이라고도 함) 및 고급 에이전트 기능이 포함됩니다.

위 내용은 Claude3 출시, GPT-4를 완전히 능가할 수 있을까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!