This model is deprecated. We only continue performance benchmarking for the default 10k input token workload. Results for other workloads are historical and no longer updated.
OpenAI has launched a newer model, GPT-4o (Nov). We suggest considering it instead.
For more information, see comparison of GPT-4o (Nov) to other models and API provider benchmarks for GPT-4o (Nov).
이 분석은 사용 사례에 가장 적합한 GPT-4o (Aug '24) API 제공업체를 선택하는 데 도움을 드립니다.
가장 빠름
Azure
OpenAI출력 속도
총 제공업체 3곳
가장 낮은 지연 시간
OpenAIAzure첫 토큰까지 걸린 시간
총 제공업체 3곳
가장 낮은 가격
AzureOpenAIOpenAI혼합 가격(토큰 100만 개당)
총 제공업체 3곳
GPT-4o (Aug)은 성능 특성과 가격이 서로 다른 API 제공업체 3곳에서 제공됩니다. 아래에서 제공업체별 주요 지표를 비교합니다.
- 출력 속도가 가장 높은 제공업체는 Azure(146.9 t/s) 및 OpenAI(106.5 t/s)입니다.
- OpenAI(1.18초) 및 Azure(1.35초)의 첫 토큰까지 걸린 시간이 가장 짧습니다.
- Azure(2.38), OpenAI(2.38) 및 OpenAI(3.25)의 토큰 100만 개당 혼합 가격이 가장 낮습니다.
- Azure은 속도와 비용 효율성의 균형이 뛰어납니다. 지연 시간이 가장 짧은 곳은 OpenAI입니다.
주요 내용
가격
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
속도
출력 속도(초당 토큰 수)로 측정
Output Speed: GPT-4o (Aug '24)
Latency vs. Output Speed
지연 시간
첫 토큰까지 걸린 시간(초)으로 측정
첫 토큰까지 걸린 시간
종단 간 응답 시간
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
종단 간 응답 시간
주요 비교 지표 및 API 기능
자주 묻는 질문
GPT-4o (Aug '24) 제공업체에 관한 일반적인 질문
현재 벤치마킹하고 추적하는 GPT-4o (Aug '24) API 제공업체는 3곳입니다.
GPT-4o (Aug '24) 제공업체를 선택할 때는 출력 속도(처리량 중심 작업), 지연 시간(빠른 최초 응답이 필요한 대화형 애플리케이션), 가격(비용에 민감한 워크로드), JSON 모드나 함수 호출 같은 API 기능을 고려하세요.
예. 인프라 변경, 부하 분산, 업데이트에 따라 제공업체 성능이 달라질 수 있습니다. 모든 제공업체를 지속적으로 벤치마킹하고 '시간 경과' 차트에 과거 성능 추이를 표시합니다.
GPT-4o (Aug '24)의 지능, 역량, 모달리티와 다른 모델과의 비교 정보는 모델 개요 페이지에서 확인하세요. 모델 개요 보기