AI Gateway에서 Glimpse 제공
Elorian의 시각 추론 모델 Glimpse를 AI Gateway에서 사용할 수 있게 됐습니다.
교안에 영향
예전 AI Gateway 안내에서 Glimpse 모델 미지원이라고 적은 내용은 틀리게 됩니다.
요약
- Elorian의 Glimpse가 AI Gateway에서 제공됩니다. - 이미지와 비디오를 입력받아 객체 추적, 공간 관계 해석, 행동의 물리적 결과 연결을 지원합니다. - 작업 중 시각적 근거를 다시 확인하며, 확대 보기·짧은 구간 재검토·프레임 간 특징 추적을 할 수 있습니다. - scientific chart analysis, video captioning, visual counting, robotics data annotation 같은 활용 사례가 제시됐습니다. - 모델 이름은 elorian/glimpse를 사용하며, AI SDK 7과 Vercel CLI 설정 안내가 추가됐습니다.
바뀐 것
새 기능
- Elorian의 Glimpse를 이제 AI Gateway에서 사용할 수 있습니다.
- 이 시각 추론 모델은 이미지와 비디오를 입력받아 움직이는 객체를 따라가고, 공간 관계를 해석하고, 행동을 그 물리적 결과와 연결합니다.
- Glimpse는 작업 중 시각적 근거로 다시 돌아가 세부를 확대하거나, 비디오의 짧은 구간을 다시 보거나, 프레임에 걸쳐 같은 특징을 추적할 수 있습니다.
- 이를 통해 scientific chart analysis, video captioning, visual counting, robotics data annotation 같은 활용 사례를 지원합니다.
기타
- 모델 이름으로 elorian/glimpse를 사용합니다.
- AI SDK 7에서는 비디오를 file part로 보낼 수 있습니다.
- placeholder URL을 비디오의 공개 또는 서명된 HTTPS URL로 바꿉니다.
- Claude Code, Codex, Cursor 등에서 AI Gateway를 설정하려면 최신 Vercel CLI를 설치하고 setup을 실행합니다.
- model playground에서 Glimpse를 사용해 볼 수 있습니다.
- AI Gateway는 모델 호출, 사용량과 비용 추적, provider보다 높은 가동률을 위한 retries, failover, 성능 최적화 설정을 하나의 API로 제공합니다.
- 기본 제공 custom reporting, Zero Data Retention 지원, API 키별 budgets, routing rules 등을 포함합니다.
- AI Gateway는 provider 가격을 추가 마진 없이 반영하며, Bring Your Own Key (BYOK) 요청을 포함한 추론에 플랫폼 수수료를 받지 않습니다.
- 자세히 보기.