개발 운영

31개 서비스

• 

  AgentOps

  API·LLM 관측

  AI 에이전트의 실행 추적과 디버깅을 지원하는 관측 도구
• 

  Apidog

  API·LLM 관측

  API 설계·디버깅·모킹·테스트·문서화를 한곳에서 하고 AI로 테스트를 생성하는 API 플랫폼
• 

  APINEX

  API·LLM 관측

  서비스 API와 운영 상태를 관리합니다.

• Arize AI

  API·LLM 관측

  AI 에이전트의 추적·평가·실험을 제공하는 관측 플랫폼과 오픈소스 Phoenix
• 

  Braintrust

  API·LLM 관측

  AI 에이전트의 운영 추적과 평가로 품질 저하를 잡아내는 관측·평가 플랫폼

• Cloudflare AI Gateway

  API·LLM 관측

  AI 모델 호출의 라우팅, 캐싱, 관측, 비용 한도를 관리하는 게이트웨이
• 

  Datadog

  API·LLM 관측

  인프라·애플리케이션 모니터링과 LLM·AI 에이전트 관측을 제공하는 클라우드 모니터링 서비스
• 

  Dynatrace

  API·LLM 관측

  AI 기반 이상 탐지와 자동화를 결합한 애플리케이션·인프라 관측 플랫폼
• 

  Galileo

  API·LLM 관측

  AI 에이전트와 LLM 앱의 평가·관측·가드레일을 제공하는 플랫폼
• 

  Grafana

  API·LLM 관측

  메트릭·로그·트레이스를 통합하고 AI 어시스턴트와 에이전트 관측을 제공하는 관측 플랫폼
• 

  Helicone

  API·LLM 관측

  LLM 호출 라우팅과 사용량·비용 모니터링을 제공하는 오픈소스 AI 게이트웨이

• Honeycomb

  API·LLM 관측

  분산 트레이싱과 LLM 관측을 제공하는 개발자용 관측 플랫폼
• 

  Kong AI Gateway

  API·LLM 관측

  LLM·MCP 호출의 보안, 라우팅, 관측, 비용 통제를 제공하는 AI 게이트웨이
• 

  Langfuse

  API·LLM 관측

  AI 에이전트·LLM 앱의 호출 추적, 평가, 프롬프트 관리를 제공하는 오픈소스 관측 플랫폼
• 

  LangSmith

  API·LLM 관측

  AI 에이전트·LLM 앱의 실행 추적, 비용·지연 모니터링, 평가를 제공하는 관측 플랫폼
• 

  LiteLLM

  API·LLM 관측

  여러 모델 API를 하나의 OpenAI 호환 키로 묶어 비용을 추적하는 오픈소스 AI 게이트웨이

• MLflow

  API·LLM 관측

  모델·LLM·에이전트의 실험 기록, 추적, 평가를 지원하는 오픈소스 AI 플랫폼
• 

  Modelpeers

  API·LLM 관측

  AI 모델과 에이전트의 변경 사항을 모으는 피드
• 

  New Relic

  API·LLM 관측

  애플리케이션 성능 모니터링과 AI 앱 관측을 제공하는 관측 플랫폼
• 

  Opik

  API·LLM 관측

  AI 에이전트의 추적·평가·개선을 제공하는 Comet의 오픈소스 관측 플랫폼

• Portkey

  API·LLM 관측

  여러 LLM 호출을 한곳에서 라우팅·관측·통제하는 AI 게이트웨이
• 

  Postman

  API·LLM 관측

  API 설계·테스트·문서화와 AI Agent Mode를 제공하는 API 개발 플랫폼
• 

  PromptLayer

  API·LLM 관측

  프롬프트 버전 관리, LLM 평가, 에이전트 운영 추적을 제공하는 플랫폼
• 

  Sentry

  API·LLM 관측

  애플리케이션 오류 추적과 AI 에이전트·LLM 호출 관측을 제공하는 모니터링 서비스