pile·
AI / ML·cloudflare-blogCloudflare Blog·

우리가 서비스하는 플랫폼 위에 직접 구축한 사내 AI 엔지니어링 스택

문제전사 AI 코딩 도구를 운영하려면 인증, 모델 라우팅, 비용 추적, MCP 접근 제어가 흩어지는 문제가 있었다.
접근Access, AI Gateway, Workers AI, MCP Portal, Sandboxes, Workflows를 계층화하고 Backstage와 AGENTS.md로 지식 계층을 만들었다.
결과최근 30일 R&D의 93%가 내부 AI 도구를 사용했고 AI Gateway가 월 2,018만 요청과 2,413억 토큰을 처리했다.
cloudflare-blog
Cloudflare Blog 블로그
원문은 여기서 이어서 읽을 수 있어요
원문 읽기
읽음 (0)

이 글과 비슷한

  1. AI / ML·LY CorporationLY Corporation·

    Grafana에서 자연어로 장애 원인을 분석하기: LLM 에이전트 기반 SRELens 개발기

    LY Corporation Home SRE 팀이 장애 분석 시 메트릭·로그·트레이스가 각각 다른 화면에 흩어져 있는 문제를 해결하기 위해 Grafana 플러그인 SRELens를 개발했다. SRELens는 LLM 에이전트가 자연어 질의를 받아 실제 관측성 데이터를 조회하고, 근거와 함께 장애 원인 후보를 정리해 주는 도구다. LGTM-P 스택(Loki·Grafana·Tempo·Mimir·Pyroscope)과 FlavaMCP 게이트웨이를 통합해 단일 채팅 인터페이스에서 멀티시그널 분석이 가능하다.

    #llm-app#mcp#observability+2