GitHub, Copilot API에 도구별 사용량 추가…호출 수 해석에 주의

여러 개발 도구에서 Copilot을 이용하는 조직이라면 사용량을 도구별로 살펴볼 항목이 생긴다. GitHub는 10월 23일 사용량 API 보고서에 totals_by_client를 추가한다고 발표했다. OpenCode 등 Copilot을 모델 제공자로 사용하는 도구의 모델 트래픽을 나눠 보여주는 변경이다. 국내 개발 조직도 보고서를 해석할 때 도구 구분과 집계 단위를 함께 확인할 필요가 있다.

우선 구별할 것은 요청과 작업이다. GitHub 설명에서 request_count는 성공한 모델 호출의 수다. 프롬프트 한 번이 여러 호출로 이어질 수 있어 사용자가 질문한 횟수나 상호작용 횟수와 직접 비교할 수 없다. GitHub에서 시작한 에이전트 작업 건수와도 다른 지표다. 요청 수가 늘었다는 이유만으로 이용자 활동이나 완료한 업무가 같은 비율로 늘었다고 해석하기 어렵다.

GitHub가 안내한 도구별 항목에는 성공한 요청 수, 서로 다른 세션 수, 입력·출력 토큰과 요청당 평균 토큰이 포함된다. 모델별 요청·토큰 집계와 모델 선택 방식도 제공한다. 적용 범위는 기업·조직 및 각 사용자 단위의 1일·28일 보고서이며, 28일 집계 보고서에서는 날짜별 day_totals 안에 새 배열이 들어간다.

도구 이름에도 해석상의 한계가 있다. GitHub는 요청에 담긴 integration ID를 기준으로 분류하며, client 값이 검증된 신원 정보는 아니라고 밝혔다. 인식하지 못한 도구는 other로 묶는다. 따라서 이 분류만으로 특정 도구의 신원을 확정하거나 승인된 도구만 사용됐다고 판단할 근거는 부족하다.

조회하려면 Copilot 사용량 메트릭 정책이 활성화돼 있어야 한다. GitHub는 기업 소유자·청구 관리자, 조직 소유자, View Copilot Metrics 권한이 있는 사용자 지정 역할을 조회 대상으로 안내했다. 기존 필드를 유지하는 추가 변경이며, 보고할 사용량이 없으면 새 배열은 비어 있다. 코드 리뷰의 모델명은 unknown으로 보고한다. 제공된 발표에는 대상 요금제 목록이나 청구액과의 직접 연동 설명은 제시되지 않았다.

호출량과 성과를 구분해야 하는 배경 사례도 있다. Cloudflare는 10월 19일 자체 코드 리뷰 운영 보고에서 최적화 전 코드 품질 검토자가 리뷰당 평균 16.6회 모델을 호출했다고 밝혔다. 같은 보고서는 검토 종류와 추론 수준에 따라 중요한 발견량의 변화가 달랐다고 설명했다. 다만 발견사항 표본은 평가 집단별 35~66건이고 최근 비교 구간은 하루였다. 이는 별도 시스템의 측정으로, GitHub API의 정확성이나 품질 측정 기능을 검증한 자료는 아니다.