Gemini 4 Carbon 발표에서 성능과 접근 범위를 따로 봐야 하는 이유
소식 기준일 · 블로그 공개
Google DeepMind가 장시간 코딩과 보안 작업에 초점을 맞춘 Carbon을 공개하고, 초기 접근은 일부 보안 방어팀과 파트너로 제한했다.
발표의 중심은 오래 걸리는 엔지니어링 작업
Google DeepMind는 10월 28일 Carbon을 발표하며 여러 도구를 거치는 코딩과 보안 작업을 강조했다. 공개한 사례에는 대형 코드베이스에서 결함의 원인을 찾고 수정하는 작업이 포함된다. 발표에 나온 내부 사례는 제공사가 운영한 환경에서 나온 결과이므로, 개별 팀의 코드베이스에서 같은 결과가 나온다고 볼 근거로는 부족하다.
벤치마크는 어떤 작업을 측정했나
Google이 공개한 수치에서 SEC-bench Pro의 취약점 탐지는 88.2%, CWE-bench의 수정은 71.0%였다. 탐지와 수정은 별도 과제이며, 발표는 외부 벤치마크 평가에 가드레일을 적용하지 않았다고 명시한다. 자체 도입을 검토한다면 원인 분석이 맞았는지, 패치가 회귀 테스트를 통과했는지, 사람의 검토 시간이 얼마나 들었는지를 따로 기록하는 것이 비교에 도움이 된다.
발표 시점에 누가 써볼 수 있었나
초기 제공 대상은 일부 보안 방어팀이었다. Google은 이후 Fairwind 프로그램을 통해 신뢰할 수 있는 파트너로 접근을 넓히겠다고 밝혔다. 따라서 10월 28일을 기준으로 기록하는 이 글에서는 모델 발표일과 일반 개발자의 이용 가능 시점을 구분한다.