Модель предназначена для длительных инженерных задач, которые требуют нескольких последовательных этапов работы. В ходе внутренних испытаний Carbon работала над сложными проектами в течение нескольких дней, находила и исправляла скрытые ошибки в больших кодовых базах и низкоуровневых системах, преодолевая возникающие трудности. В тесте WebDev Arena, оценивающем возможности моделей в веб-разработке, Carbon поднялась на 89 пунктов Elo и заняла четвертое место с результатом 1768.
Carbon также применима в области кибербезопасности. Модель набрала 88,2% в SEC-bench Pro (обнаружение уязвимостей в реальном программном обеспечении), 54,8% в ExploitGym (проверка возможности их эксплуатации) и 71% в CWE-bench (способность создавать исправления кода). По внутренним тестам Google, Carbon более чем вдвое чаще, чем предыдущая модель Gemini 4 Argon, создавала безопасный код. Команда Chrome также сообщила, что Carbon показала более чем десятикратное преимущество над одной из экспериментальных моделей другой лаборатории при создании качественных исправлений.
Google заявляет и об улучшениях в надежности поведения модели. По результатам внутренних испытаний Carbon вдвое реже делала необоснованные утверждения, чем Argon. В тесте Terminal-Bench 4.0 доля успешных попыток обмануть систему оценки снизилась до 0%, а доля самих попыток — до 0,4%. При работе с внутренними командами компании число предупреждений о серьезных нарушениях снизилось почти на 80%. В тесте Gray Swan на устойчивость к атакам через внедрение инструкций Carbon отразила все попытки взлома: показатель успешных атак составил 0% против 0,7% у Argon.
Google намерена внедрять модель постепенно. На этой неделе доступ к Carbon получит ограниченная группа специалистов по кибербезопасности, после чего компания планирует расширить программу на доверенных партнеров. Google также участвует в добровольном тестировании модели перед выпуском, проводимом правительством США. По мере сбора отзывов и доработки защитных механизмов компания откроет доступ к модели разработчикам, предприятиям и обычным пользователям.
Gemini 4 Carbon будет доступна по той же стартовой цене, что и Argon — $2 за миллион входных токенов и $10 за миллион выходных токенов. Для кэшированных входных токенов предусмотрена скидка 95%. Google не назвала точную дату, когда модель станет доступна широкой публике.
