Gemini 4 Carbon 공개, Genie 4 연구 프리뷰
Gemini 4 Carbon 공개, 사이버 방어와 긴 코딩 작업 겨냥
구글 공개 벤치마크구글 공개 벤치마크. Google 발표 표 구글 공개 벤치마크 Gemini 4 Carbon Gemini 4 Argon GPT-6 Astra Claude Opus 5.5 Claude Fable 5.1 AA Index v5.0 59 50 57 58 49 FrontierSWE 2 61.2 55 65.5 62.3 56.3 Terminal-Bench 4.0 65.2 57.1 59.1 59.6 52 ExploitGym 54.8 42 42.4 34.5 N/A CWE-bench 71 68 68 67 58 구글이 10월 29일 02:00 KST에 Gemini 4 Carbon을 발표했다. 2주 전 Gemini 4 Argon에 이어 나온 모델이다. 구글은 Carbon이 사이버 보안과 긴 작업에서 최고 성능을 낸다고 소개했다. Artificial Analysis 지능 지수 v5.0에서는 1위에 올랐다. 이번 주에는 일부 사이버 방어 조직만 쓸 수 있다. 차트의 FrontierSWE 2와 Terminal-Bench 4.0은 긴 코딩 작업을, ExploitGym과 CWE-bench는 공격 코드 작성과 취약점 패치를 잰다.
- 구글은 Carbon을 어려운 긴 엔지니어링 문제와 오래 이어지는 에이전트 작업용으로 만들었다고 밝혔다. 사내 팀은 Carbon이 며칠 동안 돌면서 큰 코드베이스의 숨은 버그 원인을 찾아 패치하는 것을 봤다. Google DeepMind도 같은 내용을 X에 올렸다.
Replying to @GoogleDeepMind Carbon can work through complex tasks for days without getting stuck or taking shortcuts – delivering high-quality, reliable code. Feedback from an initial group of cyber defenders will help us iterate on guardrails before we expand access soon. Find out more ↓ Show more
- Google DeepMind의 Koray Kavukcuoglu는 이 긴 코딩 능력이 사이버 방어 성능으로 이어진다고 X에 적었다. Chrome 팀은 좋은 패치를 만드는 일에서 Carbon이 다른 연구소의 대형 모델보다 10배 넘게 낫다고 했다.
Just two weeks after rolling out Gemini 4 Argon, excited to share a preview of Gemini 4 Carbon - our next frontier model. It has state-of-the-art long horizon coding capabilities driving SOTA performance across the cybersecurity defense lifecycle including detection, validation, Show more
- 구글은 Fairwind 프로그램으로 파트너를 차츰 늘리고, 개발자와 일반 사용자에게 언제 여는지는 밝히지 않았다.
- 사내 코딩 환경에서 심각한 정렬 이탈 경보가 80% 가까이 줄었다. Terminal-Bench 4.0에서 채점을 속여 통과한 비율은 0.0%다.
- Artificial Analysis는 코딩 에이전트 지수에서 Carbon을 59점으로 2위에 뒀다. 1위는 62점인 Claude Opus 5.5다. 환각률은 Argon의 4%에서 11%로 올랐다.
Replying to @ArtificialAnlys In Antigravity CLI, Gemini 4 Carbon scores 59 on the Artificial Analysis Coding Agent Index, behind only Claude Code with Claude Opus 5.5 (62). This is 6 points ahead of Gemini 4 Argon (53). Carbon ranks second on both Terminal-Bench 4.0 (64%) and FrontierCode v1.1 (51%), but Show more
- Andon Labs는 Carbon이 Vending-Bench 2에서 1위에 올랐다고 적었다. 다만 Argon처럼 공급자에게 거짓말하는 행동이 덜 심하게나마 남아 있었다고 했다.
Replying to @andonlabs How aligned is Gemini 4 Carbon? When we ran Gemini 4 Argon on Vending-Bench, it fabricated confirmation emails, refused refunds, exploited invoice errors, and lied to suppliers. Carbon does some of the same, but less severely. Both behave worse than Astra. Show more
It keeps happening. AIs start to lie and cheat once they get good at making money. Gemini 4 Argon is #3 on Vending Bench 2, a huge leap for Google. To get this score, Argon fabricates confirmation emails, refuses to pay refunds, exploits invoice errors, and lies to suppliers.
- Hacker News(778점, 댓글 638개)와 Reddit r/singularity(1,330점)에서 가장 많이 나온 반응은 발표만 하고 아무도 못 쓴다는 불만이었다. 코딩에서는 아직 Opus 5.5와 GPT-6 Astra에 뒤진다는 댓글도 있었다.
출처: Google 발표 ↗
Genie 4 연구 프리뷰, 소리까지 함께 만드는 월드 모델
Genie 4 연구 프리뷰
- 음악, 주변 소리, 대화 생성
- 키보드로 이동과 카메라 조작
- 텍스트로 장면 실시간 수정
- Gemini 3.8 Flash 안내 에이전트
Google DeepMind가 10월 28일 01시 무렵(KST) Genie 4를 공개했다. Genie 4는 실시간으로 도는 월드 모델이고, 세계를 만들면서 음악, 주변 소리, 대화도 같이 만든다. DeepMind의 실시간 월드 모델 가운데 오디오를 직접 만드는 건 Genie 4가 처음이다. 지금은 신뢰 테스터만 쓰는 연구 프리뷰다.
- 사용자는 키보드로 돌아다니고, 텍스트로 날씨를 바꾸거나 사람과 물건을 넣는다. 입력이 없을 때도 장면은 계속 움직인다. DeepMind의 Shlomi Fruchter는 Genie 3의 세계가 너무 정적이었다고 X에 적었다.
One of the limitations of Genie 3 was that the worlds were too static. Genie 4 has a great response to prompted events that allows changing and interacting with the world as it is generated.
Had early access to Genie 4 from @GoogleDeepMind. This is a fully generated, interactive world from a single starting prompt (environment + character) 🤯 Feels like a massive step forward - you can now prompt to change the world and interact with it. With native audio!
- 신뢰 테스터 중 게임 개발자는 엔진 코드를 쓰기 전에 아이디어를 몇 초 만에 돌아다닐 수 있는 프로토타입으로 만들어 본다. Google AI 계정은 테스터들이 사실감, 텍스트 이벤트, 실시간 오디오를 가장 크게 나아진 점으로 꼽았다고 적었다.
Replying to @GoogleAI Simulating the world is crucial on the road to AGI. We’re already exploring real world use cases of Genie 4 with trusted testers across filmmaking, game design, education and robotic simulation. Early feedback has been promising, with use cases ranging from VFX pre-visualization Show more
- 다음 차례는 Google AI Ultra 구독자와 Gemini API 얼리 액세스 파트너다. 날짜는 밝히지 않았다. Logan Kilpatrick은 Genie가 처음으로 API에 들어온다고 적었다.
An early look at Genie 4, our new frontier world model, coming soon to the API for the first time : )
- DeepMind는 세션이 길어지거나 장면을 돌아다니면 세부 모습과 물체 지속성이 흔들린다고 적었다. 게임 엔진으로 내보내는 기능은 발표에 없다.
- Hacker News(1,020점, 댓글 576개)에서는 카메라가 돌아오자 성 한 덩어리가 사라진 장면이 지적됐다. Unity나 Unreal 프로젝트로 내보낼 수 있는지, 30초보다 긴 세션이 되는지 묻는 게임 개발자 댓글도 있었다.
- Reddit r/singularity에서 가장 많은 추천을 받은 댓글은 "Video games are going to be insane in 5 years"였다. 음성은 여전히 흔한 TTS처럼 들린다는 댓글도 많은 추천을 받았다.
내 생각지금 시점 기준으로는 게임보다 시뮬레이션에 더 맞다고 본다. 게임은 월드 모델에 맞는 장르가 한정적이다.
