데일리 · 기사 03 · 5 분 읽기
Google, 조작에 따라 장면과 소리가 바뀌는 Genie 4 연구 프리뷰 공개
10월 27일 Google 발표 · 10월 28일 JST 개발팀 원문 확인
요약·개요
Google DeepMind가 10월 27일 Genie 4를 발표했습니다. 이용자의 조작에 맞춰 장면·소리·대화를 생성하는 세계 모델로, 현재는 제한된 테스터 대상입니다. 일반 구독자와 개발자 제공은 예고 단계입니다.
화면 속 항구를 걷다가 “비를 내려 줘”라고 말하면 장면과 소리가 함께 달라집니다. Google의 AI 연구 조직 DeepMind가 10월 27일 발표한 Genie 4가 겨냥한 상호작용입니다. 지금은 제한된 테스터에게 연구 프리뷰를 제공하는 단계입니다.
핵심 팩트
Genie 4는 입력과 조작에 반응하며 가상 환경을 생성하는 세계 모델입니다. Google은 실행 중 자연어로 날씨·카메라·등장인물 등을 바꿀 수 있고, 환경음·음악·인물 대화도 함께 생성한다고 설명합니다. 음성을 따로 나중에 입히는 작업과 달리, 장면 생성 과정에서 소리도 만드는 기능을 강조했습니다. Google 발표
현재 제공 대상은 신뢰할 수 있는 제한된 테스터입니다. Google AI Ultra 구독자의 Project Genie와 개발자용 Gemini API·Google AI Studio의 조기 접근 파트너에게는 앞으로 제공한다고 예고했습니다. 프리뷰 발표를 모든 구독자·개발자의 즉시 이용 가능으로 읽으면 안 됩니다. 개발팀 상세 설명
1. 내가 바꾼 행동 다음에 무엇을 보여 줄까
세계 모델에서 ‘세계’는 지구 전체를 뜻하기보다, 화면 속 사물·공간·움직임이 이어지는 환경을 뜻합니다. 저장된 영상을 재생할 때는 이미 기록된 다음 장면을 봅니다. 상호작용하는 세계 모델은 이용자가 움직이거나 지시한 내용을 반영해 그다음 장면을 생성합니다.
같은 항구에서 비만 요청하는 상황을 생각해 봅시다. 아래는 구도와 사물을 유지한 채 날씨·소리가 바뀌는 모습을 그린 가상 예시입니다. 이용자는 결과를 보고 다시 이동하거나 다른 조건을 요청할 수 있습니다.
요청 전 · 맑은 항구
부두·배·인물이 있는 장면
소리 예시: 잔잔한 파도
이용자 요청: “같은 항구에 비를 내려 줘”
요청 뒤 · 비가 오는 항구
같은 부두·배·인물에 빗줄기와 젖은 바닥
소리 예시: 파도에 빗소리가 더해짐
살펴볼 점: 날씨를 바꿨을 때 사물과 소리가 이어지는가? 이 그림은 성공을 보장하지 않습니다. 실제 모델은 사물·공간·음향의 일관성에 한계가 있습니다.
고양이와 풀어보기 Q&A
고양이 연구원영상을 기획하는 사람에게는 어떤 변화가 있는 거야?
포켓 노트장면을 보면서 카메라 방향이나 날씨를 바꿔 보고 구상을 비교하는 활용 방향이야. Google도 영화·게임 등의 창작 도구를 활용 가능성으로 제시했어. 완성된 영화나 게임 전체를 한 번에 만들어 준다는 약속은 아니야.
2. 이번에는 소리와 장면의 연결을 강조했다
DeepMind는 키보드로 이동·카메라를 조작하고, 글로 진행 중인 장면을 수정하는 상호작용의 녹화본을 공개했습니다. 새 모델은 환경음과 인물 대화를 실시간으로 생성한다고 설명하며, Gemini 계열 모델이 장면의 맥락과 진행을 유지하는 데 관여한다고 밝혔습니다. 발표 페이지의 시연은 개발팀이 공개한 사례이며 이 기사에서 직접 모델을 실행한 결과는 아닙니다.
| 이용자가 살펴볼 변화 | 이해하기 쉬운 예 | 결과를 볼 때 확인할 것 |
|---|---|---|
| 진행 중인 장면 수정 | 걷는 도중 날씨를 바꾸기 | 배경만 바뀌는지, 앞서 있던 사물도 자연스럽게 이어지는지 |
| 장면과 함께 소리 생성 | 바람·파도 등 환경음 | 소리가 화면의 사건과 맞는지 |
| 인물의 반응과 대화 | 새 인물을 넣고 말을 걸기 | 요청과 장면 맥락에 맞는 반응인지 |
- 이용자가 살펴볼 변화
진행 중인 장면 수정
- 이해하기 쉬운 예
- 걷는 도중 날씨를 바꾸기
- 결과를 볼 때 확인할 것
- 배경만 바뀌는지, 앞서 있던 사물도 자연스럽게 이어지는지
- 이용자가 살펴볼 변화
장면과 함께 소리 생성
- 이해하기 쉬운 예
- 바람·파도 등 환경음
- 결과를 볼 때 확인할 것
- 소리가 화면의 사건과 맞는지
- 이용자가 살펴볼 변화
인물의 반응과 대화
- 이해하기 쉬운 예
- 새 인물을 넣고 말을 걸기
- 결과를 볼 때 확인할 것
- 요청과 장면 맥락에 맞는 반응인지
고양이와 풀어보기 Q&A
- 고양이 연구원
시연 영상이 자연스러우면 현실도 정확히 계산한다는 뜻이야?
포켓 노트자연스럽게 보이는 것만으로 물리 계산의 정확도가 입증되지는 않아. 개발팀도 복잡한 물리 상호작용과 공간·음향의 정확도를 연구 과제로 적었어. 실제 안전 판단에 쓰려면 별도의 검증이 필요해.
3. 누가 언제 써 볼 수 있고, 어디까지 믿을까
Project Genie는 이용자가 가상 세계를 만들어 탐색하는 제품이고, Gemini API와 Google AI Studio는 개발자가 모델을 앱에 연결하거나 시험하는 경로입니다. 이번 발표는 먼저 제한된 테스터의 피드백을 받고 이후 제공 범위를 넓히는 순서입니다. 이 원문들에는 모든 지역의 제공일·최종 요금이 제시되지 않았습니다.
| 단계 | 발표 기준 상태 | 독자가 판단할 수 있는 것 |
|---|---|---|
| 제한된 테스터의 연구 프리뷰 | 제공 시작 | 선별된 테스터 대상이며 일반 이용 권한을 뜻하지 않음 |
| AI Ultra의 Project Genie | 향후 제공 예고·대기 등록 안내 | 구독만으로 지금 Genie 4를 쓸 수 있다고 판단하지 않기 |
| Gemini API·AI Studio 파트너 | 조기 접근 파트너 대상 예고 | 일반 API 제공일·요금·지역은 해당 안내에서 따로 확인 |
- 단계
제한된 테스터의 연구 프리뷰
- 발표 기준 상태
- 제공 시작
- 독자가 판단할 수 있는 것
- 선별된 테스터 대상이며 일반 이용 권한을 뜻하지 않음
- 단계
AI Ultra의 Project Genie
- 발표 기준 상태
- 향후 제공 예고·대기 등록 안내
- 독자가 판단할 수 있는 것
- 구독만으로 지금 Genie 4를 쓸 수 있다고 판단하지 않기
- 단계
Gemini API·AI Studio 파트너
- 발표 기준 상태
- 조기 접근 파트너 대상 예고
- 독자가 판단할 수 있는 것
- 일반 API 제공일·요금·지역은 해당 안내에서 따로 확인
오래 탐색하거나 복잡한 수정을 여러 번 하면 사물의 모양과 위치가 달라지거나, 같은 물건이 유지되지 않는 문제가 남아 있다고 개발팀은 설명합니다. 읽을 수 있는 글자 표현, 공간 정확도와 장기 일관성도 한계로 적었습니다. 영화 장면의 아이디어를 빠르게 살펴보는 가능성과, 현실의 로봇이 안전하게 움직인다고 검증하는 일 사이에는 이런 정확도 검사가 필요합니다.
고양이와 풀어보기 Q&A
- 고양이 연구원
이용 권한이 생기면 비개발자는 무엇부터 비교해 보면 돼?
포켓 노트같은 장면에서 한 가지 조건만 바꿔 보고 사물·소리·반응이 이어지는지 살펴볼 수 있어. 예를 들어 비만 요청했는데 인물과 장소까지 이유 없이 바뀌는지 보는 거야. 이는 창작 구상을 살펴보는 작은 시험이지 실제 환경의 안전성 인증은 아니야.
마무리
결과를 보며 다음 조작을 고르는 도구
Genie 4가 제시하는 변화는 이용자의 행동에 맞춰 화면과 소리가 계속 만들어지는 경험입니다. 제공 권한이 생기면 한 가지 조작 전후의 연결을 비교해 볼 수 있습니다. 구체적인 활용 가능성은 시연의 인상과 함께, 접근 조건과 오래 이어지는 장면의 일관성을 놓고 판단해야 합니다.