Gemini Omni AI 비디오 생성기: 다중 모드 입력, 문자 및 음성

Bottom Line Up Front (BLUF): Gemini Omni는 멀티모달 AI 비디오 생성기입니다. 텍스트 프롬프트와 함께 이미지, 비디오, 오디오 및 저장된 문자까지 입력으로 받아들입니다. 장면을 말로 설명하고, 사진으로 뒷받침하고, 대화에 사용할 목소리를 선택하고, 동일한 영웅이 등장하는 전체 클립 시리즈를 촬영하세요. 이 모든 것이 하나의 모델 안에서 이루어집니다.

AI가 생성한 음성으로 카메라 앞에서 말하는 가상 발표자
NeuralSpace에서의 Gemini Omni 1 모델 생성 예시

실제로 Omni의 의미

대부분의 비디오 모델은 텍스트나 단일 사진을 찍습니다. Gemini Omni는 혼합 식단을 취합니다. 즉, 텍스트 메시지와 추가 맥락으로 최대 7개의 이미지, 비디오 또는 오디오를 추가합니다. Wan특정 프레임에서 영감을 받아 특정 트랙의 분위기를 담은 클립이요? 모든 것을 한 번에 가져오십시오. 모델은 연결하는 모든 소스의 무게를 측정합니다.

이는 작업 구성 방식을 변경합니다. "이런 집, 저런 빛"이라는 긴 단락 그림 대신에 단순히 집 사진을 보여주고 동작에 대해서만 단어를 사용합니다. 텍스트는 플롯을 주도하고 첨부 파일은 모양을 정의합니다. 각 입력 유형은 자체 작업을 수행합니다.

캐릭터: 모든 클립에 영웅 1명

일반 생성기의 저주는 영웅이 클립마다 변경된다는 것입니다. 여기에서는 전용 캐릭터 탭으로 문제를 해결합니다. 캐릭터를 한 번 생성하면 개인 라이브러리에 저장되고 그 이후부터 모든 세대에 연결됩니다. 비디오 이후에도 모양이 일관되게 유지됩니다.

그것이 시리즈가 만들어지는 방식입니다. 가상 쇼 진행자, 브랜드 마스코트, 동화의 반복되는 영웅. 저장된 캐릭터는 생성 양식에서 바로 한 번의 클릭으로 라이브러리에서 선택됩니다. 참조를 다시 업로드하거나 모델이 얼굴을 "기억"하기를 바라지 않아도 됩니다.

텍스트 프롬프트, 사진 참조 및 라이브러리에서 선택한 캐릭터를 결합한 생성 양식
NeuralSpace에서의 Gemini Omni 1 모델 생성 예시

음성 해설: 사전 설정된 음성 및 나만의 음성

클립은 처음부터 소리와 함께 나올 수 있습니다. 이 설정은 부드럽고 높은 것부터 낮고 거친 것까지 다양한 음색과 개성을 포괄하는 남성과 여성의 미리 설정된 음성 목록을 제공합니다. 음성을 선택하고 프롬프트에 대사를 넣으면 캐릭터가 프레임에서 바로 말합니다.

적합한 사전 설정이 없으면 오디오 탭을 사용하여 기본 사전 설정 위에 사용자 정의 음성을 만들 수 있습니다. 개인 라이브러리에 합류하여 표준 라이브러리와 마찬가지로 여러 세대에 연결됩니다. 브랜드의 경우 이는 게시하는 모든 동영상에서 인식 가능한 하나의 목소리를 의미합니다.

최대 4K 출력 및 프레임 형식

Gemini Omni는 사이트에서 4K 출력이 있는 몇 안 되는 모델 중 하나입니다. 사용 가능한 해상도는 720p, 1080p 및 4K입니다. 클립 길이는 4, 6, 8, 10초입니다. 프레임은 소셜 피드용 와이드스크린 16:9 또는 수직 9:16입니다. 가격은 기간과 품질에 따라 달라집니다.

실용적인 루틴: 세대가 더 저렴하고 빠른 720p에서 초안을 반복한 다음 1080p 또는 4K에서 승리한 버전을 다시 실행합니다. 완성된 클립은 생성 기록에 저장되며 다운로드하거나 확장하거나 수정하여 프롬프트를 다시 실행할 수 있습니다.

1세대에 접근하는 방법

모든 기능을 한 번에 켜지 마십시오. 모델이 설명을 어떻게 읽는지 알아보려면 텍스트만으로 첫 번째 클립을 만드세요. 그런 다음 참조 이미지를 추가한 다음 음성을 추가하고 그 후에만 영구 캐릭터를 설정합니다. 각 단계마다 제어 기능이 추가되지만 표현에는 좀 더 주의가 필요합니다.

장면 설명에서 고전적인 순서를 유지하세요. 프레임 안에 누가 있는지, 무엇을 하는지, 어디서 일어나는지, 카메라가 어떻게 작동하는지 등을 살펴보세요. 대사가 있는 경우 자체 문장을 제공합니다. 이 구조는 거의 매번 첫 번째 또는 두 번째 시도에서 일관된 클립을 생성합니다.

자주 묻는 질문

Gemini Omni는 일반 동영상 모델과 어떻게 다릅니까?

입력과 라이브러리가 혼합되어 있습니다. 일반 모델은 텍스트나 사진 한 장을 받습니다. 여기에서는 텍스트, 이미지, 비디오 및 오디오를 결합하고 그 위에 저장된 캐릭터와 사용자 정의 음성을 첨부할 수 있습니다. 따라서 한 명의 영웅을 중심으로 구축된 연속 콘텐츠에 적합한 선택입니다.

동일한 캐릭터로 여러 개의 클립을 만들려면 어떻게 해야 합니까?

캐릭터 탭에서 캐릭터를 생성하면 라이브러리에 저장됩니다. 그런 다음 모든 새로운 세대에서 한 번의 클릭으로 선택하십시오. 영웅의 모습은 참조를 다시 업로드할 필요 없이 클립마다 반복됩니다.

영상에 소리와 음성이 포함될 수 있나요?

예. 사전 설정된 음성 중 하나를 선택하거나 오디오 탭에서 직접 만든 다음 장면 설명 안에 캐릭터 대사를 작성하세요. 모델은 영웅이 선택한 음성으로 해당 대사를 전달하는 클립을 렌더링합니다.

비슷한 모델