Төгсгөлгүй 4K видео, кадр хоорондын бүрэн удирдлага: Google "Gemini Omni 1.1 Flash" загвараа API-аар цацлаа
Generative AI-ийн салбарт текстийг видео болгон хувиргах (Text-to-Video) боломж эрчимтэй хөгжиж байгаа ч хөгжүүлэгчдийн өмнө тулгардаг гурван том бэрхшээл байсаар ирсэн: видеоны богино хугацаа (4–8 секунд), камер болон хөдөлгөөнийг нарийн удирдах боломжгүй байдал (randomness), мөн өндөр нарийвчлалтай видео render хийх асар үнэтэй зардал.
Өнөөдөр Google энэхүү асуудлуудыг шийдвэрлэхэд чиглэсэн Gemini Omni 1.1 Flash загвараа албан ёсоор ерөнхий хэрэглээнд (GA) нэвтрүүлж, Google AI Studio болон Gemini API-аар дамжуулан хөгжүүлэгчдийн гарт өглөө. Энэ нь зөвхөн энгийн загварын шинэчлэл бус, бодит программ хангамжийн pipeline-д зориулсан хяналтын цоо шинэ механизм бүхий архитектур юм.
Шинэ хувилбарын гол архитектурын сайжруулалтууд
Gemini Omni 1.1 Flash нь видео, аудио, зураг, текстийг нэгэн зэрэг боловсруулах Native Multimodal чадвартай төдийгүй дараах 4 гол боломжийг хөгжүүлэгчдэд олгож байна:
1. 40 секунд хүртэлх Scene Extension (10 секундийн контекст санах ой)
Өмнөх видео загварууд видеог сунгахдаа зөвхөн хамгийн сүүлийн 1 секундийн кадраас хамааран таамаглал дэвшүүлдэг байсан нь дүрийн хувцас солигдох, орчны логик алдагдах асуудал үүсгэдэг байв.
Харин Gemini Omni 1.1 Flash нь өмнөх 10 секундийн видео контекстийг бүрэн шинжилж, өгүүлэмж болон дүрийн тогтвортой байдал (consistency)-ийг алдагдуулахгүйгээр видеог тасралтгүй үргэлжлүүлэн 40 секунд хүртэл уртасгах боломжтой болсон.
2. First & Last Frame Keyframe Interpolation
Видео найруулагч болон хөгжүүлэгчдэд хамгийн их дутагдаж байсан зүйл бол кадруудын хоорондох шилжилт байв. Шинэ image_to_video таск нь хэрэглэгчийн өгсөн эхний (start frame) болон төгсгөлийн (end frame) зургийг ашиглан хоорондох завсрын хөдөлгөөнийг бодит физикийн хуульд нийцүүлэн нөхөж үүсгэнэ. Энэ нь камерын orbit, pan, zoom зэрэг нарийн чиглэлтэй хөдөлгөөн болон төгс холбогдсон seamless loop хийхэд нэн тохиромжтой.
3. Rapid 360p Drafting ба 4K Upscaling Pipeline
Видео генерацийн API дуудлага нь өндөр зардалтай байдаг. Үүнийг шийдэхийн тулд Google хоёр үе шаттай workflow санал болгож байна:
- 360p Draft Mode: Прототайп хийх болон prompt тестлэх явцад 60% хурдан, 3 дахин хямд өртгөөр хөнгөн драфт гаргана.
- 4K Resolution Upscale: Туршилт амжилттай болсон тохиолдолд
resolution: "4k"параметрийг тохируулан кино театрын студийн чанартай өндөр нарийвчлалтайгаар render хийх боломжтой.
4. Conversational Video Editing (Interactions API)
Бүхэл бүтэн видеог эхнээс нь дахин үүсгэх шаардлагагүйгээр Interactions API ашиглан чат хэлбэрээр видеоны хүссэн хэсгийг өөрчлөх боломжтой. Жишээ нь: "Орчны гэрлийг жаргах нарны туяатай болго", "Арын дэвсгэр дээрх машины өнгийг соль" гэх мэт засваруудыг видеоны үндсэн бүтцийг эвдэлгүй гүйцэтгэнэ.
Хөгжүүлэгчийн жишээ: API дуудах
Gemini SDK ашиглан gemini-omni-1.1-flash загвараар видео үүсгэх хамгийн энгийн Python жишээ:
import base64
from google import genai
from google.genai import types
client = genai.Client()
# 1. Текстээс видео үүсгэх (360p хурдан драфт горим)
interaction = client.interactions.create(
model="gemini-omni-1.1-flash",
input="A cinematic drone shot through a neon-lit futuristic city, smooth forward motion.",
video_config=types.VideoConfig(
resolution="360p", # 360p, 720p, 1080p, 4k сонголттой
aspect_ratio="16:9"
)
)
# Үр дүнг хадгалах
with open("draft_output.mp4", "wb") as f:
f.write(base64.b64decode(interaction.output_video.data))
Хэрэв өмнөх видеог үргэлжлүүлэн 40 секунд хүртэл сунгахыг хүсвэл extend үйлдлээр өмнөх видео файлын URI болон нэмэлт зааврыг дамжуулахад хангалттай.
Хөгжүүлэгчдэд ямар боломж нээгдэж байна вэ?
- Автоматжуулсан контент бүтээх платформууд: Social media, маркетингийн богино хэмжээний бичлэгүүдийг өндөр нарийвчлалтай, зардлын хэмнэлттэй pipeline-аар үүсгэх.
- Тоглоом болон виртуал ертөнц: Cutscene, cinematic трейлерүүдийг эхлэл болон төгсгөлийн кадрын удирдлагатайгаар динамикаар угсрах.
- E-commerce & Product Showcase: 3D моделийн бүтээгдэхүүний зургийг өгөөд камерын 360 градус эргэх видеог 4K чанартайгаар шууд render хийх.
Google-ийн мэдэгдсэнээр хуучин gemini-omni-flash-preview endpoint нь 2026 оны 9-р сарын 30-нд хаагдах тул хөгжүүлэгчдийг шинэ gemini-omni-1.1-flash руу шилжихийг зөвлөж байна.
Эх сурвалж: Google Blog, Google AI for Developers Release Notes (August 27, 2026).
Сэтгэгдэл
Ачаалж байна...