Hopp til innholdet
Norsk journal om kunstig intelligens 255 artikler Oslo --:--
TokenPrat
1 min lesetid Av TokenPrat-redaksjonen

MiniMax H3: Videomodellen som leser bilde, lyd og video som ett språk

juli slapp MiniMax sin nyeste videomodell, H3 (også kjent som Hailuo 3.0), og den prøver å løse noe de fleste videomodeller sliter med: å behandle tekst, bilder, video og lyd som separate, spesialiserte oppgaver i stedet for én sammenhengende kontekst.

Ett modell, mange referanser

I stedet for egne ekspertmodeller for redigering, subjekt-referanse og bevegelsesreferanse, er H3 trent til å behandle disse relasjonene som naturlig språk. MiniMax sitt eget eksempel illustrerer poenget: "Bruk kameraets bevegelse fra video 1, la karakteren i bilde 2 synge, med vokal som matcher lyd 3." Modellen kan ta imot flere bilder, videoklipp og lydfiler samtidig og veve dem sammen i én generering – det MiniMax kaller «omni-referanse».

Resultatet er video i opptil 2K oppløsning, 4–15 sekunder lengde med heltallsvarighet, og lyd generert i samme pass – dialog, effekter og ambience inkludert i stereo. Modellen støtter også instruksjonsbasert redigering, altså at du kan endre en karakter, et objekt eller lydsporet i et eksisterende klipp uten å generere hele scenen på nytt.

H3 er allerede tilgjengelig gjennom MiniMax sin API, i forbrukerappen Hailuo AI, og har dukket opp i tredjepartsverktøy som Krea samme lanseringsdag.

Åpne vekter – med en vri

MiniMax sa ved lansering at de planla å åpne modellvektene "i løpet av de kommende dagene". Vektene kom etter hvert, men med en egen MiniMax H3 Community-lisens datert 2. august – og her er det verdt å være obs: lisensen skal ifølge flere kilder utelukke kommersiell bruk i USA og EU. Så selv om modellen teknisk sett er åpen, er den ikke fritt spillbar for alle formål og alle brukere. Sjekk lisensvilkårene nøye før du bygger noe kommersielt rundt den.

Konkurransen er hard: H3 lanserte i samme vindu som ByteDances Seedance 2.5, og de to modellene sammenlignes allerede tett på ting som bildekonsistens, kamerabevegelse og pris per sekund.

Ressurser

Del

Les videre

Forsiden →
Forelesningssal om natten med en tavle full av krittdiagrammer, en laptop og høye stabler med manuskripter
· Forskning

OpenAI slapp over 700 matematikkbevis på én dag – Lean sjekker rundt 42 prosent av dem

6. oktober la OpenAI ut 722 matematiske manuskripter laget av en intern modell uten navn. Det mest interessante er metoden: en AI som tenker i timevis per problem, og et maskinelt verktøy som skal skille holdbare bevis fra tull.

Studiomikrofon med lysende fargede lydbølger i et mørkt lydstudio
· Modeller

Ming 3.0 TTS: Beste åpne stemmekloner med MIT-lisens – men den snakker ikke norsk

Ant Group har sluppet to talemodeller som kloner stemmer, designer nye fra en beskrivelse og ler, sukker og nøler på kommando. Den minste har bare 0,5 milliarder parametere, og lisensen er så åpen som det går an. Men står norsk på ønskelista, må du vente.

Menneskehånd og robothånd som holder hver sin trekloss med samme grep
· Forskning

FlashDexRetarget: Én policy for tusen håndbevegelser – og 100 ganger mindre GPU-tid

Roboter med fingre trenger enorme mengder treningsdata, og den billigste kilden er opptak av mennesker som håndterer ting. Problemet er å oversette en menneskehånd til en robothånd. Et nytt prosjekt fra KAIST og Holiday Robotics gjør det med én felles modell i stedet for én per bevegelse, og bruker