Lightricks LTX-2, un model AI open-source pentru generarea de conținut video și audio

Lightricks, o companie israeliană specializată în instrumente AI pentru creație de conținut, a lansat LTX-2, un model de fundație open-source care generează simultan conținut audio-video sincronizat, la rezoluție nativă 4K și 50 de cadre pe secundă.

Modelul permite crearea de secvențe de până la 10 secunde, fără nevoia de editare manuală ulterioară, și rulează pe GPU-uri uzuale (*sigur, trebuie sa fie GPU-uri de top). 

LTX-2 integrează generarea de elemente vizuale, dialoguri, sunete ambientale și muzică într-un singur proces, bazat pe tehnici de difuzie.

Compania susține că reduce costurile de producție cu până la 50% față de metodele tradiționale și oferă suport pentru extensii precum controlul prin cadre cheie, facilitând integrarea în fluxuri profesionale de lucru.

Modelul este disponibil prin API pe platforme precum Fal.ai și Replicate, permițând dezvoltatorilor să-l adapteze pentru aplicații în efecte vizuale, marketing și producție video.

Demonstrațiile publicate de Lightricks și de către utilizatori, arată capabilități precum mișcări coerente în scene dinamice, cum ar fi un cal călărit prin peisaje neon sau un dans urban în ploaie, cu audio integrat care include dialoguri și efecte sonore.

Spre deosebire de modelele anterioare, LTX-2 prioritizează claritatea texturilor și fluiditatea mișcărilor, evitând artefacte comune în upscaling.

Platforma asociată, LTX Studio, oferă un mediu web-based pentru generare din text, imagini sau video, cu opțiuni gratuite și plătite pentru utilizatori individuali și echipe.

Lansarea vine în contextul unei competiții intense în domeniul AI video, unde companii precum Runway, Google, xAI, OpenAI şi altele dezvoltă tool-uri similare, dar LTX-2 se diferențiază prin accesul open-source complet, inclusiv codul de bază, spre deosebire de modelele cu acces limitat.

Lightricks, fondată în 2013 și cunoscută pentru aplicații precum Facetune, a investit în ultimii ani în tehnologii AI, lansând anterior LTX Studio în februarie 2024 pentru asistență în storytelling vizual.

Compania, cu sediul în Ierusalim, are peste 500 de angajați și se concentrează pe democratizarea creației de conținut prin inovații accesibile.

Sursa: LTX-2

Te-AI pregătit pentru ce vine?
Abonează-te la "Pulsul AI", newsletter-ul care te ține la zi cu noutățile din Inteligența Artificială. Fără hype sau panică. Doar ce contează.

Ultimele Știri

Noutăți din AI