Dieses einzigartige Videomodell eines chinesischen KI-Unternehmens, das Charaktere auf Minutenebene präzise steuern kann, ist da |
SenseTime hat wieder etwas Großartiges geleistet und kann mit nur einem Foto ein einminütiges Video erstellen.
Am 4. Juli wurde Vimi, das erste von SenseTime entwickelte große steuerbare Zeichenvideogenerierungsmodell für C-End-Benutzer, zum „Schatz der Halle“ gekürt, der höchsten Auszeichnung für die Ausstellung der World Artificial Intelligence Conference (WAIC). innovativste Ausstellung auf der Konferenz.
Basierend auf dem neuen großen Modell von SenseTime kann Vimi anhand eines Fotos beliebigen Stils ein Charaktervideo generieren, das mit der Zielaktion übereinstimmt, und unterstützt eine Vielzahl von Fahrmethoden, bei denen vorhandene Charaktervideos, Animationen, Sounds, Texte usw. verwendet werden können . Angetrieben durch mehrere Elemente.
Mit der rasanten Entwicklung großer Modelle und generativer KI-Technologie ist es nicht mehr schwierig, Standbilder „lebendig“ zu machen.
Bestehende Produkte auf dem Markt weisen jedoch immer noch viele Probleme in der praktischen Anwendung auf, wie z. B. ungenaue Bewegungs- und Ausdruckssteuerung, schlechte Effektstabilität und begrenzte Videodauer, die den kreativen Spielraum von Videokünstlern einschränken.
Um diese Engpässe zu überwinden, hat SenseTime ein großes, steuerbares Charaktervideo-Generierungsmodell auf den Markt gebracht – Vimi.
Im Gegensatz zur Bildausdruckssteuerungstechnologie, die nur die Ausdrucksbewegungen des Kopfes steuern kann, kann Vimi nicht nur eine präzise Ausdruckssteuerung von Charakteren erreichen, sondern auch die natürlichen Körperveränderungen der Charaktere auf den Fotos im Halbkörperbereich steuern und automatisch Haare und Haare erzeugen , und Haare, die zu den Charakteren passen, ändern sich.
Gleichzeitig kann Vimi auch vernünftige Licht- und Schattenveränderungen erzeugen, wodurch Charakterbewegungen und visuelle Effekte glatt und natürlich und das Bild harmonisch und schön werden.
Noch wichtiger ist, dass Vimi Einzelbild-Charaktervideos von bis zu einer Minute stabil erzeugen kann, ohne dass es im Laufe der Zeit zu Verschlechterungen oder Verzerrungen kommt, und damit die Nachfrage nach langfristig stabilen Videos in Unterhaltungs- und Interaktionsszenarien vollständig erfüllt.
Ririxin gab offiziell bekannt, dass Vimi vollständig für C-End-Benutzer geöffnet sein wird, insbesondere um den Unterhaltungs- und Kreationsbedürfnissen weiblicher Benutzer gerecht zu werden.
Benutzer müssen lediglich hochauflösende Bilder von Personen aus verschiedenen Blickwinkeln hochladen, und schon können automatisch digitale Avatare und Fotovideos unterschiedlicher Stile generiert werden.
Die von Vimi generierten Videocharaktere sind nicht mehr nur langweilige Gesichtsbewegungen, sondern werden mit Gesten, Gliedmaßen, Haaren usw. abgeglichen, um vollständigere und einheitlichere Charakterbewegungen zu bilden, sodass Ersteller die generierten Videomaterialien bearbeiten und neu erstellen können.
Für Benutzer, die gerne Selfies machen, unterstützt Vimi eine Vielzahl von Unterhaltungs- und interaktiven Szenarien wie Chatten, Singen, Tanzen usw.; für Benutzer, die sich für Emoticons interessieren, kann Vimi mit einem einzigen Foto eine Vielzahl interessanter Charakter-Emoticons generieren. mit verschiedenen Spielweisen und der Erlangung kreativer Freiheit.
Darüber hinaus bietet Vimi auch eine Vielzahl von Generationsstilen wie den ästhetischen Fotostil und den Fantasy-Stil, sodass Benutzer durch verschiedene Dimensionen reisen und immersive visuelle Effekte im Blockbuster-Stil genießen können.
Derzeit haben 80 % der Videos in der Branche Charaktere als Hauptinhalt. Gleichzeitig ist mit der Explosion von Kurzvideos und Live-Übertragungsplattformen die Nachfrage nach Videos mit Charakteren als Hauptinhalt exponentiell gestiegen.
Es gibt jedoch einen Mangel an AIGC-Produkten auf dem Markt, die die Erzeugung von Charaktervideos steuern können, was dazu führt, dass die Effizienz der Inhaltsersteller dringend verbessert werden muss.
Man kann sagen, dass das Aufkommen von Vimi diese Lücke gerade geschlossen hat und den meisten C-Seiten-Videoerstellern ein einfaches und benutzerfreundliches Erstellungstool bietet, das bei der Erstellung von Charakter-Kurzvideos weit verbreitet ist.
Weitere Details zu Vimi werden am 5. Juli auf dem von SenseTime veranstalteten Forum für künstliche Intelligenz „Love Without Boundaries·Xiang Xinli“ enthüllt. APPSO wird ebenfalls mit Berichten nachfassen.
Derzeit hat Vimi Reservierungen auf der offiziellen Website von SenseTime eröffnet, und Sie sind herzlich eingeladen, es zu erleben.
Im Anhang finden Sie das Reservierungsadressenportal: https://vme-int.softsugar.com/questionnaire/
# Willkommen beim offiziellen öffentlichen WeChat-Konto von Aifaner: Aifaner (WeChat-ID: ifanr) wird Ihnen so schnell wie möglich zur Verfügung gestellt.
Ai Faner |. Ursprünglicher Link · Kommentare anzeigen · Sina Weibo