Kürzlich hat das Alibaba Tongyi Laboratory einen großen Durchbruch auf dem Gebiet der 3D -Rekonstruktion des menschlichen Körpers erzielt und eine innovative Technologie namens LHM (großes, animiertes menschliches Körperrekonstruktionsmodell) auf den Markt gebracht. Diese Technologie bringt nicht nur eine neue Entwicklungsrichtung in diesen Bereich, sondern erweitert auch die Anwendungsaussichten erheblich.
Die animierte 3D -Körperrekonstruktion aus einem einzigen Bild war schon immer eine herausfordernde Aufgabe, hauptsächlich aufgrund der Unklarheit der Geometrie, des Aussehens und der Deformationstrennung. Die meisten der aktuellen Forschungsforschungen konzentrieren sich auf statische menschliche Modellierung, und diese Methoden stützen sich häufig auf synthetische 3D -Scans für das Training, was ihre Fähigkeit, in realen Szenarien zu verallgemeinern, weitgehend einschränkt. Gleichzeitig erfordert die optimierungsbasierte Videomethode nicht nur strenge Kontrolle über die Erfassungsbedingungen, sondern hat auch äußerst intensive Computerprozesse, was es schwierig macht, die Bedürfnisse praktischer Anwendungen zu erfüllen.
Als Reaktion auf diese Schwierigkeiten entstand das LHM -Modell. Das Modell nimmt innovativ eine multimodale Transformatorarchitektur an und kann durch einen leistungsstarken Aufmerksamkeitsmechanismus menschliche Positionsmerkmale und Bildmerkmale effektiv codieren. Diese Architektur ermöglicht es LHM, nicht nur die Geometrie des menschlichen Körpers genau zu rekonstruieren, sondern auch die geometrischen Formen und Texturen der Kleidung im Detail zu bewahren, wodurch Benutzer eine realistischere und empfindlichere 3D -Mannequin präsentiert werden.
Es ist erwähnenswert, dass LHM auch ein Pyramid -Codierungsschema für Kopffunktion vorgeschlagen hat. Diese Lösung verbessert ferner die Fähigkeit des Modells, die Details des menschlichen Kopfes zu erfassen, indem sie die Multi-Skala-Eigenschaften des Kopfbereichs aggregieren und das erzeugte 3D-Modell des menschlichen Körpers in der Kopfleistung realistischer werden. In praktischen Anwendungen zeigt LHM eine erstaunliche Effizienz, in der Lage ist, in wenigen Sekunden angemessene Animationen menschlicher Körper zu generieren, und es sind keine komplizierte Nachbearbeitung erforderlich, wodurch Zeit- und Arbeitskosten erheblich sparen.
Nach viel experimenteller Überprüfung ist LHM in Bezug auf die Rekonstruktionsgenauigkeit und die Verallgemeinerungsfähigkeit besser als vorhandene Methoden. Ob in komplexen Szenarien oder unter verschiedenen Beleuchtungsbedingungen, LHM kann stabile Ergebnisse der 3D-Rekonstruktion von 3D menschlichen Körpern stabil ausgeben.
Adresse: https://lingtengqiu.github.io/lhm/