Modly bringt die KI-Generierung von 3D-Modellen auf den PC: kostenlos, Open Source und vollständig offline
Es kommt eine Desktop-Alternative zu Cloud-Diensten für die Generierung dreidimensionaler Meshes mithilfe künstlicher Intelligenz. Das Open-Source-Projekt ermöglicht es, Bilder und Texte in 3D-Modelle umzuwandeln, wobei nur die lokale GPU verwendet wird.
Die meisten KI-Generatoren für 3D-Modelle arbeiten über Cloud-Plattformen. Der Nutzer lädt ein Bild hoch, der entfernte Server verarbeitet es und gibt das Ergebnis zurück. Modly, entwickelt von Lightning Pixel, verfolgt einen radikal anderen Ansatz: den gesamten Prozess auf den Computer des Nutzers zu verlagern.
Die Anwendung ermöglicht es, dreidimensionale Meshes aus Bildern oder Text-Prompts zu generieren. Sie funktioniert vollständig offline, sobald das Programm und die erforderlichen Modelle installiert sind. Sie erfordert weder Credits noch Abonnements.
- Open-Source-Software mit MIT-Lizenz für die lokale Generierung von 3D-Modellen
- Verarbeitung vollständig offline über die lokale GPU
- Unterstützung für mehrere Open-Source-KI-Modelle (TripoSG, Trellis2, Hunyuan3D 2 Mini)
- Kompatibel mit Blender, Unity, Unreal Engine und 3D-Druck
Eine einheitliche Umgebung für Open-Source-KI-Modelle
Modly führt kein neues proprietäres generatives Modell ein. Sein Wert liegt in der Zugänglichkeit: Es macht verschiedene Open-Source-KI-Modelle ohne komplexe Konfigurationen nutzbar.
Das Projekt funktioniert als Desktop-Umgebung, die die Notwendigkeit beseitigt, Python-Umgebungen, CUDA-Abhängigkeiten und verschiedene Repositories manuell zu konfigurieren. Der Benutzer kann Erweiterungen installieren, um Modelle wie TripoSG, Trellis2 und Hunyuan3D 2 Mini zu integrieren.
Der Quellcode wird unter der MIT-Lizenz verbreitet. Er kann geändert, in andere Projekte integriert oder an spezifische Workflows angepasst werden, sofern die Bedingungen der Lizenz eingehalten werden.
Vereinfachter Workflow: vom Bild zum Mesh
Der Generierungsprozess erfordert nur wenige Schritte. Der Benutzer gibt eine visuelle oder textuelle Eingabe an, wählt das KI-Modell aus und startet die lokale Verarbeitung.
Der Workflow akzeptiert Bilder im Format PNG, JPG oder WebP oder textuelle Beschreibungen. Nach Auswahl eines der installierten KI-Modelle wird die Verarbeitung von der lokalen GPU ausgeführt. Das erhaltene dreidimensionale Modell erscheint direkt in der Benutzeroberfläche von Modly.
Die Ergebnisse können in Modellierungssoftware wie Blender, Grafik-Engines wie Unity oder Unreal Engine exportiert oder für den 3D-Druck vorbereitet werden.
Der Prozess ist kein metrologischer 3D-Scan. Bei einem einzelnen Foto kennt die KI nur das, was im Bild sichtbar ist, und muss die Geometrie der nicht sichtbaren Teile schätzen.
Hardware-Anforderungen und Kompatibilität
Die lokale Ausführung erfordert geeignete Hardware. Das System unterstützt NVIDIA-GPUs mit CUDA-Toolchain und Apple-Silicon-Prozessoren.
Modly nutzt die GPU für die Verarbeitung generativer Modelle. Unterstützt werden NVIDIA-GPUs mit CUDA-Abhängigkeiten und Apple-Silicon-Architekturen. Die Kompatibilität mit macOS ist bestätigt.
Das Erweiterungssystem ermöglicht die Integration neuer KI-Modelle, sobald sie von der Open-Source-Community verfügbar gemacht werden. Das Workflow-System ermöglicht die Verkettung von Generierungsprozessen für komplexere Vorgänge.
Implikationen für die additive Fertigung
Die Verfügbarkeit lokaler Werkzeuge für die KI-Generierung von 3D-Modellen senkt die Einstiegshürden für schnelles Prototyping und Individualisierung.
Der Offline-Ansatz beseitigt Datenschutzprobleme im Zusammenhang mit dem Senden von Bildern an externe Dienste. Für industrielle Anwendungen, die Vertraulichkeit bei Designs erfordern, stellt diese Eigenschaft einen erheblichen Vorteil dar.
Die Möglichkeit, schnell Meshes aus Fotos oder textlichen Beschreibungen zu generieren, beschleunigt die frühen Phasen des Konzeptdesigns. Die erhaltenen Modelle können vor dem 3D-Druck in traditioneller CAD-Software verfeinert werden.
Das Fehlen von Kosten pro einzelner Generierung macht die schnelle Iteration über Designvarianten wirtschaftlich tragfähig. Dies führt zu kürzeren Entwicklungszyklen für Prototypen und kundenspezifische Komponenten.
Der öffentlich verfügbare Quellcode ermöglicht es Unternehmen, die Technologie in proprietäre Pipelines zu integrieren. Die MIT-Lizenz bietet Flexibilität für spezifische Anpassungen ohne restriktive Lizenzbedingungen.
articolo scritto con l'ausilio di sistemi di intelligenza artificiale
Fragen & Antworten
Was ist Modly und wie funktioniert es?
Modly ist eine Open-Source-Desktop-Anwendung, die es ermöglicht, 3D-Meshes aus Bildern oder Text-Prompts unter Nutzung der lokalen GPU zu generieren. Sie funktioniert vollständig offline ohne Abonnement- oder Cloud-Credit-Anforderungen.
Welche KI-Modelle unterstützt Modly?
Die Software dient als einheitliche Umgebung zur Integration verschiedener Open-Source-Modelle wie TripoSG, Trellis2 und Hunyuan3D 2 Mini. Benutzer können spezifische Erweiterungen installieren, um diese Generierungsmotoren zu nutzen.
Kann Modly ohne Internetverbindung verwendet werden?
Ja, sobald das Programm und die erforderlichen Modelle installiert sind, erfolgt der gesamte Generierungsprozess offline auf dem Computer des Benutzers. Es besteht keine Abhängigkeit von Remote-Servern für die Datenverarbeitung.
In welchen Formaten können die erstellten Modelle exportiert werden?
Die Ergebnisse können in Modellierungssoftware wie Blender sowie Grafik-Engines wie Unity und Unreal Engine exportiert werden. Zudem eignen sie sich zur Vorbereitung und Verwendung im 3D-Druck.
Unter welcher Lizenz wird Modly vertrieben?
Der Quellcode wird unter der MIT-Lizenz verbreitet, was Benutzern erlaubt, die Software zu modifizieren, zu erweitern und an spezifische Workflows anzupassen. Diese Lizenz gewährleistet maximale Nutzungsfreiheit unter Einhaltung der Standardbedingungen.
