AI & Tools #AI Tools #3D Modeling #Open Source #Local AI

Modly 本地端 AI 圖像轉 3D 網格生成工具安裝與實測

想將 2D 圖片快速轉換為高精度的 3D 模型,又不想付費或將隱私上傳雲端?Modly 讓你在本機 GPU 上直接進行 AI 3D 生成。

為什麼選擇 Modly?

在遊戲開發與 3D 設計的工作流中,將 2D 的概念草圖轉換為 3D 網格模型(Mesh)向來是一件極其耗時且吃重技術的工作。雖然市面上陸續出現了一些雲端 AI 3D 生成工具,但它們大多採用訂閱制收費,不僅有著嚴格的生成點數限制,還需要將你的原創設計上傳至雲端伺服器,對商業專案或隱私敏感的創作者來說並非最佳解。

Modly 是一個由 Lightning Pixel 開源的本機端 AI 3D 網格生成工具。它最大的特色是完全在你的本地 GPU 上運作,這意味著你的所有資料都是 100% 隱私安全的,且無須支付任何雲端伺服器或訂閱費用。Modly 提供了友善的桌面端操作介面,並支援模組化的 AI 擴充系統,讓你能夠輕鬆載入 Hunyuan3D 2 或 Trellis 等最新、最強大的開源 3D 生成模型。


實作展示 (Live Demo)

下面是實際運行 Modly 將單張 2D 圖像一鍵生成 3D 網格模型並進行即時旋轉預覽的動態展示:


如何安裝與開始使用?

Modly 的安裝非常直覺,它同時支援了開箱即用的安裝包下載以及適合開發者的原始碼啟動方式。

1. 下載獨立安裝包 (Windows / Linux)

如果你是 Windows 或 Linux 的使用者,可以直接前往 Releases 頁面 下載編譯好的安裝檔:

  • Windows:下載並執行 Modly-Setup-0.3.6.exe
  • Linux:下載並執行 Modly-0.3.6.AppImage

2. 從原始碼安裝與啟動 (支援 Windows / Linux / macOS)

如果你想在本地端進行二次開發,或是你是 macOS 的使用者,也可以透過複製專案倉庫並手動配置 Python 與 JS 環境來啟動:

A. 複製專案倉庫

bash
git clone https://github.com/lightningpixel/modly.git
cd modly

B. 安裝前端依賴

bash
npm install

C. 設定 Python 後端環境

bash
cd api
python -m venv .venv

# 啟用 Python 虛擬環境
.venv\Scripts\activate     # Windows
source .venv/bin/activate  # Linux / macOS

# 安裝模型所需的依賴庫
pip install -r requirements.txt

D. 啟動開發伺服器

bash
# 回到專案根目錄後執行
npm run dev

或者是直接雙擊/執行根目錄下的啟動指令檔:

  • Windows:執行 launcher.bat
  • Linux / macOS:執行 ./launcher.sh

強大的擴充模組系統 (Extensions)

Modly 的核心魅力在於其高度靈活的擴充系統。每一個模型擴充都是一個獨立的 GitHub 倉庫,內部包含 manifest.jsongenerator.py,這使得社群能以極快的速度將最新發表的 3D 模型封裝並接入 Modly。

官方推薦支援的模型擴充列表:

擴充模組名稱支援模型GitHub 網址
modly-hunyuan3d-mini-extensionHunyuan3D 2 MiniGitHub 倉庫
modly-hunyuan3d-mini-turbo-extensionHunyuan3D 2 Mini TurboGitHub 倉庫
modly-hunyuan3d-mini-fast-extensionHunyuan3D 2 Mini FastGitHub 倉庫
modly-triposg-extensionTripoSGGitHub 倉庫
modly-trellis2-gguf-extensionTrellis2 GGUFGitHub 倉庫

如何安裝擴充模組(生成前必要步驟)

  1. 在軟體中切換至 extension 頁面,並點擊右上方 Install from GitHub
  2. 輸入你想要安裝的擴充模組 HTTPS URL(例如上方列表的連結)並按下確認。
  3. 模組安裝完成後,點擊下載對應的模型權重或其變體(Variants),完成後即可在主畫面開始調用。

個人心得

在使用 Modly 進行 3D 快速建模的過程中,最大的感受是它在生成速度與工作流程上的極致體驗

我今天的測試平台是 Windows 11,配備 RTX 3070 Ti 顯示卡,實測進行「圖轉 3D(匯出 GLB 格式)」僅需約 20 秒,生成速度令人非常驚艷。且安裝過程極其簡單,並不像很多 AI 開源專案需要大量複雜的手動編譯。

更讚的是,因為它提供了類似節點工具的操作體驗,對於已經習慣 Stable Diffusion 或 ComfyUI 的使用者來說,上手門檻幾乎為零。

小建議:由於當前最新的 3D 生成模型(特別是 Trellis)對顯卡顯存(VRAM)的要求相當高,如果生成時遇到顯存不足(OOM)的情況,建議優先嘗試載入 Mini FastTurbo 版本的擴充模組,或者調低生成設定中的解析度與精度!


相關連結:


本文介紹之軟體專案開源授權為 MIT 授權條款,若分叉(Fork)或二次開發此專案,請務必遵循協議並保留原創作者 Lightning Pixel 的署名。