WaifuXL

waifuxl

注意

Waifuxl 1.5已發布！
接下來，我們將處理桌面GPU/CPU加速度，以便用戶可以更快地更大的圖像（甚至視頻，都取決於我們可以從模型中獲得的性能）。我們正在考慮加速的某些事情是Pytorch 2.0模型編譯，ONNX和AITEMPLATE。如果有的話，我們將在網站上發佈公告。

---

在這裡查看完整的文章！
WAIFUXL是最先進的超級分辨率模型，該模型在Danbooru2021數據集中受到〜1,200,000個動漫樣式圖像的訓練。您可以在https://waifuxl.com/上在線找到它。請注意，雖然您可以提高天然（真實）圖像，但該模型僅在動漫風格的圖紙上進行了訓練，因此不要期望將襪子吹掉。

與Waifu2x進行比較

通常，Real-Esrgan將勝過Waifu2x上使用的模型，而無需在各種降低降低水平上訓練多種模型。

它如何工作

使用ONNX運行時，我們將ML模型的權重直接流到您的設備上，以在WebAssembly中本地執行。這樣做可以使我們只能通過靜態網頁提供此服務，而無需使用模型執行。這具有啟用圖像隱私的額外好處 - 您的圖像不是，也永遠不會發送給我們。

型號

對於我們的超級分辨率網絡，我們使用的是最新的房地產網絡，對於我們的圖像標記網絡，我們使用的是MobilenetV3。兩者都接受了Danbooru2021的子集的培訓。

地點

ONNX運行時是多線程，並支持SIMD說明 - 雖然在手機上進行升級或筆記本電腦的升級非常快，但使用更巧妙的計算機會帶來明顯的好處。我們託管在CloudFlare頁面上，該頁面提供無限的帶寬。該網站用Next.js和tailwindcss編寫。

本地運行

如果您想在本地運行，這應該使您入門：

git clone https://github.com/TheFutureGadgetsLab/WaifuXL
cd WaifuXL
git checkout de_spaghetti
npm i
npm run dev

一些筆記：

• 主要分支由於某種原因不再工作。我們已經在de_spaghetti分支機構進行了一段時間，因此在上面的結帳中進行了一段時間。
• 由於幽靈，多線程很難在本地進行。您可以通過確保關閉Google Chrome，然後從命令行啟動以下參數來使多線程工作： --enable-features=SharedArrayBuffer
• 在網站重寫之後，我們將使用Pytorch，ONNX運行時或AITEMPLATE制定GPU加速版Waifuxl。完成此操作後，需要在您自己的計算機上本地運行，但是性能提升應該很大。

貢獻指南

代碼 /網站

無論是代碼清理，新功能還是錯誤文件，我們絕對不接受代碼貢獻。只需開設討論，以便我們所有人都可以合作並討論您的想法的優點！

想法

我們有很多想添加到waifuxl的東西，如果您有一個建議，請開始討論，我們可以開始交談！這是我們想到的幾件事：

• 樣式轉移，因此您可以將動漫樣式應用於真實圖像。
• 復活節彩蛋。我們有一個可以匹配數千個標籤的標籤機，如果您高檔頂級waifu（即卡車kun），也許我們可以產生諸如酷煙花效果之類的東西。

捐贈

我們願意捐款，只需訪問https://waifuxl.com/donate，然後查看您的捐款方式。我們想清楚地表明，我們免費為您提供這項服務，因為這對我們來說是免費的。我們沒有後端，CloudFlare頁面免費提供無限的帶寬。即使您經常使用此服務，也請不要義務捐款。

除捐款外，我們願意計算捐款（GPU）。我們想培訓一個更好的標記器，並繼續更新超級分辨率模型，因為發布了新的SOTA模型。我們還想訓練自然圖像（真實圖像）的模型，這樣我們就可以比圖紙更高檔，甚至是樣式的轉移模型。所有這些都需要我們根本沒有的大量計算。如果您有能力並且感覺很慷慨，請給我們留言。