Waifuxl 1.5已发布!
接下来,我们将处理桌面GPU/CPU加速度,以便用户可以更快地更大的图像(甚至视频,都取决于我们可以从模型中获得的性能)。我们正在考虑加速的某些事情是Pytorch 2.0模型编译,ONNX和AITEMPLATE。如果有的话,我们将在网站上发布公告。
在这里查看完整的文章!
WAIFUXL是最先进的超级分辨率模型,该模型在Danbooru2021数据集中受到〜1,200,000个动漫样式图像的训练。您可以在https://waifuxl.com/上在线找到它。请注意,虽然您可以提高天然(真实)图像,但该模型仅在动漫风格的图纸上进行了训练,因此不要期望将袜子吹掉。
通常,Real-Esrgan将胜过Waifu2x上使用的模型,而无需在各种降低降低水平上训练多种模型。
使用ONNX运行时,我们将ML模型的权重直接流到您的设备上,以在WebAssembly中本地执行。这样做可以使我们只能通过静态网页提供此服务,而无需使用模型执行。这具有启用图像隐私的额外好处 - 您的图像不是,也永远不会发送给我们。
对于我们的超级分辨率网络,我们使用的是最新的房地产网络,对于我们的图像标记网络,我们使用的是MobilenetV3。两者都接受了Danbooru2021的子集的培训。
ONNX运行时是多线程,并支持SIMD说明 - 虽然在手机上进行升级或笔记本电脑的升级非常快,但使用更巧妙的计算机会带来明显的好处。我们托管在CloudFlare页面上,该页面提供无限的带宽。该网站用Next.js和tailwindcss编写。
如果您想在本地运行,这应该使您入门:
git clone https://github.com/TheFutureGadgetsLab/WaifuXL
cd WaifuXL
git checkout de_spaghetti
npm i
npm run dev一些笔记:
de_spaghetti分支机构进行了一段时间,因此在上面的结帐中进行了一段时间。--enable-features=SharedArrayBuffer无论是代码清理,新功能还是错误文件,我们绝对不接受代码贡献。只需开设讨论,以便我们所有人都可以合作并讨论您的想法的优点!
我们有很多想添加到waifuxl的东西,如果您有一个建议,请开始讨论,我们可以开始交谈!这是我们想到的几件事:
我们愿意捐款,只需访问https://waifuxl.com/donate,然后查看您的捐款方式。我们想清楚地表明,我们免费为您提供这项服务,因为这对我们来说是免费的。我们没有后端,CloudFlare页面免费提供无限的带宽。即使您经常使用此服务,也请不要义务捐款。
除捐款外,我们愿意计算捐款(GPU)。我们想培训一个更好的标记器,并继续更新超级分辨率模型,因为发布了新的SOTA模型。我们还想训练自然图像(真实图像)的模型,这样我们就可以比图纸更高档,甚至是样式的转移模型。所有这些都需要我们根本没有的大量计算。如果您有能力并且感觉很慷慨,请给我们留言。