动漫视频模型比较
更新
- 2022/04/24: 发布 AnimeVideo-v3. 主要做了以下更新：
- 更自然
- 更少瑕疵
- 颜色保持得更好
- 更好的纹理恢复
- 虚化背景处理
比较
我们将 RealESRGAN-AnimeVideo-v3 与以下方法进行了比较。我们的 RealESRGAN-AnimeVideo-v3 可以以更快的推理速度获得更好的结果。
- waifu2x. 超参数:
tile=0,noiselevel=2 - Real-CUGAN: 我们使用了20220227版本, 超参:
cache_mode=0,tile=0,alpha=1. - 我们的 RealESRGAN-AnimeVideo-v3
结果
您可能需要放大以比较详细信息, 或者单击图像以查看完整尺寸。 请注意下面表格的图片是从原图里裁剪patch并且resize后的结果，您可以从 Google Drive 里下载原始的输入和输出。
更自然的结果，更好的虚化背景恢复
| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 |
|---|---|---|---|
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
更少瑕疵，更好的细节纹理
| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 |
|---|---|---|---|
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
其他更好的结果
| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 |
|---|---|---|---|
 |
 |
 |
 |
 |
 |
 |
 |
  |
  |
  |
  |
 |
 |
 |
 |
 |
 |
 |
 |
推理速度比较
PyTorch
请注意，我们只报告了模型推理的时间, 而忽略了读写硬盘的时间.
| GPU | 输入尺寸 | waifu2x | Real-CUGAN | RealESRGAN-AnimeVideo-v3 |
|---|---|---|---|---|
| V100 | 1921 x 1080 | - | 3.4 fps | 10.0 fps |
| V100 | 1280 x 720 | - | 7.2 fps | 22.6 fps |
| V100 | 640 x 480 | - | 24.4 fps | 65.9 fps |
ncnn
- TODO