请问模型名必须指定为RealSR和ESRGAN，是只支持这两种架构的模型吗？

[Zhubisong]

如题。我在导入新模型的时候遇到了一些问题。例如：

1. 您huggingface上提供的model-1x-MangaJPEGHQ读取不了，必须要更改名为model-Real-**，但是这样做得到的输出图片一片黑
2. 从openmodeldb里的https://github.com/Phhofm/models/releases/tag/1xDeJPG_realplksr_otf中下载的onnx转换成ncnn，模型文件夹命名为model-Real-**，运行时会遇到layer Shape not exists or registered问题

[tumuyan]

检查了下,这个模型是我误上传的.

1. 文件夹必须要更改名是为了对目录做一下检查,避免加载错东西.实际上支持的架构不止是esrgan.但是说支持哪些架构呢?这是由ncnn支持的算子决定的,我无法一一确认和回答,但是大致方向上是使用扩散、注意力、transformer的大概率是无法使用的.
2. 另外其实我现在其实更推崇使用mnn进行推理,速度和支持的架构上讲都是更优的
3. 结果为黑是因为这是一个单通道模型,而不是常规的rgb三通道模型.目前 realsr-ncnn只支持三通道模型,mnn支持单通道模型.
4. 如何让realsr-ncnn支持这个模型呢?在pth转换为onnx的过程中,修改输入层和输出层的shape,增加有三通道到单通道的转换就可以了

[Zhubisong]

大佬，有探索过UGC视频增强的相关技术吗？或者有这方面的计划吗？

[tumuyan]

转换了一下mnn模型，测试是能正常使用的

原模型：
https://objectstorage.us-phoenix-1.oraclecloud.com/n/ax6ygfvpvzka/b/open-modeldb-files/o/1x-MangaJPEGHQ.pth
https://github.com/Phhofm/models/releases/download/1xDeJPG_realplksr_otf/1xDeJPG_realplksr_otf_60_fp32_opset17.onnx
mnn：
https://www.123684.com/s/rgJUVv-7N2J3?提取码:sXde

你说的ugc视频增强我不清楚具体情况，但是说视频需要的运算量还是太大了，我认为手机不适合去处理这样的本地任务（手机厂商号称的系统内置视频增强我的实际体验也是几近于无）。