생존신고 겸 옆집에 애니용 업스케일러 새로 나온거 있길래 테스트 해봐서 글 씁니다.

미다레우치 보고 업스케일 툴 좀 다시 만져볼까 했는데 음...

결론부터 말하면 현대 애니에는 esrgan 만한게 아직 없는것 같습니다.

원본 (동영상 캡처본)

2x_APISR_RRDB_GAN 모델

4x_APISR_GRL_GAN 모델

기존 realesr-animevideov3-x4 모델

원본 (동영상 캡처본)

2x_APISR_RRDB_GAN 모델

4x_APISR_GRL_GAN 모델

기존 realesr-animevideov3-x4 모델

원본파일(2배,2배 믹스 결과물까지)

디테일 관심 있으신분은 원본파일 받으셔서 보시는걸 추천드리고
현재 사용중인 realesr모델 대비 요약하면

2x_APISR_RRDB_GAN : 선을 살리다못해 새로 그려줌 그래서 결과는 선명하나 블러 처리된 원본 마저도 디모자이크 수준으로 살리는 수준, 전체적으로 굵기가 너무 굵고 색 대비 차가 큼
4x_APISR_GRL_GAN : 똑같이 선을 살려주나 2x대비 외곽선이 얇고 색 대비는 양호한편, 다만 원경샷에서 픽셀 정보가 부족한 곳은 (눈,코,입등) 2x대비 못살리는 모습


comfyUI로 작업하는 관계로 사용은 아주 간편하고 직접 트레이닝을 해서 나온 데이터에 따라서 결과물이 바뀔 수 도 있는 가능성은 존재하며
우선 배포자가 뿌린 데이터로 우선 작업을 하니 설명 페이지에 자랑 하는것 답게 아주 저화질 영상들에서 선을 그냥 살리다 못해
새로 그려버리는 수준이라서 고전 애니에선 esrgan보다 더 나은 모습을 보여주는 것 같습니다.

다만 현재 바니워커처럼 선을 얇게 쓰고 이펙트가 많은 작화에선 선을 너무 두껍고 색 대비를 강조해서 만드는 경향이 있어서 안어울리고 퀸비 같은 그림체에나 4x 모델은 써볼만 할것 같네요.

두 모델 다 초기라 그런지 esrgan animevid v2 때랑 똑같이 전체적으로 색조가 누렇게 변하는 현상도 있습니다.

첨부파일엔 x2하고 esrgan, esr하고 x2 해서 섞어서 해본 버전도 있는데
결과적으론 디테일과 선을 깔끔하게 살리는건 확실히 뛰어나나 색감문제 및 원본영상의 의도된 이펙트마저도 씹어먹어버리는 범위가 너무 커서 아직 메인으로 쓰지는 못 할것 같구요.

오늘이 평일이다 보니 저도 잠깐 만져본게 다 라서 시간 날때 한번 만져보고 영상 통으로 한번 돌려봐야겠네요.