잡담 [삐빅] '혼모노'의 논문입니다.

Moderator 베일쿤
2019-04-22 16:46:32 560 11 2

이 게시물은 https://www.facebook.com/113537842660287/posts/307981466549256?sfns=mo 의 내용을 가져와

일부 내용만 추가하였습니다.


GAN (Generative Adversarial Network) 이 발표된 이후, 얼굴 이미지의 자동 생성은 연구가 활발한 분야입니다.

기존에 GAN을 이용하여 애니메이션 캐릭터 얼굴을 형성하는 시도는 많았으나 대부분 성과가 없었습니다.


헌데 이 혼모노의 논문은...

애니메이션 얼굴 영상 데이터셋에 특화된 GAN (Generative Adversarial Network) 모델을 훈련하여 안정적인 성과를 냈습니다.


아무튼 이 내용은

"기존에 있던 애니메이션 케릭터 이미지를 활용해서 새로운 '나만의 (후욱후욱)' 캐릭터를 만드는 인공지능을 개발했다!"

이겁니다.

(ㄱㄹㅅ ㄱㄱ ㅁㄷ ㅆㄷㅇ)


(참고 그림 - 1) 생성된 캐릭터 이미지

0cb3d37fb6fed0919f2528a58d421f26.jpg



(참고 그림 - 2) 논문 첫 줄 부터 혼모노의 대환장 파티...

44a7d3f2b6d998f3b88bb6a8b477c4c9.png


We all love anime characters and are tempted to create our custom ones.

우리 모두는 애니 캐릭터를 사랑하고, 각자 자신만의 커스텀 캐릭터를 생성하길 원한다.....

(그게 뭔데 씹덕아..)



(참고 그림 - 3) 이미지를 추출하는 방식6f2f07c393b0da4ed919a958bd82fbfe.png



(참고 그림 - 4) 간단한 Visualization 결과

276e51b36c32b9dd2c31935387f77a6b.jpg


(참고 그림 - 5) 연도별 캐릭터를 통한 직관

65ab7542eb7c3287f14542f6650225b1.jpg



(참고 그림 - 6) 사이트 주소는... 절레절레...fed8fce3c14d230c7e8b9a113797238c.png


(참고 그림 - 7) 특정 특성에 따른 생성 이미지

eedc10db0998a21d08bc4ff28f42e0ee.jpg



(참고 그림 - 8) 이미지를 조금 더 수정해서 더 나은 퀄리티로 만든 결과물

1f0a10234c91ef66d70cacd7dc6db059.jpg



진정한 덕업일치의 현장을 보는 듯 합니다..

혼란스럽네요... FailFish 


이 논문에서는 총 3가지의 성과를 이야기하고 있습니다.

  1. Clean dataset from Getchu
  2. Suitable GAN model based on DRAGAN
  3. tag가 없는 이미지로 GAN 훈련을 하는 접근법


이 중 첫번째를 통해 우리는 다음과 같은 점을 다시 한 번 확인할 수 있습니다.

Trash in, Trash out : 안좋은 데이터는 안좋은 결과를 만듭니다. 여기서는 좋은 데이터 수집이 얼마나 중요한지를 알 수 있습니다.


2번 3번도 대단한 결과라고 생각합니다. 특정한 도메인에 맞는 GAN을 설계하는 하나의 케이스라고 생각합니다.

여기서 얻은 직관으로 후에 다른 도메인에서도 여러 GAN을 설계할 수 있지 않을까요?


더 자세한 설명은 아래 블로그 참고 해주세요.

https://subinium.github.io/LR002/


관련 발표 영상이 있어 링크로 남깁니다.

https://www.youtube.com/watch?v=UDT_2lHv8o8

댓글 2개  
이전 댓글 더 보기
▼아랫글 4월 16일 논문 리뷰 방송 베일쿤
광고
공지잡담최신뉴스자료공유연구/플젝Q&A
1
잡담
여기 죽었나요? [2]
노른자랑흰자
11-12
7
잡담
딥게더 죽지 않았다면 정답을 알려줘 [1]
공포게임초고수서나랑
10-29
1
잡담
질문하나 드립니다 [2]
유럽에서150날린원주은
09-25
13
08-22
1
잡담
캐글하는 트수들 있나요? [2]
이탈예측생존분석
06-02
3
05-21
3
잡담
Papers with Code [1]
참신한기획
04-29
»
04-22
8
자료공유
4월 16일 논문 리뷰 방송 [1]
Moderator 베일쿤
04-15
4
04-10
3
최신뉴스
Ian Goodfellow 애플로 이직 [2]
Global Moderator gamingryan235
04-05
7
04-05
4
잡담
수요일까지... [2]
Moderator 베일쿤
04-01
인기글 글 쓰기