[세소식] 2편. 스튜디오 지브리 캐릭터, AI로 실사화 하다! (Feat.GAN)

2022.01.19 11:28 5,024 조회

[세소식] 2편. 스튜디오 지브리 캐릭터, AI로 실사화 하다! (Feat.GAN)

 

세상의 다양한 AI 새 소식, 세소식

출처 – STUDIO GHIBLI 공식 홈페이지


2편. 스튜디오 지브리 캐릭터, AI로 실사화 하다! 입니다.

 

얼마전 뉴스기사로 지브리 캐릭터들을 실사화 했다는 소식을 들었습니다.

실사화 된 얼굴들을 보고 오 너무 참신한데?! 라는 생각에

어떤 기법을 사용 하였는지 궁금하여 찾아보았고

여러분께도 소개드리고 싶어 작성하였습니다 :)


오늘의 소재는 일본의 애니메이션 제작사, 스튜디오 지브리 입니다.

 진행 순서는 다음과 같습니다.


  1. 지브리 소개 및 대표 작품들
  2. 지브리 애니메이션 실사화된 사진들
  3. AI 기술 : 생성적 대립 신경망(Generative Adversarial Network ; GAN)


* 본 포스팅은 데이콘 서포터즈 “데이크루" 1기 활동의 일환입니다.



1.    지브리 소개 및 대표 작품들

 

다들 지브리는 한번쯤 들어보셨을텐데요,

지브리 애니메이션을

한번도 보지 않은 사람은 있어도,

한번 보게 되면 너무 몰캉몰캉 말캉말캉,, 귀여워서

계속 보게되는 그런 애니메이션이죠 !

 

수많은 명작과 수많은 주제가를 남기고

세계적인 명성을 가진 미야자키 하야오 감독님과 함께하는 제작사입니다.

 

지브리 스튜디오는 처음엔 '톱 크래프트 스튜디오’ 이름으로 시작하였습니다.

1985년 6월 15일에 ‘바람계곡의 나우시카’ 를 처음으로 제작하였죠.

바람계곡의 나우시카 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지


이후 ‘천공의 성 라퓨타’ 를 제작할 시기에

회사이름을 지브리로 바꾸었다고 합니다!

천공의 섬 라퓨타 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지


그리고 꾸준히 수많은 명작을 낳았는데요,

 

‘마녀 배달부 키키’

마녀 배달부 키키 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지

 

‘귀를 기울이면’

귀를 기울이면 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지


‘바다가 들린다’

 

바다가 들린다 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지


그리고 우리에겐 너무나도 친숙한 애니메이션

‘이웃집 토토로’,

이웃집 토토로 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지

(또또로 굿즈 갖고싶어요 ,,)

 

‘센과 치히로의 행방불명’

센과 치히로의 행방불명 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지


‘하울의 움직이는 성’

 

하울의 움직이는 성 中 한 장면
출처 – STUDIO GHIBLI 공식 홈페이지



제가 지브리 덕후라 그런지,, 짤을 많이 삽화했네요,, (수집하면서 행복했습니다,,)

그래도 정말 애니메이션들이 하나같이 다 주옥같네요..!

 

여담으로 애니메이션 성우로는

더빙과는 거리가 좀 있는 사람들을 캐스팅한다고 합니다.


미야자키 감독은 이런 말을 하였습니다.

"성우는 목소리가 아니라 그 인물 자체의 존재감이 필요하다"


미야자키 감독은 극 중 뛰어난 연기가 아니라

캐릭터 그 자체를 원하는 것 같습니다.

 


2.   지브리 애니메이션 실사화된 사진들


그럼 실제로 지브리 캐릭터들을 AI를 이용하여 사람처럼 구현하였다는데요,

사진 먼저 보고 가실까요 :)


‘이웃집 토토로' 주인공 사츠키가 실제 사람의 모습으로 구현된 모습
출처 - YouTube 'おすし'


'센과 치히로의 행방불명' 주인공 치히로가 실제 사람의 모습으로 구현된 모습
출처 - YouTube 'おすし'


'하울의 움직이는 성' 하울이 실제 사람의 모습으로 구현된 모습
출처 - YouTube 'おすし'

 

싱크로율이 상당한 것 같습니다 ..

독자님들은 어떤 느낌을 받으시나요? :)

 

 

3. 지브리 AI 기술 : 생성적 대립 신경망(Generative Adversarial Network ; GAN)


그럼 본론으로 들어가서,

어떤 AI 테크를 이용하여 지브리 캐릭터를 실제 사람처럼 구현을 했을까요?


유튜버 오스시(おすし)는 아트브리더(Artbreeder) AI 프로그램을 이용했다고 합니다.

아트브리더는 다양한 데이터를 스스로 학습하는 딥러닝 기술로 얼굴·풍경 등 이미지를 만들어낸다고 합니다.

여기서 사용된 딥러닝 기법은 GAN(Generative Adversarial Network) 기술을 기반으로 합니다.

 

생성적 대립 신경망(Generative Adversarial Network ; GAN) 이란?

생성모델과 판별모델이 경쟁하면서 실제와 가까운 이미지, 동영상, 음성 등을

자동으로 만들어 내는 딥러닝 기법 중 하나입니다.

 

처음 들어보시는 분은 많이 생소하시죠?

그래서 제가 준비해 보았습니다.


1. 이론

'[딥러닝] 생성적대립신경망(Generative Adversarial Network;GAN)'


2. 실습

'[GAN] 딥러닝 생성적 대립 신경망 GAN 기초 실습 입문하기'


GAN에 대하여 보다 자세한 설명을 기술하였습니다.

위의 링크를 클릭하여 참고해주시길 바랍니다 !

(열심히 작성 하였으니 한번씩 보고 가세요,,! (성냥팔이 소년 재질,,))

 


 이로써 지브리,

지브리 애니메이션에 실사화된 사진들,

실사화에 사용 된 AI 프로그램

딥러닝 GAN 기법을 알아보았습니다.

 

딥러닝을 이용한 AI 기술이 더욱 보편화 되고 있다는 것을 새삼 느끼게 되는 것 같습니다.


이상 세상의 다양한 AI 새 소식, 세소식 이었습니다.

끝까지 읽어봐주셔서 감사합니다.



 


출처 :

https://namu.wiki/w/스튜디오 지브리
https://terms.naver.com/entry.naver?docId=5911924&cid=42346&categoryId=42346
https://www.sedaily.com/NewsVIew/260SBTBI4E
https://m.blog.naver.com/horajjan/221426061372

 


로그인이 필요합니다
0 / 1000
백남진
2022.01.19 12:45

정말 볼 때마다 신기한 것을 느낍니다. 이것이 GAN을 활용한 것이군요! 감사합니다!

월드파파
2022.01.20 09:06

재밌게 읽어봐주셔서 감사합니다 :)

jihyeheo
2022.01.19 16:42

오 예전에 지브리 캐릭터를 이용한 사람 얼굴 캐릭터화 라는 주제로 GAN 모형을 학습한 경험이 떠오르네요. 영화에서 직접 라벨을 가져와 했지만 데이터도 작고 학습 시간도 작아서 실패했던 프로젝트가 있었습니다. 그때는 단순히 그림체만 가져오자는 프로젝트 취지였는데 벌써 이만큼 발전을 했네요! 좋은 포스팅 감사합니다 :)

월드파파
2022.01.20 09:07

오 직접 모형을 학습해보셨군요 ! 점점 기술이 발달하면서 상용화가 되어가고 있는 것 같습니다 :)

도비콘
2022.01.19 23:05

개인적으로는 샤츠키가 마음에 드네요.^^

월드파파
2022.01.20 09:08

구현을 잘 해놓은 것 같습니다 *^^*

_pxmgu
2022.01.25 17:15

흥미로운 세소식 감사합니다 *^^*

이전 글
팀 탈퇴
대회 -
좋아요 5
조회 1,084
댓글 0
3년 전
현재 글
[세소식] 2편. 스튜디오 지브리 캐릭터, AI로 실사화 하다! (Feat.GAN)
대회 -
좋아요 12
조회 5,024
댓글 7
3년 전
다음 글
[Python] Dataframe이 클래스라고? (2)
대회 -
좋아요 9
조회 1,649
댓글 0
3년 전