[AI 프롬프트] 메타코드 강의 6일차_동영상 생성하기

[Deforum]

https://www.youtube.com/shorts/OOkZ7YkXd4w

Deforum을 사용한 예시 -출처 : YouTube

1년 전 정도부터 SNS나 유튜브에서 자신의 캡쳐 사진을 생성형 AI에 넣어서 마치 환상 속의 인물이나 공간으로 점점 변해들어가는 쇼츠들을 많이 접할 수 있게되었다. 이러한 영상을 제작할 수 있는 Deforum에 대해서 다루어 본다.

먼저, 원하는 사진을 하나 생성한다. 원하는 사진을 가지고 와도 무방하다.

설정

Animation mode - 2D, 3D는 카메라의 움직임을 어느 차원에 둘거냐는 의미이다. 3D로 하면 더 역동적으로 가능하다.

Max frames - 프레임의 길이를 말한다.

parameter setting

https://stable-diffusion-art.com/deforum/

How to make a video with Stable Diffusion (Deforum) - Stable Diffusion Art

다양한 카메라의 3D moving을 명시하기 위해서는 어떠한 값이 어떤 효과를 나타내는지를 위의 사이트에서 참고하여 지정할 수 있다.

ex) Translation X -> 0:(0), 30:(15), 210:(15), 300:(0)

      0 Frame에서 시작되어, 30 Frame에서 15의 강도로 오른쪽으로 이동, 210 Frame에서 15의 강도로 오른쪽으로 이동..

 

[Prompt]

GPT의 도움을 받아서 prompt를 작성하자

 

결론적으로는 300장의 사진을 모두 순차적으로 변화시키면서, 마치 영상처럼 보이는 효과를 내주는 작업이다.

따라서, GPU의 성능에 따라서 걸리는 시간이 많이 다르다.

 

[Mov2Mov]

이번엔 '동영상'을 준비해서 원하는 그림체로 재생성하는 방법을 알아보자.

동일하게 Stable Diffusion창에서 [Extenstion]-[available]-'mov2mov'검색 하고 설치하면 된다.

(화소가 높을 수록 굉장히 많은 시간이 걸린다)

작업을 시작하기에 앞서서, 우리가 원하는 그림체를 미리 정하고 해당 모델로 그림을 sample로 변경하면서 parameter들을 조정한다. 완료되면 이 Setting을 그대로 들고오면 된다.

[Setting] - 'info'검색 - [체크]'Create a text file with infotext next to every generated image' 이렇게 설정하면, output 폴더에 txt파일로 우리가 지정했던 parameter의 정보들이 저장되어있다.

결과화면

 

 

 

 

https://mcode.co.kr/

메타코드M