본문 바로가기

카테고리 없음

AI(스테이블 디퓨전(Comfyui))를 활용한 이미지 및 영상 생성

반응형

스테이블 디퓨저를 통해 이미지를 생성하고, 생성된 이미지로 비디오를 만들어 보기 위해 아래와 같은 순서로 AI를 사용하였다.

 

사진생성을 위한 프롬프트 생성 → 이미지 생성  → 비디오 생성

 

1. 제미나이로 사진 프롬프트 생성 : 미래 도시와 사람들 모습

2. 스테이블 디퓨저(comfyui) 로 이미지생성

3. 스테이블 디퓨저로 비디오 생성

 

아래는 작업을 한 순서이다.

 

1. 제미나이를 통해 사진 묘사에 대한 문장을 요청

 -> 2500년대 도시와 사람들의 모습

제미나이가 묘사해준 2500년대 도시의 모습

 

2. ComfyUI를 통한 이미지 생성

 

3. 비디오 생성을 위한 워크플로우

 

 

4. 세부설정 변경

. 이전에 비디오 생성시 해상도가 1024X512 가 되자 램 과부하로 이미지 생성이 되지 않음

5. 결과

 

6. 재생성

-> 이미지와 비디오가 상이하여 디노이즈 0.3 -> 1.0으로 변경

 

 

디노이즈 변경 후 결과

기타

 

결과

디노이즈를 1로 하였음에도 위와 다른 결과가 얻어진다. 

배경과 피사체의 상태에 따라 다른값을 조절해야 원하는 결과를 얻을수 있음을 알았다.

스테이블 디퓨저의 각 속성에 대해 공부해 봐야겠다.

반응형