드림부스 (Dreambooth) - 구글의 이미지 파인튜닝이 가능한 모델
텍스트 투 이미지 모델 위에 사용자 데이터를 학습시켜 파인 튜닝(한국어로는 미세조정. 커스터마이징이라고 보면 된다.)이 가능한 생성 AI이다. 구글 리서치에서 2022년 발표했다.
예를 들어 강아지 사진 3~5장 정도를 입력하면 아크로폴리스에 있는 강아지를 생성해줘라고 명령하면 아크로 폴리스에 있는 강아지 사진을 만들어 준다. 이 개가 수영을 하는 사진, 잠을 자고 있는 사진 등 해당 모델을 활용해서 다양하게 만들 수 있다.
기존의 이미지 생성 모델은 생성할 때 마다 다른 이미지가 나와 일관성이 없었다. 드림부스는 학습과 클래스를 활용해서 일관된 이미지 생성과 활용이 가능하게 만들었다.
요즘 내 사진을 여러장 입력하면 아바타나 프로필을 애니메이션 풍으로 생성해 주는 서비스들도 드림 부스를 바탕으로 한 것이다.
이 드림부스 기법을 스테이블 디퓨전과 연결해서 사용할 수 있도록 사람들이 구현을 해서 깃허브에 올려놓은 것이 있다.
예전에 한 번 소개해 드렸던 AUTOMATIC1111의 스테이블 디퓨전과 드림부스를 합쳐서 만들어 놓은 것이다.
colab으로 돌릴 수 있다!
사용법은 조코딩님께서 유튜브에 자세히 올려 놓으셨다.
이 사진은 합성이 아닙니다. Google의 미친 기술 드림부스 개념과 사용 방법
공유하기
조회수 : 7208
