텍스트로 사진을 수정하고 동영상을 만드는 메타의 EMU

EMU는 메타의 이미지 생성 인공지능 기초 모델입니다. 이무라고 발음합니다.

마크 저커버그가 이무를 바탕으로 한 2가지 기능들을 소개하고 이를 페이스북과 인스타그램의 사진과 동영상에 도입할 것이라고 했습니다.

아래 링크는 저커버그가 릴스로 올린 영상입니다.

Announcing two AI research capabilities built on our foundation model for image generation, Emu. Emu Video generates high quality videos from a text prompt and Emu Edit can precisely alter images based on text inputs. We're working on integrating these creative editing capabilities into video and photos for Facebook and Instagram. | Mark Zuckerberg

EMU Edit

Emu Edit는 프롬프트로 이미지를 변경하는 기능입니다. 메타의 객체 인식 기술 등을 활용하여 이미지를 자유롭게 변경할 수 있습니다. 다른 이미지 툴과 다른 점은 정확하게 프롬프트와 관련 있는 객체를 인식해서 해당 픽셀을 바꾼다고 하네요.

음료수에 수영장 배경을 추가하는 장면.

Emu video

텍스트 프롬프트에서 동영상을 생성할 수 있는 기능입니다. 또 텍스트 프롬프트뿐만 아니라 이미지를 인풋으로 받아서 작동할 수 도 있습니다.

이무 비디오로 생성한 동영상 이미지

A robot with a TV screen as a face at the Acropolis in Athens, 4k, high resolution

동영상 샘플 보기 : Emu Video

크리에이터의 도구

콘텐츠 크리에이터들이 사용할 수 있는 강력한 도구가 늘어나는 것 같습니다. 콘텐츠 제작자들이 앞으로 많은 생산성의 향상을 경험할 것 같습니다. 혼자서 영화를 만들거나 웹툰을 만든다거나 하는 일들이 가능해 질 것 같네요. 저는 인공지능의 발달로 오히려 크리에이터들이 뜰 것으로 생각합니다. 앞으로는 생각, 상상력, 인사이트가 중요해 지는 시대가 될 것 같습니다.

참고 : Emu Video and Emu Edit: Our latest generative AI research milestones