마이크로소프트 자비스 - 여러 인공지능 모델을 연결해서 문제를 해결하는 인공지능

Microsoft Jarvis

인공지능 과제를 수행하기 위해서 여러 허깅 페이스 모델을 연결해서 사용할 수 있게 모델을 만든 것을 HuggingGPT라고 한다. 마이크로소프트에서 페이퍼로 공개했다. 이를 코드로 구현해 놓은 것이 마이크로소프트 자비스이다.

현재 github 저장소에 공개되었다. 하지만 프로젝트는 작업 중이라 완료되면 코드를 모두 올리겠다고 한다.

GitHub - microsoft/JARVIS: JARVIS, a system to connect LLMs with ML community

마이크로소프트 허깅GPT 페이퍼 중

예를 들어 사용자가 다음과 같이 질문을 한다.

책을 읽고 있는 여자의 이미지를 만들어줘. 포즈는 이 이미지에 있는 남자의 포즈와 동일하게 해줘. 그리고 새로운 이미지에 대한 설명을 목소리로 읽어줘.

그러면 huggingGPT를 활용한 자비스가 일을 계획하고, 모델을 선택하고, 과제를 실행하고, 결과를 보여준다.

파이썬 프로젝트이며 웹 인터페이스를 통해 활용할 수 있다.

이 이미지에 얼룩말이 몇 마리나 있어?

사진에는 총 4마리의 얼룩말이 있습니다.