Gemini 1.5 Pro experimental 버전 lmsys 챗봇 리더보드 1위 등극
Gemini 1.5 Pro 실험 버전
https://chat.lmsys.org/?leaderboard
현재 1위이다. 모델 명칭은 Gemini-1.5-Pro-Exp-0801 이다.
아직 벤치마크 점수가 알려지지는 않았는데 사용해볼 수 는 있다.
Today, we are making an experimental version (0801) of Gemini 1.5 Pro available for early testing and feedback in Google AI Studio and the Gemini API. Try it out and let us know what you think!
오늘 우리는 Google AI Studio 및 Gemini API에서 초기 테스트 및 피드백을 제공할 수 있는 Gemini 1.5 Pro의 실험용 버전(0801)을 만들고 있습니다. 사용해 보시고 여러분의 생각을 알려주세요!
ai studio 에서 사용할 수 있다. 도대체 뭘 한걸까...?
Google AI Studio | Gemini API | Google AI for Developers
홍길동에 대해 거의 완벽하게 대답한다.
홍길동에 대해 알려줘
홍길동은 한국 고전 소설 홍길동전의 주인공입니다. 허균이 지은 이 소설에서 홍길동은 조선 시대 양반과 첩 사이에서 태어난 서자로, 뛰어난 능력을 지녔음에도 불구하고 서자라는 신분적 제약 때문에 차별과 억압을 받습니다.
홍길동의 주요 특징:
출생의 비극: 양반 아버지와 첩 어머니 사이에서 태어난 서자로, 적자 형에게조차 "아버지"라 부르지 못하는 등 차별을 받습니다.
뛰어난 능력: 무술, 도술, 지략 등 모든 면에서 뛰어난 재능을 가졌습니다.
사회 정의 실현: 탐관오리들을 혼내주고 백성들을 돕는 의적 활동을 합니다.
율도국의 건설: 조선 사회의 모순에 환멸을 느끼고 율도국이라는 이상적인 나라를 세워 백성들을 다스립니다.
홍길동전의 의미:
신분제 비판: 조선 시대 엄격한 신분제의 모순과 부조리를 비판하고 있습니다.
사회 개혁 의지: 백성을 억압하는 탐관오리들을 응징하고 이상적인 사회를 꿈꾸는 개혁 의지를 담고 있습니다.
최초의 한글 소설: 한글로 쓰여진 최초의 소설로, 한글의 대중화에 기여했습니다.
홍길동은 단순한 소설 속 인물을 넘어, 사회적 불평등과 억압에 맞서 싸우는 영웅, 이상적인 사회를 꿈꾸는 개혁가의 상징으로 여겨지고 있습니다. 그의 이야기는 오늘날에도 많은 사람들에게 용기와 희망을 주고 있습니다.
더 궁금한 점이 있다면 구체적으로 질문해주세요. 예를 들어,
홍길동의 도술에 대해 더 자세히 알고 싶어요.
홍길동전의 작가 허균에 대해 알려주세요.
율도국은 어떤 나라였나요?
등과 같이 질문해주시면 더 자세한 정보를 드릴 수 있습니다.
역시 200백만 토큰 제한을 계승했다.
gpt-4o도 사용자 만족도에서 뛰어넘은 것을 볼 수 있다. 이게 사실이라면 꽤 큰 영향을 끼칠 것 같다.
그런데 놀라운건 gpt-4o mini가 gpt-4o와 함께 공동 2위네? 3.5 에서 필히 바꿔야 할 것 같다. 그런데 바꿔보니 gpt-3.5 보다 성능이 안좋은 부분도 있다. 자꾸 영어로 이야기 한다거나 미세하게 결과가 틀리게 나오는 경우가 있다. 3.5에서 프롬프트를 바꾼 후 이에 맞게 프롬프트를 수정해줘야 한다.
물론 비용면에서는 mini 에는 안될거 같지만 Gemini 1.5 플래시가 8월 12일부터 GPT-4o-mini 수준으로 가격이 떨어진다고 한다. Lower costs and 100+ new languages coming to Gemini 1.5 | Google Cloud Blog
