코리안투데이(The Korean Today)

메타, 소형 버전 'Llama 3' 공개 일론 머스크 긍정적 반응

김서인 | 기사입력 2024/04/26 [06:05]

메타, 소형 버전 'Llama 3' 공개 일론 머스크 긍정적 반응

김서인 | 입력 : 2024/04/26 [06:05]

메타가 최신 오픈 소스 대형언어모델 '라마 3'의 새로운 소형 버전을 선보이면서 AI 분야에 새로운 이정표를 설정했습니다. 이 두 버전은 각각 80억 개와 700억 개의 매개변수를 갖추고 있으며, 훨씬 큰 4000억 개 매개변수 모델의 개발도 진행 중이라고 합니다. 이러한 발표는 AI의 사전 훈련과 미세조정 과정에서의 혁신을 통해 이루어졌습니다.

 

메타의 새로운 모델들은 데이터셋의 양을 증가시키고, 고품질 데이터만을 선별하는 필터링 과정을 통해 성능을 대폭 향상시켰습니다. 라마 3는 이전 버전보다 7배 이상 많은 15조 개의 토큰으로 학습되었으며, 코드량은 4배 증가했습니다. 이 과정에서 다양한 분야의 데이터셋을 활용하여 미세조정을 강화했습니다.

 

특히, 이번에 공개된 라마 3는 다양한 벤치마크 테스트에서 경쟁 모델들을 능가하는 성능을 보여줬습니다. 객관식 문제 해결 능력은 물론, 코딩과 창의적 글쓰기 등 복잡한 문제 해결에 있어 인간 평가에서 높은 점수를 받았습니다. 머스크 CEO는 이러한 성과에 대해 "나쁘지 않다"라고 평가하며 오픈 소스 기술의 중요성을 강조했습니다.

 

메타는 또한, SNS 플랫폼에 통합된 멀티모달 챗봇 '메타 AI'를 통해 사용자들이 보다 쉽게 정보를 검색하고 질문에 답할 수 있게 할 계획입니다. 이 챗봇은 이미지 생성과 애니메이션 제작 능력도 갖추고 있어, 사용자 경험을 한층 풍부하게 할 것입니다.

 

이와 같은 혁신적인 발전은 메타가 AI 기술의 선두주자로서의 위치를 더욱 공고히 하며, 미래의 AI 어시스턴트 기술에 대한 기대를 증폭시키고 있습니다.

  • 도배방지 이미지

  • 메타, 소형 버전 'Llama 3' 공개 일론 머스크 긍정적 반응