Gemma 3의 1B, 4B, 12B, 27B 네 가지 모델 크기별 특징 191

Gemma 3 는 1B, 4B, 12B, 27B의 네 가지 파라미터 버전을 오픈소스로 공개했으며, 모두 단일 GPU 또는 TPU에서 실행할 수 있도록 지원합니다. LMArena 아레나에서 Gemma 3는 27B 파라미터 버전으로 1339 ELO라는 높은 점수를 기록하며 o1-preview, o3-mini high, DeepSeek V3를 제치고 DeepSeek R1에 이어 두 번째로 우수한 오픈소스 모델이 되었습니다. 또한 Gemma 3 시리즈의 1B, 4B, 12B, 27B 버전은 각각 2T, 4T, 12T, 14T 토큰 데이터로 학습을 완료했습니다.

다음은 4가지 크기별 모델의 특징입니다:

1. Gemma 3 - 1B

• 파라미터 규모: 10억 파라미터.

• 특징: 경량 모델로, 스마트폰이나 노트북 등 자원이 제한된 기기에서 실행하기 적합하며, 명령어 최적화가 되어 있어 빠른 배포와 저전력 시나리오에 적합합니다.

2. Gemma 3 - 4B

• 파라미터 규모: 40억 파라미터.

• 특징: 멀티모달 작업(텍스트, 이미지)에서 뛰어난 성능을 보이며, 더 높은 정밀도가 필요한 시나리오에 적합하고, 고해상도 이미지 처리와 복잡한 작업의 추론을 지원합니다.

3. Gemma 3 - 12B

• 파라미터 규모: 120억 파라미터.

• 특징: 더 강력한 멀티모달 처리 능력을 갖추고 있어 복잡한 이미지 및 비디오 분석 작업에 적합하며, 명령어 미세 조정(Instruction Fine-Tuning)을 거쳐 높은 정밀도와 복잡한 논리가 필요한 애플리케이션에 적합합니다.

4. Gemma 3 - 27B

• 파라미터 규모: 270억 파라미터.

• 특징: Gemma 3 시리즈 중 가장 큰 모델로, 성능이 가장 뛰어나며 고성능 컴퓨팅 시나리오에 적합하고, 여러 벤치마크 테스트에서 우수한 성능을 보여 Gemini-1.5-Pro의 성능에 근접합니다.

Gemma 3의 네 가지 크기별 모델은 경량에서 고성능에 이르는需求를 포괄하며, 개발자는 구체적인 하드웨어 조건과 작업需求에 따라 적합한 버전을 선택할 수 있습니다.