구글, AI 안전성과 성능의 돌파구인 제마(Gemma) 출시

구글은 인공지능(AI) 시스템의 안전성과 성능을 모두 발전시키기 위해 설계된 오픈 모델인 제마(Gemma)를 공개했습니다. 강력한 제미니(Gemini) 모델을 powering하는 동일한 연구와 기술에서 파생된 제마는 언어 이해, 추론 및 안전성에 대한 다양한 벤치마크에서 중요한 도약을 나타냅니다.

AI 안전성과 성능 발전

구글 딥마인드 제마 팀이 개발한 제마는 트랜스포머 디코더의 기반을 바탕으로 하며, 멀티 쿼리 어텐션, RoPE 임베딩, GeGLU 활성화, RMSNorm과 같은 여러 개선을 통합합니다. 이러한 개선은 대화, 추론, 수학 및 코드 생성을 포함한 다양한 도메인에서 뛰어난 성능을 달성하는 데 중요합니다.

제마는 효율적인 배포와 개발을 위한 유연성을 제공하며 두 가지 변형으로 제공됩니다. 70억 파라미터 모델은 GPU 및 TPU 플랫폼에 최적화되어 있는 반면, 20억 파라미터 모델은 CPU 및 온디바이스 애플리케이션에 맞춰져 있습니다. 두 모델 모두 저명 제미니 모델 패밀리와 유사한 아키텍처와 훈련 방법론을 사용하여 광범위한 데이터셋으로 신중하게 훈련되었습니다.

책임감 있는 AI 개발 보장

성능 향상 외에도, Gemma 팀은 더 안전한 AI 애플리케이션을 구축하기 위한 가이드라인과 필수 도구를 제공하는 '책임감 있는 생성형 AI 툴킷(Responsible Generative AI Toolkit)'을 소개합니다. 훈련 세트에서 민감한 정보를 자동으로 필터링하고, 감독 기반 미세 조정(Supervised Fine-tuning), 인간 피드백 기반 강화 학습(Reinforcement Learning from Human Feedback) 등의 기법을 활용하여 Gemma 모델의 효과성과 안전성을 높였습니다.

Gemma가 AI 개발 생태계에 출시됨에 따라, 특히 과학, 교육, 예술 등의 분야에서 수많은 유익한 애플리케이션의 창출을 촉진할 것으로 예상됩니다. 또한, Gemma의 책임감 있는 배포는 최전선 모델의 안전성을 강화하여 차세대 LLM 혁신을 장려할 전망입니다.

Gemma를 통해 Google은 대규모 언어 모델(Large Language Models)의 안전한 배포에 대한 우려를 해소하고 AI 성능의 한계를 넓히려 합니다. 최첨단 모델에 대한 오픈 액세스를 제공하고 책임감 있는 AI 개발 관행을 장려함으로써, Google은 AI 연구 및 애플리케이션 분야의 진전을 가속화하고자 합니다.

Gemma는 AI 안전성과 성능을 발전시키는 데 있어 중요한 이정표를 의미합니다. 혁신적인 아키텍처, 맞춤형 모델, 그리고 책임감 있는 AI 개발에 대한 강조를 통해 Gemma는 다양한 분야에서 상당한 기여를 할 것으로 기대됩니다. AI 환경이 계속 진화함에 따라, Gemma는 Google이 AI의 한계를 넓히면서도 그 책임감 있고 윤리적인 사용을 보장하려는 의지를 보여주는 증거로 자리 잡았습니다.