최신 뉴스
당신을 위한 선택

아랍어 AI 돌파구가 포용적 언어 모델의 길을 열다

작성자존 팰머존 팰머 3분 읽기
아랍어
  • 강력한 아랍어 AI인 Jais는 언어 모델의 격차를 해소하며 소외된 언어를 위한 선례를 마련했습니다.
  • 중동 지역에서 AI가 가져올 수 있는 3,200억 달러의 잠재적 영향력은 지역 기반 AI 개발의 중요성을 강조합니다.
  • 언어 모델의 포용성은 AI의 글로벌 혜택에 필수적이며, Jais는 아랍어 능력 면에서 선도적인 역할을 하고 있습니다.

Chat-GPT와 같은 대규모 언어 모델 AI 플랫폼의 등장은 AI 기반 상호작용의 새로운 시대를 열었습니다. 중동 지역에서 AI 기술에 대한 관심과 개발이 급증했지만, 아랍어 모델은 종종 뒤처져 왔습니다. 그러나 아부다비의 Mohamed bin Zayed University of Artificial Intelligence(MBZUAI), 실리콘 밸리의 Cerebras Systems, 그리고 UAE 기반 AI 회사 G42 간의 협력은 아랍어 화자를 위해 맞춤화된 획기적인 AI 도구인 'Jais'를 선보였습니다. 이 발전은 아랍어 화자의 필요를 충족시킬 뿐만 아니라 AI 환경 내에서 다른 소외된 언어들의 대규모 언어 모델 발전을 촉진할 잠재력을 가지고 있습니다.

아랍어 모델의 과제

ChatGPT와 Meta의 LLaMA와 같은 기존 언어 모델에는 일부 아랍어 기능이 있지만, 이들은 주로 인터넷의 영어 데이터로 훈련되었습니다. MBZUAI의 임시 총장이자 자연어 처리 교수인 Timothy Baldwin에 따르면, Jais는 다른 접근 방식을 취했습니다. Jais는 영어와 아랍어 데이터셋의 조합을 사용했으며, 중동 지역의 콘텐츠에 중점을 두었습니다. 이러한 독특한 훈련 접근 방식은 Jais가 아랍어에서 동급 모델들과 구별되는 이해도와 숙달 수준을 달성할 수 있게 했습니다.

라틴 문자 언어의 지배

인터넷에서 영어를 선두로 하는 라틴 문자를 사용하는 언어의 지배는 이러한 언어를 위한 더 큰 데이터셋의 생성으로 이어졌습니다. 중동 연구소의 전략 기술 및 사이버 보안 프로그램 책임자 Mohammed Soliman은 특정 언어에 대한 AI 도구로의 독점적 접근이 사회의 다양한 섹션에 불리하게 작용할 수 있다고 강조합니다. 주로 영어로 훈련된 언어 모델은 종종 문화적 인식과 다양한 배경에 대한 이해가 부족하여 사용자 경험에 부정적인 영향을 미칠 수 있습니다.

아랍어의 문화적 뉘앙스와 방언

아랍어는 전 세계적으로 여섯 번째로 많이 사용되는 언어로, 풍부한 방언의 다양성으로 인해 독특한 도전을 제시합니다. 현대 표준 아랍어는 일반적으로 공식 문서와 공식 글쓰기에 사용되며, 지역 방언은 블로그와 소셜 미디어에서 널리 퍼져 있습니다. 다양한 훈련 데이터를 갖춘 Jais는 이러한 방언 사이를 이동하고 문화적 뉘앙스를 이해할 수 있어 다양한 산업 전반에서 더 다재다능하고 적용 가능합니다.

가능성 확장

Jais가 계속 진화함에 따라, 개발 팀은 텍스트 기반 상호작용을 넘어 능력을 확장하는 것을 목표로 하고 있습니다. 그들은 의료 영상 해석, 투자 데이터 분석 또는 위성 데이터 처리와 같은 응용 분야에서 가능성을 열어주는 이미지, 그래프 또는 표 형식 데이터 작업 능력을 통합할 계획입니다.

AI 개발의 책임

Jais는 다른 생성형 AI 모델과 마찬가지로 유해하거나 독성 콘텐츠의 생성을 방지하기 위해 지시 튜닝(instruction tuning)을 구현합니다. 이는 현지 규칙과 관습을 준수하여 응답이 윤리적 및 문화적 규범과 일치하도록 보장합니다. Jais의 개발 과정에는 책임감 있는 AI 배포를 보장하기 위해 UAE 정부 및 기타 기관과의 대화가 포함되었습니다.

UAE의 지역적 발전

아랍에미리트(UAE)는 생성형 AI 시스템 개발의 최전선에 있습니다. 2017년, UAE는 세계에서 처음으로 AI 장관을 임명한 국가가 되었습니다. 주목할 만한 점은 이 지역의 가장 큰 생성형 AI 모델인 Falcon이 아부다비의 Advanced Technology Research Council과 Technology Innovation Institute(TII)에 의해 공개되었다는 것입니다. Falcon은 현재 영어로만 제공되지만, 1800억 개의 파라미터를 보유하고 있으며 추론, 코딩 및 지식 테스트에서 경쟁사를 능가합니다. Falcon과 Jais 모두 오픈 소스이므로 누구나 코드를 활용하거나 수정할 수 있습니다.

AI의 중동 지역 잠재적 영향

PwC의 2018년 보고서에 따르면, 중동 지역은 2030년까지 AI로부터 최대 3,200억 달러의 혜택을 얻을 것으로 예상됩니다. 이 지역은 이 기술의 잠재력을 최대한 활용하기 위해 AI 분야에서의 역량을 구축하는 데 열정적입니다. PwC의 중동 최고 디지털 책임자 Ali Hosseini는 Falcon과 Jais를 주요 예시로 들며, 일부 최고의 오픈 소스 AI 모델이 이 지역에서 개발되었다고 강조합니다.

아랍어 화자를 위한 맞춤 AI 도구인 Jais의 도입은 AI 환경 내의 언어 격차를 해소하기 위한 중요한 전진입니다. 이는 아랍어 화자의 필요를 충족시킬 뿐만 아니라 전 세계 소외된 언어를 위한 언어 모델 개발에 선례를 남깁니다. 방언과 문화적 뉘앙스를 이해할 수 있는 능력을 갖춘 Jais는 다양한 산업 전반에 지대한 영향을 미칠 것으로 예상되며, 중동 및 그 너머에서 AI의 진화를 촉진할 것입니다. AI 기술이 계속 발전함에 따라 언어 모델의 포용성은 AI의 혜택이 전 세계의 다양한 인구에게 접근 가능하도록 보장하는 데 중요합니다. Jais는 그러한 방향으로 유망한 한 걸음을 나타내며, 더 많은 획기적인 발전이 임박해 있음을 시사합니다.

가장 똑똑한 암호화폐 전문가들이 이미 우리 뉴스레터를 구독하고 있습니다. 참여하고 싶으신가요? 함께하세요.

이 기사 공유하기

면책 조항. 제공된 정보는 투자 조언이 아닙니다. Cryptopolitan.com 본 페이지에 제공된 정보를 바탕으로 이루어진 투자에 대해 어떠한 책임도 지지 않습니다. 투자 결정을 내리기 전에 반드시 독립적인 조사나 자격을 갖춘 전문가의 상담을 강력히 권장합니다.

존 팰머

존 팰머

John Murangiri는 시장 분석 기술을 갖춘 채 Cryptopolitan에 합류했습니다. John(별명 JP)은 나이로비 대학교에서 대중 매체 및 미디어 연구 학사 학위를 취득했으며, 이전에는 InsideBitcoins.com과 Metacoingraph에 암호화폐 시장 인사이트를 기여한 바 있습니다.

더 많은 뉴스 …