뉴엔AI ‘QuettaLLMs’, K-AI 리더보드 종합 1위 등극…’질’로 승부한 한국어 특화 LLM - 벤처스퀘어

[AI] ai performance optimization | | 🔬 연구
#ai 모델 #ai모델 #k-ai리더보드 #quettallms #뉴엔ai #한국어특화llm #ai 벤치마크 #k-ai 리더보드 #review #한국어 특화 llm
원문 출처: [AI] ai performance optimization · Genesis Park에서 요약 및 분석

요약

뉴엔AI가 자사 개발한 오픈 소스 한국어 특화 대규모 언어 모델(LLM)인 'QuettaLLMs'로 국내 인공지능 성능 평가 지표인 K-AI 리더보드 종합 1위를 차지했습니다. 이번 성과는 경쟁 모델 대비 더 적은 규모의 파라미터를 활용하면서도 한국어 문법 완결도와 유창성 등 품질에서 압도적인 우위를 점한 덕분에 가능했습니다. 이로써 뉴엔AI는 단순한 모델의 크기를 넘어 한국어 최적화를 통한 실질적인 성능을 입증하며 국내 AI 기술 경쟁력을 각인시켰습니다.

본문

-‘CLIcK’, ‘KMMLU-Pro’ 등 고난도 벤치마크 전 분야 고득점…기술적 완성도 입증 -구어체 특화 ‘Quetta’ 기반 통합 AI 라인업 구축…멀티모달 LLM, 글로벌 시장 공략 가속 AI 트렌드 분석 플랫폼 전문 기업 뉴엔AI(대표 배성환)가 자사의 초거대언어모델(LLM) ‘QuettaLLMs(모델명: QuettaLLMs-27B-Koreasoner-V3)’로 국내 AI 성능 평가의 표준인 ‘K-AI 리더보드’에서 종합 1위를 차지했다고 10일 밝혔다. 과학기술정보통신부와 한국지능정보사회진흥원(NIA)이 운영하는 ‘K-AI 리더보드’는 한국 현지 환경에 최적화된 AI 성능을 공인하는 평가 체계다. 한국어 특유의 문화·언어적 이해도를 측정하는 ‘CLIcK’과 전문직 자격시험 기반 고난도 추론 능력을 평가하는 ‘KMMLU-Pro’ 등 엄격한 벤치마크를 통해 순위를 결정한다. 뉴엔AI의 이번 성과는 단순한 모델 규모 경쟁을 넘어선 ‘벤치마크 최적화 전략’에 있다. 뉴엔AI는 다년간 온라인 트렌드 데이터 분석으로 축적된 고품질 구어체 데이터셋을 학습에 투입해 성능을 극대화했다. 자체 최적화 알고리즘을 통해 베이스 모델의 추론 능력은 보존하면서도 한국어 특유의 문법적 미묘함과 맥락 이해도는 비약적으로 향상시켰다는 평가다. 실제 평가에서 뉴엔AI는 한국어 지식 측정 지표 ‘CLIcK’에서 0.794점, 복합 추론 능력 ‘KMMLU-Pro’에서 0.676점을 기록하며 전 분야에서 고르게 고득점을 획득했다. 뉴엔AI 김광수 부장은 “모델 규모보다 데이터에 대한 깊은 이해와 수행 과제에 최적화된 학습이 한국어 특화 성능을 결정짓는 핵심임을 입증한 사례”라며 “앞으로도 한국어 맥락에 최적화된 고성능 언어모델을 지속 고도화해 국내 AI 생태계 발전에 기여하겠다”고 강조했다. 뉴엔AI는 구어체 특화 언어 모델 ‘Quetta(퀘타)’ 기술을 바탕으로 고객 맞춤형 분석 플랫폼(PaaS) ‘Quetta Enterprise’, 범용 구독 서비스(SaaS) ‘Quetta Service’, 가공 데이터 공급(DaaS) 서비스 ‘Quetta Data’로 통합 AI 라인업을 구축하고 있다. 최근에는 멀티모달 LLM 기술을 접목해 분석 범위를 이미지와 영상으로 확대하고 북미 등 글로벌 시장 공략에 속도를 내고 있다. NYUNE AI's 'Quetta LLMs' Ranks 1st Overall on K-AI Leaderboard… Korean-Specialized LLMs That Compete on 'Quality' – Achieved high scores across all categories on high-difficulty benchmarks such as 'CLIcK' and 'KMMLU-Pro'… Proving technical proficiency – Establishment of an integrated AI lineup based on 'Quetta' specialized for spoken language… Accelerating the global market penetration of multimodal LLM Nuen AI (CEO Bae Seong-hwan), a company specializing in AI trend analysis platforms, announced on the 10th that it ranked first overall on the 'K-AI Leaderboard,' the domestic standard for AI performance evaluation, with its ultra-large language model (LLM) 'QuettaLLMs (model name: QuettaLLMs-27B-Koreasoner-V3).' The 'K-AI Leaderboard,' operated by the Ministry of Science and ICT and the National Intelligence Society Agency (NIA), is an evaluation system that certifies AI performance optimized for the local Korean environment. Rankings are determined through rigorous benchmarks, such as 'CLIcK,' which measures cultural and linguistic understanding unique to the Korean language, and 'KMMLU-Pro,' which evaluates high-level reasoning ability based on professional qualification exams. NYUN AI's latest achievement lies in a 'benchmark optimization strategy' that goes beyond a simple competition in model size. NYUN AI maximized performance by utilizing high-quality spoken language datasets accumulated through years of online trend data analysis for training. It is evaluated that, through its proprietary optimization algorithm, the company preserved the base model's inference capabilities while dramatically improving its understanding of the unique grammatical nuances and context of the Korean language. In the actual evaluation, NYUN AI recorded 0.794 points in the Korean language knowledge measurement index 'CLIcK' and 0.676 points in the complex reasoning ability 'KMMLU-Pro', achieving consistently high scores across all fields. "This case proves that a deep understanding of the data and training optimized for the task, rather than model size, are the key factors determining Korean-specific performance," emphasized Kim Kwang-soo, Director of Nuen AI. "We will continue to advance high-performance language models optimized for the Korean context to contribute to the development of the domestic AI ecosystem." Based on its 'Quetta' technology, a language model specialized for spoken languages, Nuen AI is building an integrated AI lineup consisting of the customer-tailored analytics platform (PaaS) 'Quetta Enterprise,' the general-purpose subscription service (SaaS) 'Quetta Service,' and the processed data supply service (DaaS) 'Quetta Data.' Recently, by incorporating multimodal LLM technology to expand the scope of analysis to include images and videos, the company is accelerating its expansion into global markets, including North America. Les programmes de maîtrise en droit (LLM) de Quetta de NYUNE AI se classent premiers au classement général de K-AI… Des programmes de maîtrise en droit (LLM) spécialisés en Corée qui rivalisent sur la « qualité » – Obtention de scores élevés dans toutes les catégories des tests de référence de haut niveau tels que « CLICK » et « KMMLU-Pro »… Preuve de compétences techniques – Mise en place d'une gamme d'IA intégrée basée sur « Quetta », spécialisée dans le traitement du langage parlé… Accélération de la pénétration du marché mondial des solutions LLM multimodales Nuen AI (PDG Bae Seong-hwan), une société spécialisée dans les plateformes d'analyse des tendances en IA, a annoncé le 10 qu'elle s'était classée première au classement général du « K-AI Leaderboard », la norme nationale d'évaluation des performances en IA, avec son modèle de langage ultra-large (LLM) « QuettaLLMs (nom du modèle : QuettaLLMs-27B-Koreasoner-V3) ». Le « K-AI Leaderboard », géré par le ministère des Sciences et des TIC et l’Agence nationale du renseignement (NIA), est un système d’évaluation qui certifie les performances de l’IA optimisées pour le contexte coréen. Les classements sont établis à l’aide de critères rigoureux, tels que « CLIcK », qui mesure la compréhension culturelle et linguistique propre au coréen, et « KMMLU-Pro », qui évalue les capacités de raisonnement de haut niveau sur la base d’examens de qualification professionnelle. La dernière prouesse de NYUN AI réside dans une stratégie d'optimisation de pointe qui dépasse la simple course à la taille du modèle. NYUN AI a maximisé les performances en utilisant des ensembles de données de langue parlée de haute qualité, accumulés grâce à des années d'analyse des tendances en ligne. Il est établi que, grâce à son algorithme d'optimisation propriétaire, l'entreprise a préservé les capacités d'inférence du modèle de base tout en améliorant considérablement sa compréhension des nuances grammaticales et du contexte propres à la langue coréenne. Lors de l'évaluation réelle, NYUN AI a enregistré 0,794 points dans l'indice de mesure des connaissances en langue coréenne « CLIcK » et 0,676 points dans la capacité de raisonnement complexe « KMMLU-Pro », obtenant des scores constamment élevés dans tous les domaines. « Ce cas démontre que la compréhension approfondie des données et l'optimisation de l'entraînement pour la tâche, plutôt que la taille du modèle, sont les facteurs clés déterminant les performances spécifiques au coréen », a souligné Kim Kwang-soo, directeur de Nuen AI. « Nous continuerons à développer des modèles de langage performants optimisés pour le contexte coréen afin de contribuer à l'essor de l'écosystème d'IA national. » S'appuyant sur sa technologie « Quetta », un modèle de langage spécialisé pour les langues parlées, Nuen AI construit une gamme intégrée d'IA composée de la plateforme d'analyse personnalisée (PaaS) « Quetta Enterprise », du service d'abonnement généraliste (SaaS) « Quetta Service » et du service de fourniture de données traitées (DaaS) « Quetta Data ». Récemment, en intégrant la technologie LLM multimodale pour étendre le champ d'analyse aux images et aux vidéos, la société accélère son expansion sur les marchés mondiaux, notamment en Amérique du Nord. You must be logged in to post a comment.

Genesis Park 편집팀이 AI를 활용하여 작성한 분석입니다. 원문은 출처 링크를 통해 확인할 수 있습니다.

공유

관련 저널 읽기

전체 보기 →