【와티비커뮤니티-WATVcommunity】 보증업체놀이터추천홍보 : 프로그램제작판매제작의뢰 : 스포츠분석 : 무료스포츠중계tv : 섹시bj움짤 : 스포츠뉴스 : 안구정화 놀이터홍보 놀이터후기공유 피해사례공유

로그인

채팅

글쓰기

[IT뉴스]韓 AI '자화자찬', 시장은 '공정성' 의심..."정부 주도 벤치마크 지수 필요"

온카뱅크관리자

2026-02-02 14:57:32

<div id="layerTranslateNotice" style="display:none;"></div>  
        <div class="article_view" data-translation-body="true" data-tiara-layer="article_body" data-tiara-action-name="본문이미지확대_클릭"> 
         <section dmcf-sid="Ht2LXltWlu">
          <figure class="figure_frm origin_fig" contents-hash="e93de6a1cff84482a641e168243f14c924121aa8692c58c8b951870bf03af94d" dmcf-pid="XFVoZSFYvU" dmcf-ptype="figure">
           <p class="link_figure"><img alt="AI로 만든 이미지. [사진=그록]" class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202602/02/552779-26fvic8/20260202145704856vwvg.jpg" data-org-width="630" dmcf-mid="GaQc0G71S7" dmcf-mtype="image" height="auto" src="https://img1.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202602/02/552779-26fvic8/20260202145704856vwvg.jpg" width="658"></p>
           <figcaption class="txt_caption default_figure">
            AI로 만든 이미지. [사진=그록]
           </figcaption>
          </figure>
          <p contents-hash="2107085dc82f65bf709173f26e213d08076400357ef558f1b63d6664256989c3" dmcf-pid="Z3fg5v3GSp" dmcf-ptype="general">국내 인공지능(AI) 기업들이 글로벌 벤치마크에서 높은 순위를 차지했다며 적극 홍보하고 있지만, 공정한 평가 벤치마크의 부재로 과대평과됐다는 지적이 나온다. 정부 차원에서 공정성을 담보하는 글로벌 표준 벤치마크 도입이 필요하다는 의견이 나오고 있다.</p>
          <p contents-hash="27dc6891502cc888bb74ec72d556ac2ba277dc3ae7609a206191ecd73edb864a" dmcf-pid="504a1T0HS0" dmcf-ptype="general">2일 한국지능정보사회진흥원(NIA)이 발간한 ‘벤치마크 데이터셋 현황 분석 및 정부 주도의 벤치마크 마련 필요성’ 보고서에 따르면 국내 개발 AI 모델들이 공개 벤치마크를 장기 사용하며 데이터 누수가 발생하고 있다고 진단했다. 데이터 누수는 정답지를 학습에 이용해 모델 성능을 과대평가하게 만드는 것을 뜻한다.</p>
          <p contents-hash="fa52a0573df4c4b42cc564bc551ee5387fe609b61aae66c7aa3cce1d7977a24d" dmcf-pid="1p8NtypXS3" dmcf-ptype="general">벤치마크시에는 비정상적으로 높은 정확도가 나오지만 실제 성능은 떨어진다. 때문에 국내 AI 기업들이 MMLU(광범위 지식 이해), MATH(고난도 수학), HumanEval(코드 생성) 등 주요 글로벌 벤치마크에서 상위권 성적을 올렸다는 홍보 역시 공정성에서 의심을 받고 있다.</p>
          <p contents-hash="7254b8c55e88103b8ffef8167b22b0df2ea7d5d80a453ac0a7e9a6211684324c" dmcf-pid="tU6jFWUZSF" dmcf-ptype="general">글로벌 주요 벤치마크는 다면적 능력을 평가하고 투명성을 보장하지만, 공개 기간이 길어질수록 누수 위험이 커진다. 벤치마크 자체를 학습데이터로 활용해 점수를 비약적으로 상승시킬 가능성도 있다.</p>
          <p contents-hash="1d87da76533008cfcf918a62cc9b4078ca96dee66a7023a529939950265ce24b" dmcf-pid="FuPA3Yu5ht" dmcf-ptype="general">국내 벤치마크는 KMMLU(한국어 지식 이해), KLUE(자연어 이해), KoBEST(고난도 추론), HAE-RAE Bench(한국 문화 특화) 등이 있지만 대부분 해외 벤치마크를 한국어화 한 수준에 머물러 있다. 초고난도 과학·프로그래밍 영역이 부족하고, 공정성 관리에도 취약하다.</p>
          <p contents-hash="848319582c203f5373f463b5218ca81baffbfc14c65ae5a09058952822255931" dmcf-pid="37Qc0G71y1" dmcf-ptype="general">한국어 전문 벤치마크인 KMMLU의 경우 테스트 데이터 중 7.66%가 정답 노출·불완전 질문·오타 등 오류를 포함하고 있으며, 온라인 공개로 인한 데이터 누수가 신뢰성을 떨어뜨리는 것으로 나타났다.</p>
          <p contents-hash="b3fe68b56b7139bde8c3d3fd3c7bfcd1fd615c0321d37dc6d63fbb080b391041" dmcf-pid="0zxkpHztW5" dmcf-ptype="general">'독자 AI 파운데이션 모델 개발 사업‘에서도 벤치마크 결과에 따른 공정성 논란이 이어졌다. LG AI연구원 엑사원, SKT A.X, 업스테이지 솔라 등이 일부 벤치마크에서 높은 점수를 받았으나, 평가 과정에서 모델별 개별 벤치마크 도입, 프롬프트 조정 의혹, 해외(특히 중국) 오픈소스 모델과의 유사성·차용 논란이 제기됐다.</p>
          <p contents-hash="c5b08a49363d5acfee486085caecebbb0bfbf93816e48a85c8d7211e1f9c3ca1" dmcf-pid="pfLIK0fzlZ" dmcf-ptype="general">보고서는 국내 언어·제도·사회 맥락을 반영한 정부 주도 벤치마크를 해결책으로 제시한다. 이는 공정 경쟁 환경 조성, 스타트업 접근성 강화, 글로벌 기준 수용자에서 참여자로의 전환, 공공 AI 안전 확보에 기여할 수 있다는 설명이다.</p>
          <p contents-hash="ea873a54ada3659e4eb8506acb62f23f252b440b051b8519d98f8f321f1083cd" dmcf-pid="U4oC9p4qyX" dmcf-ptype="general">NIA 측은 “민관 협력 거버넌스와 생애주기 관리를 통해 중립적 리더보드·동적 벤치마크 운영을 제안한다”며 “벤치마크는 단순 도구가 아니라 국가 AI 인프라로 재정의되어야 한다”고 제안했다.<br> </p>
         </section> 
        </div>

콘텐츠 사용대가 산정기준 두고 PP-SO 정면충돌 “AI 정책 기준점 제시할 것”…민·관 머리 맞대다

댓글 총 0개

업체홍보/구인 더보기

놀이터홍보 더보기

지식/노하우 더보기

판매의뢰 더보기

포토 더보기