【와티비커뮤니티-WATVcommunity】 보증업체놀이터추천홍보 : 프로그램제작판매제작의뢰 : 스포츠분석 : 무료스포츠중계tv : 섹시bj움짤 : 스포츠뉴스 : 안구정화 놀이터홍보 놀이터후기공유 피해사례공유

로그인

채팅

글쓰기

[IT뉴스]AI 학습 단어에 '도박'·'성인물'…오픈AI, 비영어권 홀대 논란

온카뱅크관리자

2024-05-31 18:41:03

<div id="layerTranslateNotice" style="display:none;"></div>  <strong class="summary_view" data-translation="true">최신모델 'GPT-4o'<br>성능 개선 과정서<br>언어 안전문제 제기<br>한국·중국어 토큰서<br>부적절한 단어 포착<br>AI 윤리·안전과 직결</strong> 
        <div class="article_view" data-translation-body="true" data-tiara-layer="article_body" data-tiara-action-name="본문이미지확대_클릭"> 
         <section dmcf-sid="V9L5UKiBWX">
          <figure class="s_img figure_frm origin_fig" dmcf-pid="f4N3qfg2yH" dmcf-ptype="figure">
           <p class="link_figure"><img class="thumb_g_article" data-org-src="https://t1.daumcdn.net/news/202405/31/ked/20240531184106370bjuu.jpg" data-org-width="201" dmcf-mid="2ktLcs5ryZ" dmcf-mtype="image" height="auto" src="https://img4.daumcdn.net/thumb/R658x0.q70/?fname=https://t1.daumcdn.net/news/202405/31/ked/20240531184106370bjuu.jpg" width="201"></p>
          </figure>
          <p dmcf-pid="48j0B4aVhG" dmcf-ptype="general">오픈AI가 최신 인공지능(AI) 모델의 비영어 성능을 개선하는 데 부적절한 데이터를 사용했다는 분석이 제기됐다. 오픈AI가 영어가 아닌 언어의 안전 문제에 소홀하다는 우려의 목소리가 나온다.</p>
          <p dmcf-pid="8OtLcs5rWY" dmcf-ptype="general">31일 업계에 따르면 오픈AI의 최신 AI 모델 ‘GPT-4o’에 사용된 토크나이저 ‘o200k_base’의 한국어 토큰 목록에서 ‘출장안마’ ‘출장샵’ ‘안마방’과 같은 어휘가 발견됐다. 중국어 토큰 목록에서도 같은 문제가 있었다. 지난 17일 기술 전문 매체 MIT테크놀로지리뷰는 같은 토크나이저의 중국어 토큰 목록에 ‘최신고화질미검열(最新高无)’ ‘성인영화(av影)’와 같은 성인물, 도박 관련 키워드가 포함됐다고 보도했다.</p>
          <p dmcf-pid="6IFokO1mWW" dmcf-ptype="general">토크나이저는 텍스트를 AI 모델이 처리할 수 있는 단위인 ‘토큰’으로 나눠주는 프로그램이다. AI 모델이 텍스트를 처리하는 데 핵심적인 역할을 한다. “나는 밥을 먹었다”를 ‘나는’ ‘밥을’ ‘먹었다’의 토큰 단위로 나누고 각각의 토큰에 컴퓨터가 처리 가능한 숫자를 부여하는 식으로 텍스트를 처리한다.</p>
          <p dmcf-pid="PlpNwh3ICy" dmcf-ptype="general">토큰 목록에는 토크나이저 구축을 위한 훈련 데이터에 자주 등장한 단어들이 등록된다. 특정 언어 토큰 목록에서 부적절한 단어가 발견된 것은 토크나이저의 해당 언어 훈련 데이터에 부적절한 내용이 유의미한 비율로 포함됐다는 의미다. 부적절한 단어는 AI 모델의 취약점이 될 수 있다. 사용자가 이를 악용해 모델에 부적절한 답변을 유도할 수 있다는 설명이다.</p>
          <p dmcf-pid="QSUjrl0CWT" dmcf-ptype="general">오픈AI는 최근 AI 윤리·안전 문제로 곤란을 겪고 있다. 지난 21일에는 배우 스칼릿 조핸슨의 목소리를 무단으로 도용했다는 의혹으로 GPT-4o의 기본 목소리 중 하나를 삭제했다.</p>
          <p dmcf-pid="xvuAmSphlv" dmcf-ptype="general">황동진 기자 radhwang@hankyung.com</p>
         </section> 
        </div> 
        <p class="" data-translation="true">Copyright © 한국경제. 무단전재 및 재배포 금지.</p>

버니즈 얘기 나오면 울컥...민희진 '말·말·말' [내일날씨] 또 주말에 비…일부 지역 천둥·번개

댓글 총 0개

업체홍보/구인 더보기

놀이터홍보 더보기

지식/노하우 더보기

판매의뢰 더보기

포토 더보기