로그인
보증업체
스포츠중계
스포츠분석
먹튀사이트
지식/노하우
판매의뢰
업체홍보/구인
뉴스
커뮤니티
포토
포인트
보증카지노
보증토토
보증홀덤
스포츠 중계
기타
축구
야구
농구
배구
하키
미식축구
카지노 먹튀
토토 먹튀
먹튀제보
카지노 노하우
토토 노하우
홀덤 노하우
기타 지식/노하우
유용한 사이트
제작판매
제작의뢰
게임
구인
구직
총판
제작업체홍보
실시간뉴스
스포츠뉴스
연예뉴스
IT뉴스
자유게시판
유머★이슈
동영상
연예인
섹시bj
안구정화
출석하기
포인트 랭킹
포인트 마켓
로그인
자동로그인
회원가입
정보찾기
뉴스
더보기
[연예뉴스]
김호중, 결국 사고 10일 만에 음주운전 인정 "크게 후회하고 반성한다"[전문]
N
[연예뉴스]
'졸업' 정려원X위하준, 서정연 계략에 위기…단 1명 위해 강의→전교 1등 반전 [종합]
N
[실시간뉴스]
文 딸 다혜 씨, 檢 겨냥 "상당액, 300만원? 아이구야" 글 썼다 삭제
N
[실시간뉴스]
중국 방문한 푸틴, 왜 평양은 안 들렀나… "시진핑이 싫어했을 수도"
N
[연예뉴스]
"어리석은 내 모습 너무 싫어"… 김호중 음주운전 심경 [전문]
N
커뮤니티
더보기
[자유게시판]
맛점하세요~
[자유게시판]
맛커담하세용
[자유게시판]
모닝 커피한잔해요
[자유게시판]
불금 건승파이팅합시다!!
[자유게시판]
퇴근이 머지 않았네요~
목록
글쓰기
[IT뉴스]AI가 기출문제 외웠는지, 추론했는지 안다… 평가 기술도 진화
온카뱅크관리자
조회:
18
2024-05-08 03:24:43
<div id="layerTranslateNotice" style="display:none;"></div> <strong class="summary_view" data-translation="true">변형된 수학 문제로 테스트</strong> <div class="article_view" data-translation-body="true" data-tiara-layer="article_body" data-tiara-action-name="본문이미지확대_클릭"> <section dmcf-sid="yQFSDRhL3M"> <p dmcf-pid="WE6uXrphux" dmcf-ptype="general">치열한 인공지능(AI) 모델 경쟁 한편에선 이들의 성능을 평가하는 방법(벤치마크)들도 속속 나오고 있다. AI 모델 수가 빠르게 늘다 보니 어떤 모델이 더 적합하고 좋은지 선택해야 하는 기업이나 개인 이용자들이 AI 벤치마크를 찾는다.</p> <p dmcf-pid="YDP7ZmUl0Q" dmcf-ptype="general">미국 기업 ‘스케일AI’ 연구진은 지난 3일 거대언어모델(LLM)의 수학적 능력을 평가하는 벤치마크를 공개했다. 이 회사는 초등학교 수준 수학 문제를 LLM에 풀게 했다. 이미 정답을 학습시킨 문제를 잘 푸는 LLM이 있는가 하면, 새로운 유형의 문제도 이미 학습한 문제로 추론해 정답을 내는 LLM도 있었다. 이 방식을 적용하자 오픈AI의 ‘GPT-4′와 구글의 ‘제미나이 프로’는 추론 능력이 뛰어났다. 반면 프랑스 인공지능(AI) 스타트업 미스트랄의 AI는 상대적으로 추론 능력이 떨어지는 것으로 나왔다.</p> <p dmcf-pid="GwQz5suS0P" dmcf-ptype="general">AI 모델의 성능이 좋아질수록 이를 평가하는 벤치마크도 발전하고 있다. 학생들이 기출 문제를 외워서 높은 점수를 받듯이, 일부 AI 모델이 기존 벤치마크의 평가 방식을 학습해 좋은 평가를 받는 경우가 발생한다. 이를 앞세워 자사 AI 모델의 우수성을 홍보하기도 한다. 테크업계 관계자는 “일부 스타트업은 AI 모델을 개발하면서 특정 벤치마크를 집중 학습시킨 후에, 그 평가 결과를 공개하기도 한다”고 말했다.</p> <p dmcf-pid="Hc9tTA5rp6" dmcf-ptype="general">AI 모델의 개발 속도를 따라잡기 위해 AI 기업들이 직접 벤치마크를 개발하는 경우가 많다. 구글 딥마인드는 지난달 29일 이미지 생성 AI 모델의 성능을 평가하기 위한 벤치마크를 공개했다. 최근에는 페이스북의 모회사인 메타, 테슬라의 일론 머스크 CEO가 세운 스타트업 ‘xAI’도 자체 개발한 LMM용 벤치마크 데이터를 공개했다.</p> </section> </div> <p class="" data-translation="true">Copyright © 조선일보. 무단전재 및 재배포 금지.</p>
댓글등록
댓글 총
0
개
맨위로
이번주
포인트
랭킹
매주 일요일 밤 0시에 랭킹을 초기화합니다.
1
4,000
상품권
2
3,000
상품권
3
2,000
상품권
1
올나잇스머프
100
2
풀카
100
3
우로스써보세요
100
4
노익스플로드
100
업체홍보/구인
더보기
[제작업체홍보]
h5웹미니게임개발제작 라이브스코어제작 커뮤니티제작 스포츠솔루션제작임대
[제작업체홍보]
h5웹미니게임개발제작 포유소프트 텔레그램 @fusoft001 스포츠 토토 솔루션제작임대분양
[제작업체홍보]
h5웹미니게임개발제작 포유소프트 텔레그램 @fusoft001 스포츠 토토 솔루션제작임대분양
[제작업체홍보]
h5웹미니게임개발제작 라이브스코어제작 커뮤니티제작 스포츠솔루션제작임대
[구인]
커뮤니티 사이트 운영자 모집
지식/노하우
더보기
[카지노 노하우]
룰렛 초보자들은 3 가지 배팅만 사용하세요
[카지노 노하우]
바카라의 수익은 금액 조절을 이용한 줄타기에서 나옵니다
[카지노 노하우]
카지노 게임하기 전에 컨디션 체크부터 하세요
[카지노 노하우]
슬롯머신 잘하는 방법은 그냥 금액 조절뿐입니다
[기타 지식/노하우]
먹튀사이트의 전형적인 특징
판매의뢰
더보기
[제작판매]
html5웹미니게임제작 해시게임제작 카드포커게임제작 스포츠토토 카지노 슬롯 에볼루션 토지노 솔루션분양임대재작
[제작판매]
html5웹미니게임제작 해시게임제작 카드포커게임제작 스포츠토토 카지노 슬롯 에볼루션 토지노 솔루션분양임대재작
[제작판매]
html5웹미니게임제작 해시게임제작 카드포커게임제작 스포츠토토 카지노 슬롯 에볼루션 토지노 솔루션분양임대재작
[제작판매]
html5웹미니게임제작 해시게임제작 카드포커게임제작 스포츠토토 카지노 슬롯 에볼루션 토지노 솔루션분양임대재작
[제작판매]
html5웹미니게임제작 해시게임제작 카드포커게임제작 스포츠토토 카지노 슬롯 에볼루션 토지노 솔루션분양임대재작
포토
더보기
채팅하기