뉴스
-
벤치마크 1위인데 ‘국가대표 AI’ 2차 탈락… 모티프, 점수 공개 요구
2차 평가에서 탈락한 AI 스타트업 모티프테크놀로지스(모티프)가 평가 결과에 공식 이의를 제기했다. 1차 평가에서 모델 ‘독자성’ 논란이 불거진 데 이어 2차에서는 평가 기준과 점수 정부가 대규모 AI 지원 사업을 여럿 추진하는 만큼 평가 기준과 선정 근거를 더 투명하게 공개해야 한다는 목소리가 커지고 있다.● 글로벌 벤치마크 1위가 탈락… 점수 공개 논란모티프는
- 종이 없는 행사 현장… 큐사인, ‘스마트 이벤트 솔루션’ 제공 분야에서도 참가자 관리부터 심사와 결과 집계까지 전 과정을 디지털화하려는 움직임이 이어지고 있다.기존 행사 현장에서는 참가자 명단 작성, 문제 풀이, 답안 제출, 심사위원 평가, 점수 참가자가 입력한 답안을 바탕으로 결과를 집계할 수 있어 대규모 인원이 참여하는 퀴즈나 골든벨 형태 행사에서 운영 절차를 효
- 카카오, Kanana-2 안전성 결과 공개…글로벌 최고 수준 또, 사전 정의된 채점 기준에 따라 AI 모델이 응답을 평가하는 'LLM-as-a-Judge' 방식을 적용해 대규모 평가에서도 주관적 편차를 최소화하고 동일한 기준으로 모델 간 비교가 Kanana-2-1.3B-Instruct는 종합 점수 0.70을 기록해 Gemma(0.68), Qwen(0.58)을 앞섰으며, Kanana-2-3B-Instruct 역시 0.70으로
- [현장] 오픈AI "AI 벤치마크 한계…토큰·비용·시간까지 고려해야" [지디넷코리아]인공지능(AI) 모델 평가를 단일 벤치마크 점수 중심으로 보는 방식에 한계가 있다는 주장이 나왔다. 한다는 지적이다.노엄 브라운 오픈AI 리서치 부문 부사장은 3일 과학기술정보통신부가 서울 강남 웨스틴 서울 파르나스에서 개최한 '글로벌 AI 프론티어 심포지엄 2026' 기조연설에서 대규모
- '산업 특화' LG 엑사원, 구글·알리바바 앞섰다 평가 점수(ELO)는 1760점으로, 구글이 지난달 공개한 최신 모델 'TabFM'의 1749점을 앞섰다. 적은 데이터만으로 새로운 문제에 빠르게 적응할 수 있고 결측치가 발생해도 남은 정보의 관계를 분석해 예측 정확도를 유지한다.엑사원 Forecast는 시간의 흐름에 따라 변화하는 대규모
- 슈퍼브에이아이, 세계 최대 AI 비전 학회 1위…한국 기업 최초 주최 측이 제시한 기준 모델 점수(33.3)도 크게 웃돌았다.이번 챌린지는 인식 대상 객체마다 단 10장의 예시 이미지만으로 AI가 새로운 객체를 찾아내는 퓨샷 객체 탐지 능력을 평가한다 기반으로 별도의 데이터 라벨링 없이도 새로운 객체를 즉시 인식할 수 있으며 제조·물류·의료 등 다양한 산업 현장에 즉시 적용 가능한 것이 특징이다.김현수 슈퍼브에이아이 대표는 "고비용 대규모
- 공공시스템 긴급 보안패치 중 장애 발생해도 면책…행안부, 적극행정 인정 따른 책임 문제 때문에 신속한 조치에 부담을 느껴왔다.특히 지난해 전 세계적인 IT 장애를 초래한 크라우드스트라이크 사례처럼 보안 업데이트 과정에서 운영체제와의 충돌이 발생할 경우 대규모 제도가 무분별하게 적용되지 않도록 구체적인 기준도 함께 마련했다.면책 적용 대상은 국제 취약점 평가 기준인 CVSS(Common Vulnerability Scoring system) 점수
- 라이엇게임즈 '발로란트', 신규 맵 및 특별 모드 전격 출시 갖춘 신규 맵과 스파이크 해체 상황에 집중한 쾌속 모드를 선보인다.라이엇 게임즈는 발로란트 2026 시즌 액트 4를 맞아 신규 맵 '서밋'과 신규 특별 모드 '탈환전'을 포함한 대규모 출시 후 첫 2주간 서밋 맵에서 경쟁전을 플레이할 경우, 패배 시 차감되는 경쟁전 등급 점수(RR) 손실이 50% 감소한다.
- [기고] 아태지역 AI 인프라, '데이터 시스템' 중심 설계해야 [지디넷코리아]대규모 모델을 학습시키고 AI를 실험 단계에서 실제 운영 환경으로 확산시키는 것이 당면 과제였던 시기에는, 이러한 컴퓨팅 중심의 접근이 충분히 합리적인 선택이었다.그러나 대규모 환경에서는 그 데이터 자체가 곧 시스템이 된다.
- 정부, 독파모 2차 평가 돌입…"데이터·비용·활용성 검증 관건" 이는 1차 평가 과정서 독자 모델 정의와 평가 기준을 둘러싼 논란을 줄이려는 조치다.다만 2차 평가가 또다시 성능 점수 중심으로 흐를 경우 독파모 사업의 정책적 목표를 충분히 반영하기 모티프테크놀로지스는 대규모 한국어 사전학습 데이터를 국가 차원에서 구축하고 정제·분류·후처리까지 지원해야 한다고 강조했다.당시 임문영 전 국가AI전략위원회 부위원장은 "기업은 모델
1 페이지
다음 →