성능평가 2

[단독] 카카오가 공개한 초거대 AI, 점수 과장됐다

카카오, 코지피티(KoGPT) 성능 본래 점수보다 높게 공개 코드상 문제로 초기화하지 않고 평가한 점수 그대로 기입 리포트에 밝힌 점수보다 5점 정도 낮아...평가 공정성 훼손 테스트코드는 수정하고 점수는 그대로 반영 '고의성 다분' 카카오가 오픈소스 커뮤니티 깃허브(Githup)에 자사 초거대 인공지능(AI) '코지피티(KoGPT)' 점수를 본래 점수보다 높게 기재한 것으로 조사됐다. 테스트 과정에서 코드상 문제로 기존 성능보다 높은 점수가 나왔지만 이를 바로잡지 않고 잘못된 점수를 공개했다. 카카오브레인은 해당 모델을 공개하며 경쟁사 초거대 AI 모델보다 높은 점수를 기록했다고 밝혔다. 그러나 사실은 점수가 대등하거나 낮았던 것으로 파악됐다. 16일 복수의 AI 업계 관계자에 따르면 카카오브레인이 지..

AI산업 2022.02.17

인텔리빅스, ITS 성능평가에서 AI 영상분석 기술력 입증...돌발상황검지 평가에서 오탐률 0%

한국건설기술연구원 주관 성능평가에서 전 부문 '최상급' 기록 원거리 검출 자체 모델 개발과 다양한 도로 환경 데이터 적용한 결과 객체 검출에 사용하는 GPU 자원 절반으로 줄이며 환경보호에도 기여 장정훈 대표 "기술력을 최우선 가치로 삼아 기술개발 집중할 것" 인텔리빅스 인공지능(AI) 영상분석 기술이 교통 분야에서 기술력을 입증했다. 국토교통부 지정 지능형교통체계(ITS) 성능평가 전담기관인 한국건설기술연구원에서 시행하는 돌발상황검지 시스템 성능평가에서 전 부문 '최상급' 기록을 달성했다. 한국건설기술연구원에서 시행하는 돌발상황검지 시스템 성능평가는 시험도로 상의 검지거리 별 정차, 차량 역주행, 보행자 출현과 같은 돌발 상황을 영상 분석을 통해 감지하는 성능을 평가한다. 도로에 있는 카메라 영상을 A..

AI테크 2021.10.14