"허깅페이스 테스트서 인텔 AI 가속기 추론 가장 빨라"
조성미
입력 : 2023.04.04 11:01:38
입력 : 2023.04.04 11:01:38
(서울=연합뉴스) 조성미 기자 = 인텔은 "AI 플랫폼 허깅 페이스가 시중엔 나온 어떤 GPU(그래픽처리장치)보다 인텔 AI 하드웨어 가속기에서 더 빠른 추론이 가능했다는 테스트 결과를 냈다"고 4일 밝혔다.
허깅 페이스는 챗GPT 개발의 바탕이 된 트랜스포머 기술을 대중화시킨 플랫폼으로 알려져 있다.
허깅 페이스 테스트 결과 인텔 프로세서 하바나 가우디2는 매개변수 1천760억 개를 사용한 '블룸즈 모델'(트랜스포머 기반 다국어 거대 언어 모델)에서 엔비디아 A100 대비 20% 빠른 추론 성능을 보였다.
또 가우디2 서버에서 컴퓨터 비전 작업을 실행할 때 동급 A100 기반 서버 대비 1.8배 높은 와트당 처리량을 나타냈다.

허깅 페이스
[허깅 페이스 홈페이지 캡처.재판매 및 DB 금지]
에마드 모스타크 스테빌리티 AI 설립자 겸 최고경영자(CEO)는 "인텔은 4세대 사파이어 래피즈 CPU(중앙처리장치)부터 가우디와 같은 가속기에 이르기까지 AI 대중화를 위한 훌륭한 파트너"라고 말했다.
csm@yna.co.kr(끝)
허깅 페이스는 챗GPT 개발의 바탕이 된 트랜스포머 기술을 대중화시킨 플랫폼으로 알려져 있다.
허깅 페이스 테스트 결과 인텔 프로세서 하바나 가우디2는 매개변수 1천760억 개를 사용한 '블룸즈 모델'(트랜스포머 기반 다국어 거대 언어 모델)에서 엔비디아 A100 대비 20% 빠른 추론 성능을 보였다.
또 가우디2 서버에서 컴퓨터 비전 작업을 실행할 때 동급 A100 기반 서버 대비 1.8배 높은 와트당 처리량을 나타냈다.

[허깅 페이스 홈페이지 캡처.재판매 및 DB 금지]
에마드 모스타크 스테빌리티 AI 설립자 겸 최고경영자(CEO)는 "인텔은 4세대 사파이어 래피즈 CPU(중앙처리장치)부터 가우디와 같은 가속기에 이르기까지 AI 대중화를 위한 훌륭한 파트너"라고 말했다.
csm@yna.co.kr(끝)
증권 주요 뉴스
증권 많이 본 뉴스
매일경제 마켓에서 지난 2시간동안
많이 조회된 뉴스입니다.
-
1
美 금리인하 시점 가늠할 4월 물가지수 13일 나온다
-
2
비트코인 강세에 코인 관련주 ‘들썩’…MSTR·로빈후드 등 동반 랠리
-
3
편의점 너마저 ··· 실적 쇼크로 주가 급락
-
4
춘천 퇴계동행정복지센터, 공공건축 명소 부상…지자체 벤치마킹
-
5
정박한 해군 함정서 경유 1만ℓ 바다로 유출…방제 작업(종합)
-
6
[연합뉴스 이 시각 헤드라인] - 15:00
-
7
이거 실화? ··· 애플보다 주가 더 오른 괴물 기업 따로 있었다
-
8
롯데손보 콜옵션 연기에 보험사들 타격…700억 보유 개인들 우려(종합)
-
9
美 결제사 이어 빅테크까지 스테이블 전쟁…메타도 서비스 준비 중
-
10
하늘 드론, 땅엔 로보캅…'K순찰' 첨단장비로 여의도 지킨다(종합)