25대 컴퓨터로 했던 일 1대로 '뚝딱'...GPU 연산기술 개발

장다해 기자 / 기사승인 : 2025-05-27 15:37:06
  • -
  • +
  • 인쇄
▲연구를 진행한 윤희용 박사과정, 한동형 박사과정, 오세연 박사과정, 김민수 교수 (사진=KAIST)


국내 연구진이 25대 컴퓨터로 2000초가 걸리던 연산을 1대의 GPU 컴퓨터로 처리할 수 있는 연산 프레임워크와 그래프를 압축 저장하는 HGF 포맷을 개발했다.

한국과학기술원(KAIST) 전산학부 김민수 교수 연구팀은 자체 기술 개발을 통해 메모리 저장부터 처리, 관리까지 초대규모 그래프 연산을 고속으로 처리할 수 있는 전체 연산 프레임워크 '지플럭스(GFlux)'를 개발했다고 27일 밝혔다. 또 연구팀은 이번에 GPU메모리에 맞게 그래프를 대폭 압축하는 HGF 포맷을 개발했다.

인공지능(AI) 분야에서 지식체계나 데이터베이스를 그래프로 저장하고 활용하는 사례가 급증하지만, 일반적으로 복잡도가 높은 그래프 연산은 GPU 메모리의 제한으로 매우 작은 규모의 그래프 등 비교적 단순한 연산만 처리할 수 있다는 한계가 있다.

그러나 연구팀이 개발한 '지플럭스' 프레임워크는 그래프를 GPU 처리에 최적화된 자체 개발 압축 포맷인 HGF로 변환하면 저장용량을 2배까지 늘릴 수 있다. 기존 표준 포맷인 CSR로 저장할 경우, 1조 간선 규모의 그래프 크기가 9테라바이트(TB)에 이르지만, HGF 포맷을 활용하면 이 크기를 4.6TB로 절반 가까이 줄일 수 있다.

연구팀이 개발한 '지플럭스' 프레임워크는 그래프 연산을 GPU에 최적화된 단위 작업인 '지테스크(GTask)'로 나누고, 이를 스케줄링 기법으로 GPU에 배분 및 처리하는 기술이다. 연구진은 "지플럭스 프레임워크는 엔비디아 쿠다(CUDA)의 통합 메모리(Unified Memory)에 의존하지 않고도 메모리를 통합관리할 수 있다"면서 "이를 통해 메모리 부족으로 겪는 연산 실패를 방지할 수 있다"고 설명했다. 

연구팀은 삼각형 개수 세기와 같은 고난도 그래프 연산을 통해 지플럭스 성능을 검증했다. 약 700억 간선 규모의 그래프를 대상으로 한 실험에서 고속 네트워크로 연결된 컴퓨터 25대를 이용해 약 2000초가 걸리던 삼각형 개수 세기 연산을 GPU가 장착된 컴퓨터 1대로 1184초만에 처리하는 데 성공했다. 이는 단일 컴퓨터로 삼각형 개수 세기 연산을 성공적으로 처리한 현재까지 알려진 최대 규모의 그래프다.

삼각형 개수 세기는 그래프에서 서로 연결된 3개의 정점이 이루는 삼각형 형태의 관계를 모두 찾고 개수를 세는 연산으로 데이터 분석 및 인공지능에서 널리 활용된다.

'지플럭스' 프레임워크는 대규모 그래프에서의 다중 홉 질의 처리 성능을 획기적으로 향상시켜 대용량 그래프 데이터를 활용한 고속 분석이 필요한 다양한 산업 분야에서 폭넓게 활용될 수 있다. 검색, 추천, 이상 탐지, 경로 분석 등 그래프 기반의 서비스가 중요한 구글, 메타, 네이버, 카카오와 같은 대기업뿐 아니라 그래프 데이터를 적극적으로 활용하려는 스타트업과 연구기관에서도 적용 가능하다.

연구진은 "지플럭스 프레임워크는 GPU 메모리 크기와 무관하게 안정적인 처리 성능을 제공하며, 기존 기술로는 처리하기 어려웠던 조 단위 규모의 초대형 그래프도 단일 프레임워크로 고속 처리할 수 있다"며 "이로 인해 제한된 비용으로 인해 분석에 어려움을 겪는 기업들에게 합리적인 비용으로 효과적인 솔루션을 제공할 수 있게 됐다"고 말했다.

Copyright @ NEWSTREE All rights reserved.

뉴스트리 SNS

  • 뉴스트리 네이버 블로그
  • 뉴스트리 네이버 포스트
  • 뉴스트리 유튜브
  • 뉴스트리 페이스북
  • 뉴스트리 인스타그램
  • 뉴스트리 트위터

핫이슈

+

Video

+

ESG

+

배출권 구매하고 온실가스 감축?...소송 당하는 기업들 급증

탄소배출권을 구매해 온실가스를 상쇄했다고 주장한 기업들이 잇따라 제동이 걸리고 있다. 기후소송이 그만큼 증가하고 있기 때문이다.런던정경대(LSE

엔씨, 탄소배출량 절반으로 감축…'ESG 플레이북 2024' 발간

엔씨소프트가 지난해 탄소배출량을 전년 대비 50% 수준으로 감축했다.엔씨소프트가 지난해 ESG 경영 성과를 담은 지속가능경영 보고서 'ESG 플레이북(PLAY

우리금융, 다문화 장학생 1000명 대상 18.9억 장학금 지원

우리금융이 올해 다문화 장학생 1000명을 선발하고, 18억9000만원의 장학금을 지원한다고 26일 밝혔다. 우리금융은 우리다문화장학재단의 '다문화 장학사

계면활성제 대체제 나오나...LG전자 '유리파우더' 실증 나선다

LG전자가 세탁세제 원료인 계면활성제를 대체할 수 있는 기능성 신소재 유리파우더 '미네랄 워시(Mineral Wash)' 가능성을 확인하기 위한 실증에 나선다.LG

카카오, ESG 보고서 '2024 카카오의 약속과 책임' 발간

카카오가 2024년 한해의 환경, 사회, 지배구조 관련 주요 활동과 성과를 담은 ESG 보고서 '2024 카카오의 약속과 책임'을 25일 발간했다.카카오는 2024년 AI

4대 금융 ESG평가 '최우수'...LG·현대차·KT·SKT 한단계 하락

KB금융, 신한지주, 우리금융, 하나금융 등 4개 금융지주사가 ESG경영 '최우수 기업'으로 선정됐다. LG, 현대자동차, KT, SK텔레콤은 모두 한계단 하락했다.

기후/환경

+

챗GPT로 학교숙제?..."원자력으로 계산기만 쓰는 격"

인공지능(AI)의 탄소배출량이 모델 및 질문에 따라 천차만별인 것으로 나타났다. 질문 수준에 따라 최대 6배, AI 모델 수준에 따라서는 최대 50배까지도

배출권 구매하고 온실가스 감축?...소송 당하는 기업들 급증

탄소배출권을 구매해 온실가스를 상쇄했다고 주장한 기업들이 잇따라 제동이 걸리고 있다. 기후소송이 그만큼 증가하고 있기 때문이다.런던정경대(LSE

"대구가 작아졌다"…1990년대 이후 몸집 절반 줄어든 이유

1990년대 이후 대구의 몸길이가 절반 수준으로 줄어든 이유가 인간의 포획활동을 회피하기 위한 유전적 선택이라는 분석이 나왔다. 인간이 몸집이 큰

열돔에 갇힌 美 대기오염도 악화...뉴욕 3일째 '오존 경보'

미국 중부와 동부를 뒤덮은 열돔 현상이 폭염뿐 아니라 대기질까지 악화시키고 있는 것으로 드러났다. 특히 뉴욕과 롱아일랜드 지역은 지상오존 농도

보조배터리부터 전자담배까지...'패스트테크' 전자폐기물 주범

패스트푸드, 패스트패션에 이어 일명 '패스트테크'로 알려진 저가의 소형 전자제품들이 전세계 전자폐기물 문제의 주범이 되고 있다.패스트테크는 휴

졸업식 도중 150명 '열사병'…美 1.6억명 열돔에 갇혀있다

미국 동부에 위치한 뉴저지주의 한 고등학교 졸업식에서 학생 150여명이 열사병으로 쓰러지는 사고까지 발생했다. 현재 미국은 열돔 현상으로 1억6000만

에너지

+

순환경제

+

오피니언

+