[디지털데일리 이종현기자] 구글 클라우드는 카카오의 인공지능(AI) 자회사 카카오브레인이 자사의 머신러닝 하드웨어(ASIC) ‘클라우드 텐서 프로세싱 유닛(TPU)’을 도입, 하이퍼스케일(초거대) AI 언어 모델 ‘KoGPT’ 연구개발 역량을 강화했다고 26일 밝혔다.

KoGPT는 미국의 AI 연구기관 오픈AI가 개발한 딥러닝 기반 자연어처리(NLP) AI 모델 ‘GPT-3’의 한국어 특화 버전이다. 카카오브레인은 최근 오픈소스 커뮤니티 깃허브에 KoGPT를 공개했다.

구글 클라우드에 따르면 KoGPT 모델을 학습하는 데는 수십억개 이상의 데이터와 모델 파라미터가 활용됐다. 카카오브레인은 대규모 데이터 및 모델 학습에 적합한 리소스를 확보하기 위해 기존 그래픽처리장치(GPU) 서버 환경에 클라우드 TPU를 추가로 도입했다.

카카오브레인은 클라우드 TPU를 도입해 대규모 모델 학습시 발생하는 네트워크 병목 현상을 해결, 60억개 파라미터와 2000억개 토큰에 달하는 한국어 데이터를 처리했다는 것이 구글 클라우드의 설명이다.

구글 클라우드는 TPU의 차세대 모델인 ‘클라우드 TPU V4’를 내무 머신러닝 워크로드에 사용 중이다. 곧 국내 시장에도 선보일 예정인데, 카카오브레인은 클라우드 TPU V4의 대규모 데이터 학습 테스트에 참여해 상용화를 앞당기는 데 협력하고 있다.

김일두 카카오브레인 대표는 “구글 클라우드에서 제공하는 클라우드 TPU는 딥러닝에 최적화돼 있어 짧은 기간 안에 고효율의 학습 파이프라인을 구축할 수 있었다”며 “구글 클라우드와 지속적으로 협력해 초거대 AI 모델의 연구 효율을 한층 더 끌어올리겠다”고 말했다.

최기영 구글 클라우드 코리아 사장은 “한국의 초거대 AI 모델 개발에 함께할 수 있어 의미 있게 생가한다. 앞으로도 구글 클라우드의 AI 및 머신러닝 인프라를 기반으로 한국 기업과 연구기관이 다양한 분야에서 혁신을 가속화할 수 있도록 적극 지원하겠다”고 전했다.