[디지털데일리 오병훈기자] 생성형 인공지능(AI)이 주목 받으면서 국내 기업·정부기관에서 이를 데이터 관리에 활용하는 사례가 늘고 있다는 분석이 나왔다.

2일 인터내셔날데이터코퍼레이션코리아(이하 한국IDC)는 ‘국내 생성형 AI 업무 적용 사례 연구’ 보고서를 공개했다. 보고서에서는 아시아태평양(AP) 지역 조직 생성형 AI 도입에 대한 설문 결과를 소개하고 국내 10개 기업 및 공공 기관 생성형 AI 업무 적용 사례를 분석했다.

아시아태평양 지역 조직의 생성형 AI 도입 현황 설문에 따르면 한국 조직 72%가 생성형 AI를 이미 ‘현재 사용 중’이며 이는 AP 지역 평균인 59.5%보다 12.5% 포인트 높은 도입률이다. 한국 조직 47.2%는 올해 10개 이상 생성형 AI 사용사례를 배포할 예정이며, 내년에는 48% 한국 조직이 50개 이상 생성형 AI 사용사례를 배포할 계획이라고 응답했다.

특히 AP 지역 조직 69.6%, 한국 조직 78%가 생성형 AI 도입으로 인해 직원 생산성이 개선됐다고 평가함에 따라, 향후 엔터프라이즈 생성형 AI 도입이 가속화될 것으로 전망했다.

이와 함께 한국IDC는 보고서를 통해 LG전자, 포스코홀딩스, 한화, 스타벅스, 한국은행, 국회도서관 및 한국전력 등 국내 기업 사례를 중점적으로 분석했다. LG전자는 제품 기획과 개발 업무를 맡은 직원들이 전문적인 IT 지식 없이도 수백테라 데이터를 분석할 수 있도록 SQL 코드를 생성하는 사내 AI 시스템을 마련했다.

포스코홀딩스는 세계 2차전지 시장 뉴스를 준실시간으로 분석하고 2차전지 전문용어까지 정확히 처리하는 고성능 검색증강생성(RAG) 시스템과 이슈 추천 시스템을 연계 구축했다. 한화는 건설 사업 관련 법조문 검색 정확성 개선을 위해 법리 해설서를 RAG 파이프라인에 통합했으며, 스타벅스는 바쁜 매장 파트너들의 빠른 지식검색을 위해 서버리스 NoSQL 데이터베이스를 AI 시스템에 결합해 응답시간을 개선했다.

금융부문에서는 정부 데이터 보안 규정을 준수하기 위해 자체 언어모델을 내부에서 직접 구축한 한국은행 사례를 소개했다. 공공부문에서는 한국어 전용 온프레미스 설치형 소규모언어모델(sLM)과 전통적 빅데이터 분석 서비스를 통합한 국회도서관, 저사양 인프라에서도 거대 언어모델을 운영하기 위해 다양한 오픈소스 모델과 메모리 효율화 프레임워크를 테스트한 한국전력 등의 사례가 수록됐다.

한국IDC는 생성형 AI 도입으로 인해 엔터프라이즈 데이터 관리 전략에 새로운 요구사항이 추가되고 있어 향후 빅데이터 플랫폼과 AI 애플리케이션 플랫폼을 아키텍처 수준에서 통합하는 추세가 나타날 것이라고 내다봤다.

전대일 한국IDC AI리서치 담당 수석연구원은 “인터뷰에 참여한 많은 조직은 일반적인 레퍼런스 모델을 신속히 구현하는 전시성 사업을 경계하고 있으며, 실제 자사 임직원이 만족할 수 있는 AI 성능을 제공하기 위해 대상 업무에 특화된 데이터 엔지니어링 문제를 해결하는데 많은 공수를 투입하고 있다”며 “특정 AI 모델에 종속되지 않기 위해 다양한 모델을 비교 테스트해 선정하거나 심지어 직접 모델을 개발하는 방안도 검토하는 등 생성형 AI 적용에 있어서 빠른 도입 속도와 포괄적인 접근을 동시에 보여준다”고 설명했다.