셀렉스트타, 신한은행과 금융 LLM 벤치마크 개발…ICAIF서 채택

셀렉트스타가 신한은행과 공동 개발한 금융 특화 거대언어모델(LLM) 평가 체계 '케이-뱅크이밸(K-BankEval)' 연구 논문이 국제학술대회 'ICAIF 2026' 워크숍에 채택됐다. 셀렉트스타
셀렉트스타가 신한은행과 공동 개발한 금융 특화 거대언어모델(LLM) 평가 체계 '케이-뱅크이밸(K-BankEval)' 연구 논문이 국제학술대회 'ICAIF 2026' 워크숍에 채택됐다. 셀렉트스타

셀렉트스타는 신한은행과 공동 개발한 금융 특화 거대언어모델(LLM) 평가 체계 '케이-뱅크이밸(K-BankEval)' 연구 논문이 국제학술대회 'ICAIF 2026' 워크숍에 채택됐다고 17일 밝혔다. 논문은 ICAIF '금융 인공지능(AI) 보안·안전성·프라이버시 워크숍'에 채택됐다.

채택된 논문은 '케이-뱅크이밸: 한국의 은행 업무에 적합한 LLM 선정을 위한 요구사항 기반 벤치마크'이다. 신한은행이 은행 업무에 필요한 AI 평가 기준과 연구 방향을 제시하고, 셀렉트스타가 AI 평가 기술을 적용했다.

케이 뱅크이밸은 금융지식, 검색증강생성(RAG), 금융 업무 도구 활용, 금융추론, 답변 안전성, AI 에이전트 업무 계획 6개 영역 5000개 평가 항목으로 구성됐다. 은행 업무별로 적합한 AI 모델을 선정하고 범용 LLM 평가의 한계를 보완하기 위해 개발됐다.

금융 소비자 보호 관점을 반영한 은행 특화 안전성 체계도 설계했다. 질의응답 정확도뿐 아니라 답변 안전성과 AI의 도구 활용 적절성, 업무 수행 계획 구성 능력 등을 검증한다.

앞서 셀렉트스타가 금융보안원·한국과학기술원(KAIST)과 공동 개발한 금융 AI 안전성 평가체계 '핀레드(FinRED)' 논문은 국제학술학회 'IEEE ICDM' 메인 콘퍼런스에 채택됐다. 케이-뱅크이밸은 금융 AI의 업무 적합성을, 핀레드는 안전성을 평가하는 상호 보완적 기술이라고 설명했다.

김세엽 셀렉트스타 대표는 “이번 연구는 실제 은행 업무에서 요구되는 AI 역량을 구체화하고 객관적으로 평가할 수 있는 체계를 마련했다는 점에서 의미가 크다”며 “금융 AI의 업무 적합성과 안전성을 다각도로 검증하는 기술 역량을 강화하겠다”고 말했다.

앞서 셀렉트스타는 AI 의사결정을 지원하는 판단 특화 모델 '다비(DAVI)'를 공개했다. 다비는 질문 난이도에 따라 적절한 AI 모델을 선택하고 답변의 적절성을 평가하는 모델이다.

조벼리 기자 starry@etnews.com

  • ET Events