(사진=카카오뱅크)

카카오뱅크가 ‘AI 프로덕트 평가 프레임워크(이하 AI 프레임워크)’를 도입했다고 13일 밝혔다.

이는 AI 서비스 품질을 수치화하고 리스크를 체계적으로 관리하기 위한 AI 품질관리 표준 체계로, 현재 운영 중인 AI 검색·AI 금융계산기 등 기존 서비스는 물론 향후 공개될 신규 AI 서비스 전반에도 적용된다는 것.

카카오뱅크에 따르면 AI 프레임워크는 ▲서비스 기획 ▲모델 평가 ▲기능 테스트 ▲품질 및 신뢰성 검증 ▲보안 점검 ▲대고객 출시 ▲운영 및 개선 등 AI 서비스의 전 생애주기를 아우르는 관리 절차로 구성됐다.

특히 LLM(대형언어모델)의 특성상 같은 질문에도 답변이 달라질 수 있는 점을 보완하기 위해, 평가 결과를 수치화하고 반복 검증하는 정량 평가 체계를 통해 AI 응답의 불확실성 등 AI 리스크를 사전에 차단하고 개발 효율성과 안정성을 동시에 제고한다는 설명이다.

카카오뱅크 측은 이번 프레임워크 도입은 카뱅이 ‘AI 네이티브 뱅크’로 자리매김하고 있는 만큼 책임 있는 AI를 실천하고, AI 품질관리 표준을 제시하는 중요한 출발점이 될 것이라고 전했다.