네이버, 안전한 AI 생태계 구축 위해 ‘AI 안전성 실천 체계’ 공개

AI 통제력 상실·악용…위험 완화 및 대응 체계

2024-06-17     김성지 기자
사진=네이버

매일일보 = 김성지 기자  |  네이버가 2021년 ‘네이버 AI 윤리 준칙’, 2022년 ‘AI 윤리 자문 프로세스’에 이어 네이버의 한층 구체화된 AI 안전성 실천 체계를 공개했다.

네이버는 자체 기술 채널인 ‘채널 테크’를 통해 ‘네이버 ASF(AI Safety Framework)’를 발표했다고 17일 밝혔다.

네이버 ASF는 네이버가 AI 시스템을 개발하고 배포하는 과정의 모든 단계에서 AI의 잠재적 위험을 인식·평가·관리하기 위한 대응 체계로, AI 시스템이 초래할 수 있는 위험을 정의하고 이에 대응하기 위한 방법을 설계한 것이 특징이다.

먼저 인간이 AI 시스템에 영향을 미치지 못하게 되는 ‘통제력 상실 위험’을 완화하기 위해, ‘AI 위험 평가 스케일’을 통해 AI 시스템의 위험을 주기적으로 평가하고 관리한다. 현존 최고 성능의 AI 시스템을 ‘프런티어(frontier) AI’로 정의, 이 기술 수준에 해당하는 AI 시스템에 대해서는 3개월마다 위험 평가를 수행한다. 또한 시스템의 능력이 기존보다 6배 이상 급격히 증가한 경우에는 그 시점에 추가 평가가 이뤄진다.

네이버 ASF가 정의하는 AI 시스템의 또다른 잠재적 위험인 ‘악용’의 가능성에는 ‘AI 위험 평가 매트릭스’를 적용해 대응한다. AI 위험 평가 매트릭스는 AI 시스템의 사용 목적과 안전 조치의 필요성 정도에 따라 각각 다른 방법으로 위험을 관리한다. 

네이버는 문화적 다양성을 반영한 AI 안전성 체계로 네이버 ASF를 발전시켜나갈 계획이다. 한국 외 다른 지역의 정부 및 기업과 소버린 AI를 공동 개발하며 특정 문화권에서 성립될 수 있는 AI 시스템의 위험을 식별하고, 위험의 정도를 측정하는 벤치마크도 문화권의 특성을 반영해 고도화할 예정이다.

실제 네이버는 한국어를 기준으로 구축한 AI 안전성 강화 학습 데이터셋을 글로벌로 확장해나간 경험이 있다. 지난해 세계 최고 권위 자연어처리 학회 중 하나인 ‘ACL 2023’에서, 네이버는 종교, 도덕 등 사회적으로 첨예한 이슈에 대해 AI가 편향적으로 발화하는 문제를 완화하기 위한 새로운 대량의 한국어 데이터셋을 제안한 연구를 발표했다. 

최수연 네이버 대표이사는 “네이버는 소버린 AI ‘하이퍼클로바X’를 개발한 경험을 통해 문화·지정학적 상황과 지역적 이해가 AI의 성능뿐만 아니라 안전성에도 영향을 미친다는 점을 실증했다”며 “향후 네이버 ASF를 지속적으로 개선해 네이버가 지속 가능한 AI 생태계를 위해 적극 기여할 것”이라고 말했다.