‘한국 AI안전연구소’ 출범…AI 위협에 체계적·전문적 대응

5월 윤석열 대통령 주재 ‘AI서울정상회의’ 후속조치

AI 안전분야 기술·인력 육성 등…산·학·연 기관 24곳 업무협약 체결

2024.11.27 과학기술정보통신부

글자크기 설정

‘인공지능(AI)안전연구소’가 문을 열어 AI안전 분야의 경쟁력 있는 기술·인력을 육성하고 과학적 연구데이터에 근거한 AI안전 관련정책의 개발·선진화를 추진한다.

과학기술정보통신부는 27일 판교 글로벌 R&D센터에서 ‘AI안전연구소’ 개소식을 열었다. 이어, AI분야 국내 대표 산·학·연 기관 24곳이 참여해 AI안전에 관한 정책연구, 평가, 연구개발의 상호협력을 위한 업무협약(MOU)을 체결했다.

류광준 과학기술정보통신부 과학기술혁신본부장이 27일 오전 경기도 성남시 분당구 글로벌R&D센터에서 열린 ‘인공지능(AI)안전연구소 개소식’에서 기념촬영 하고 있다.(사진=과기정통부 제공)

지난 5월 ‘AI서울정상회의’에서 10개국 정상은 안전이 책임 있는 AI혁신을 위한 핵심요소임을 확인하고 ‘AI안전연구소’ 설립과 안전한 AI에 대한 글로벌 협력을 강조했다.

윤석열 대통령도 “대한민국 AI안전연구소 설립을 추진해 글로벌 AI안전성 강화를 위한 네트워크에 동참하겠다”고 밝혔다.

그동안 과기정통부는 연구소 조직·예산·인력·기능에 대한 면밀한 사전준비를 거쳐 ‘AI안전연구소’를 출범하게 됐다.

‘AI안전연구소’는 AI의 기술적 한계, 인간의 AI기술 오용, AI 통제력 상실 등으로 발생하는 다양한 AI위험에 체계적·전문적으로 대응하기 위한 AI안전연구 전담조직이다.

산·학·연 기관이 AI안전분야 연구 협력과 정보 교류를 할 수 있는 우리나라 AI안전연구 허브이자 국제 AI안전연구소 네트워크(10개국 참여)의 일원으로 안전한 AI를 위한 글로벌 연대의 책임있는 역할을 수행해 나갈 계획이다.

이를 통해 AI안전 분야의 경쟁력 있는 기술·인력을 육성하고 과학적 연구데이터에 근거한 AI안전 관련정책의 개발·선진화를 추진한다.

개소식에는 류광준 과기정통부 과기혁신본부장, 염재호 국가AI위원회 부위원장, 이경우 대통령실 AI·디지털 비서관 등 정부 주요 인사를 비롯해 오승필 KT CTO, 오혜연 카이스트 AI연구원장, 이은주 서울대 AI신뢰성 연구센터장, 방승찬 ETRI 원장 등 AI분야 산·학·연 핵심관계자 40여 명이 참석했다.

이날 국가AI위원회 글로벌 자문위원인 AI분야 세계적 석학 요슈아 벤지오 교수는 “서울선언에 따라 한국정부가 AI안전연구소를 설립하게 된 것을 축하한다”며 “AI안전연구소의 역할로 업계와 협업을 통한 위험 평가방법 연구·발전, AI안전성 요건 수립 지원, 국제협력을 통한 AI안전체계의 상호 조화가 중요하다”고 강조했다.

미국 엘리저베스 켈리(Elizabeth Kelly) AI안전연구소 소장은 “한국이 AI안전 증진을 위해 보여준 글로벌 리더십과 지원에 깊이 감사드린다”면서 “한-미 AI안전연구소가 전 세계 동료들과 함께 AI위험을 줄이고 혜택을 극대화하고 혁신을 촉진하기 위해 공통된 과학적 기준을 구축해 나가자”고 제안했다.

영국 올리버 일롯(Oliver Illot) AI안전연구소 소장과 아키코 무라카미 일 AI안전연구소 소장도 “한국 AI안전연구소 출범을 축하하며 AI기술을 안전하게 만들어 가기 위해 국경을 넘어선 협력을 확대해 나가자”고 말했다.

AI안전연구소 초대소장으로 임명된 김명주 소장은 ‘연구소 비전 및 운영계획’을 발표해 “AI활용으로 발생할 수 있는 제반 위험 평가와 이를 예방·극소화하기 위한 정책·기술을 개발·보급하고 국내·외 연대를 강화해 나가겠다”고 말했다.

그러면서 “연구소는 규제기관의 성격이 아니라, 국내 AI기업들이 글로벌 경쟁력을 확보하는 데 장애가 되는 위험요소들을 최소화하도록 지원하는 협력기관으로 역할을 하겠다”고 강조했다.

이어서 ‘대한민국 AI안전컨소시엄’ 협약식에서는 AI분야 국내 대표 산·학·연 기관 24곳이 참여해 AI안전에 관한 정책연구, 평가, 연구개발의 상호협력을 위한 업무협약(MOU)을 체결했다.

‘AI안전연구소’와 컨소시엄 참여기관이 함께 AI안전 프레임워크(위험 식별·평가·완화) 연구·개발·실증, AI안전관련 국제규범 대응 등 정책연구, AI안전관련 기술 협력 등을 중점적으로 추진할 계획으로, 향후 컨소시엄의 세부 연구주제와 운영방안을 구체화해 나갈 예정이다.

유상임 과기정통부 장관은 “AI안전은 지속가능한 AI발전의 전제로 AI분야에 종사하는 우리 모두가 함께 해결해야 할 가장 큰 도전 과제”라고 말했다.

특히 “지난 ‘영국 AI안전성 정상회의’, ‘AI서울정상회의’ 이후 불과 1년 만에 미국, 영국, 일본, 싱가포르, 캐나다 등 주요국이 모두 AI안전연구소를 설립하고 전례 없이 기민하고 체계적인 국제 AI안전 협력체계를 구축하고 있다”고 설명했다.

문의: 과학기술정보통신부 인공지능기반정책과(044-202-6262)