2026.07.14 화요일
검색
'AI안전성' 검색결과
기간검색
-
~
검색영역
검색어
-
뤼튼, 사용자위원회 출범…AI 윤리·안전성 강화 [경제일보] 생성형 인공지능(AI) 서비스 경쟁이 성능 중심에서 안전성과 신뢰 확보로 확대되고 있다. AI가 일상 속 서비스로 빠르게 자리 잡으면서 허위정보와 개인정보 보호, 편향성 등 다양한 사회적 이슈가 부각되자 국내 AI 기업들도 윤리 체계와 거버넌스 강화에 속도를 내는 것으로 풀이된다. 13일 AI 서비스 플랫폼 기업 뤼튼테크놀로지스는 사용자 보호와 서비스 신뢰성 강화를 위한 '사용자위원회'를 지난 10일 공식 출범했다고 밝혔다. 사용자위원회는 AI 서비스 정책과 제품 개발 과정에 외부 전문가의 의견을 반영하기 위해 마련됐다. AI 윤리와 철학, 심리학, 법률 등 다양한 분야 전문가들이 사용자 관점에서 서비스를 점검하고 개선 방향을 제안하는 역할을 맡는다. 이를 통해 기술 중심의 의사결정에서 벗어나 이용자 보호와 신뢰성을 고려한 서비스 운영 체계를 구축한다는 구상이다. 위원장은 이상욱 한양대 철학과 교수가 맡았으며, 선지원 한양대 법학전문대학원 교수, 이윤형 영남대 심리학과 교수, 황혜진 법무법인 디엘지 변호사가 위원으로 참여한다. 각 위원은 AI 윤리와 법·제도, 이용자 심리 등 전문 분야를 바탕으로 서비스 정책과 제품 개발 과정에서 발생할 수 있는 다양한 이슈를 검토하고, 사용자 보호 관점에서 개선 방향을 제시할 예정이다. 최근 생성형 AI 서비스는 빠른 확산과 함께 신뢰성 확보가 핵심 과제로 떠오르고 있다. AI가 생성한 허위정보와 개인정보 보호, 편향성, 청소년 보호 등 다양한 문제가 제기되면서 글로벌 빅테크는 물론 국내 AI 기업들도 자체 안전 기준과 윤리 체계를 강화하고 있다. IT 업계에서는 단순히 모델 성능을 높이는 것을 넘어 이용자가 안심하고 서비스를 사용할 수 있는 환경을 구축하는 것이 경쟁력으로 이어질 것으로 평가하고 있다. 이에 뤼튼은 사용자위원회를 통해 서비스 정책과 제품 개발 전반에 외부 전문가의 시각을 선제적으로 반영하고, 사용자 보호 체계를 한층 강화한다는 방침이다. 특히 AI 윤리와 법률, 심리 등 다양한 분야의 전문성을 바탕으로 이용자 관점에서 서비스를 점검하고, 위원회에서 제시된 의견을 실제 제품과 정책 개선에 적극 반영해 AI 서비스의 신뢰성을 높여 나간다는 계획이다. 뤼튼은 향후 사용자위원회를 정기적으로 운영하며 AI 서비스의 안전성과 신뢰성을 높이기 위한 정책과 제품 개선을 지속 추진할 계획이다. 위원회에서 논의된 의견을 서비스 운영과 기능 개선 과정에 반영하고, 변화하는 AI 환경에 맞춰 이용자 보호 체계도 지속 고도화한다는 방침이다. 이세영 대표는 "뤼튼은 지난 몇 년간 빠르게 성장했지만, 성장의 속도가 붙을수록 '기술의 편리함 뒤에서 놓치고 있는 책임은 없는가'라는 질문이 무거워졌고, 이에 부응해 책임을 다해야 한다고 믿는다"며 "모두가 AI를 자연스럽게 삶의 일부로 사용하는 세상에서, 누구에게나 안전하고 신뢰 가능한 서비스를 지향하고 있다"고 말했다. 이어 "외부 전문가 위원 분들의 소중한 목소리를 경청하고 실제 제품과 정책에 성실히 반영하겠다"고 덧붙였다.2026-07-13 08:19:15
-
KT, AI 신뢰 인프라 구축 나선다…UN·ITU와 글로벌 표준 협력 [경제일보] 사람을 대신해 스스로 판단하고 업무를 수행하는 '에이전틱 AI(인공지능)' 시대가 다가오면서 AI의 신원과 권한, 책임을 검증하는 '디지털 신뢰' 구축이 글로벌 핵심 과제로 떠오르고 있다. 이에 KT는 유엔(UN)과 국제전기통신연합(ITU)이 주관하는 국제 행사에 참여해 AI 신뢰 체계 구축과 글로벌 표준화 방향을 구상하고 있다. 9일 KT는 스위스 제네바에서 열린 'AI 포 굿 글로벌 서밋'과 UN '글로벌 AI 거버넌스 대화'에 참석해 책임감 있는 AI와 글로벌 AI 표준 협력 방안을 논의했다고 밝혔다. AI 포 굿 글로벌 서밋은 UN 산하 정보통신기술(ICT) 전문기구인 ITU가 주관하는 행사로, 정부와 산업계, 국제 표준기구 관계자들이 AI 기술의 발전 방향과 글로벌 협력 방안을 논의하는 자리다. 올해는 스스로 판단하고 행동하는 에이전틱 AI 시대를 맞아 디지털 신뢰와 AI 인프라 구축이 핵심 의제로 다뤄졌다. KT는 'AI 파운데이션: 모두를 위한 디지털 신뢰와 AI 인프라' 라운드테이블 세션에서 에이전틱 AI 시대에 필요한 '신뢰 기본 요소' 구축 방안을 제안했다고 설명했다. 신뢰 기본 요소는 AI가 누구를 대신해 행동하는지 확인하는 '신원', 어떤 권한을 위임받았는지에 대한 '동의', 수행한 행위를 객관적으로 증명할 수 있는 '검증 가능성' 등을 의미한다. 특히 KT는 향후 AI 서비스의 중심이 사람과 시스템 간 상호작용에서 AI 에이전트 중심으로 이동할 것으로 전망했다. 이에 따라 AI가 안전하게 의사결정을 수행하기 위해서는 특정 기업이나 플랫폼에 종속되지 않는 개방형 상호운용 표준과 중립적인 신뢰 인프라가 필요하다고 강조했다. 같은 날 열린 UN '글로벌 AI 거버넌스 대화'에도 참석해 AI 거버넌스 구축 방안과 국제 협력 방향을 논의했다. 지난해 출범한 글로벌 AI 거버넌스 대화는 각국 정부와 산업계, 학계가 안전하고 포용적인 AI 생태계 조성을 위한 협력 방안을 논의하는 국제 협의체다. 이번 행사에는 안토니오 구테흐스 UN 사무총장을 비롯해 튜링상 수상자인 요슈아 벤지오 교수, 브래드 스미스 마이크로소프트 사장 등 글로벌 AI 정책과 기술 분야 주요 인사들이 참석했다. KT는 '인권 존중·보호·증진: 투명성, 책임성 및 인간 개입' 세션에서 AI 기술이 발전하더라도 UN이 제시한 인권 원칙이 지속적으로 보장돼야 한다는 점을 강조했다. 또한 AI 안전성 확보를 위한 자체 정책과 거버넌스 체계를 구축해 운영하고 있으며, 이를 지니TV AI 에이전트 등 자사 AI 서비스에 적용하고 있다고 소개했다. 향후 UN과 협력해 AI 안전성과 관련한 예방·보호·감시 체계 마련에도 참여할 계획이다. 최근 글로벌 AI 산업에서는 생성형 AI를 넘어 에이전틱 AI 시대로 전환이 본격화되면서 AI의 안전성과 투명성, 책임성을 확보하기 위한 국제 표준 논의도 활발해지고 있다. AI가 금융과 의료, 공공서비스 등 다양한 영역에서 사람을 대신해 의사결정을 수행하는 사례가 늘어나면서 디지털 신뢰 체계 구축이 AI 산업 경쟁력을 좌우할 핵심 요소로 부상할 것으로 분석된다. 박완진 KT AX미래기술원 테크전략담당 상무는 "에이전트가 사람을 대신하는 시대에는 기술 혁신의 속도와 함께, 인간의 권리를 보장하고 상호 운용 가능한 디지털 신뢰를 구축하는 것이 무엇보다 중요하다"며 "KT는 AI 모델을 직접 개발하면서도 중립적인 신뢰 인프라를 함께 제공할 수 있는 사업자로서 글로벌 표준 논의에 책임 있게 기여하겠다"고 말했다.2026-07-09 10:05:26
-
AI도 한국 문화 맞춤 검증…KT, AI 안전성 벤치마크 'KSAFE-MM' 공개 [경제일보] KT가 한국 사회와 문화적 특성을 반영한 멀티모달 인공지능(AI) 안전성 평가 체계를 공개했다. 생성형 AI 확산으로 텍스트를 넘어 이미지와 음성까지 동시에 이해하는 멀티모달 AI 활용이 늘어나는 가운데 국내 환경에 맞는 안전성 검증 기준을 마련해 AI 신뢰성 확보에 나서겠다는 전략으로 풀이된다. 16일 KT는 고려대학교와 공동으로 개발한 멀티모달 대형언어모델(MLLM) 안전성 벤치마크 'KSAFE-MM'을 공개했다고 밝혔다. 최근 생성형 AI 시장은 텍스트 중심 서비스에서 이미지와 음성, 영상까지 통합적으로 처리하는 멀티모달 AI 중심으로 빠르게 진화하고 있다. 다만 AI 모델의 활용 범위가 확대될수록 허위정보 생성, 편향성, 유해 콘텐츠 노출, 개인정보 침해 등 안전성 이슈 역시 함께 커지고 있는 것으로 알려졌다. 특히 글로벌 AI 기업들이 개발한 안전성 평가 기준은 영어권 문화와 사회 환경을 중심으로 설계돼 국내 이용 환경과 문화적 특수성을 충분히 반영하지 못한다는 한계도 제기돼 왔다. 이에 KT와 고려대는 해당 문제를 해결하기 위해 'KSAFE-MM'을 공동 개발했다고 설명했다. 'KSAFE-MM'은 한국 사회의 문화적·사회적 맥락을 반영한 멀티모달 AI 안전성 평가 체계로, 글로벌 공통 위험 요소를 한국 문화 환경에 맞게 재구성한 'KSAFE-MM-G'와 전세 사기, 독도 분쟁 등 국내 특수 이슈를 반영한 'KSAFE-MM-C'로 구성된다. 전체 평가 데이터는 총 1만4135개 샘플 규모다. 연구진은 해당 벤치마크를 활용해 구글의 '젬마'와 네이버의 '하이퍼클로바 X'를 비롯한 12개 글로벌 멀티모달 AI 모델의 안전성을 검증했다. 이번 연구의 가장 큰 특징은 벤치마크 구축 과정을 자동화한 것이다. 기존 AI 안전성 벤치마크는 전문가가 데이터를 수집하고 검수하는 방식이 대부분으로 많은 비용과 시간이 필요했다. 반면 KSAFE-MM은 현지 커뮤니티 기반 민감 주제 수집, 템플릿 기반 질의 생성, 합성 이미지 제작, 탈옥 질의 생성까지 전 과정을 자동화한 4단계 파이프라인을 구축했다. KT와 고려대 연구진은 동일한 파이프라인을 일본어 환경에 적용한 파일럿 프로젝트 'JSAFE-MM-C'도 진행했다. 연구진은 이를 통해 해당 프레임워크가 한국뿐 아니라 다양한 국가와 문화권에서도 활용 가능한 범용 안전성 평가 체계임을 확인했다고 설명했다. 업계에서는 생성형 AI 규제 논의가 본격화되는 가운데 AI 안전성 평가 체계의 중요성이 더욱 커질 것으로 전망하고 있다. 특히 기업들은 AI 서비스 출시 전 위험 요소를 점검하는 레드팀 테스트와 가드레일 모델 검증 수요가 늘어나고 있어 실질적인 활용도가 높을 것으로 분석된다. KT는 이번 연구 결과를 실제 AI 서비스 안전성 검증과 모델 평가, 위험 분석 등에 활용할 계획이다. 연구 결과와 벤치마크 데이터는 '아카이브'와 '허깅페이스'를 통해 공개돼 학계와 산업계가 자유롭게 활용할 수 있다. KT는 최근 다국어 AI 안전성 벤치마크 'XL-세이프티벤치'를 공개한 데 이어 KSAFE-MM을 선보이며 한국형 AI 안전성 평가 체계 구축을 확대하고 있다. KT는 책임 있는 AI 전담 조직을 중심으로 안전성 분류 체계와 평가 로직 개발 등 관련 연구를 지속 추진한다는 방침이다. 박재형 KT AX미래기술원 프론티어 AI Lab장 상무는 "안전성 벤치마크의 공개는 단순한 데이터 배포를 넘어 AI 안전성 연구 생태계 전반이 함께 발전할 수 있는 기반을 만드는 일"이라며 "KSAFE-MM이 학계와 산업계에서 한국어·한국 문화 맥락의 AI 안전성을 검증하는 공통 기준으로 자리잡길 기대한다"고 말했다.2026-06-16 14:07:30
-
"서울대·카이스트 AI 석학 다 모였다" 카카오가 멘토단 꾸린 진짜 이유 [경제일보] 카카오(대표 정신아)가 국내 최고 수준의 인공지능(AI) 석학들과 손잡고 자사 AI 경쟁력 고도화에 나선다. 카카오는 학계 전문가 및 미래 인재와의 교류를 위한 AI 협력 프로그램 '카나나 스칼라'를 출범하고 전문가 자문 그룹 발족식을 진행했다고 9일 밝혔다. 이번에 꾸려진 카나나 스칼라 전문가 자문 그룹은 국내 주요 대학의 AI 및 컴퓨팅 분야 교수진 7명으로 구성됐다. 자문 그룹에는 김선주 연세대학교 첨단컴퓨팅학부 교수를 비롯해 김승룡 카이스트 교수와 신진우 카이스트 석좌교수 이주호 카이스트 교수 장준혁 한양대학교 교수 주한별 서울대학교 교수 최종현 서울대학교 교수 등 국내 AI 연구를 주도하는 핵심 인물들이 대거 합류해 카카오의 기술과 서비스 전반에 대한 자문을 제공한다. 카카오는 앞서 지난 3월6일 발족식을 열고 자문 방향과 연간 아젠다를 확정했다. 이들은 향후 카나나 파운데이션 모델을 기반으로 기기 자체에서 구동되는 온디바이스 AI와 스스로 목표를 설정하고 과업을 수행하는 에이전틱 AI 그리고 최근 글로벌 규제 핵심으로 떠오른 AI 안전성 등 주요 기술 전략을 집중적으로 점검한다. 카카오는 정기적인 교류를 바탕으로 전략 실행력을 끌어올리고 급변하는 산업 변화에 대응할 통찰력을 확보한다는 방침이다. 발족식에 참여한 교수진은 AI가 서비스와 플랫폼 전반에 빠르게 확산하며 기업의 현안과 학계의 연구 주제가 점점 더 밀접해지고 있다며 산업계의 문제의식과 학계 연구가 유기적으로 연결될 때 실질적인 성과로 이어질 수 있을 것이라고 뜻을 모았다. 카카오의 이번 산학 협력 행보는 치열해지는 글로벌 AI 패권 경쟁 속에서 자체 기술 생태계를 방어하고 미래 인재를 선점하기 위한 전략적 포석으로 풀이된다. 2026년 현재 글로벌 빅테크들은 천문학적인 자본을 투입해 초거대 AI 모델 고도화와 에이전트 서비스 선점에 사활을 걸고 있다. 국내에서도 경쟁 플랫폼과 통신사들이 자체 모델과 특화 서비스를 쏟아내는 가운데 카카오 역시 메신저 플랫폼 기반의 카나나 서비스 안착을 위해 학계의 객관적인 검증과 기술적 돌파구가 절실한 상황이다. 특히 AI 안전성과 윤리 문제가 각국 정부의 규제 대상으로 부상하면서 학계와의 공조를 통한 투명성 확보는 기업의 필수 생존 요건이 됐다. 카카오는 이러한 흐름에 발맞춰 국내 석학들의 지식을 서비스 설계 초기 단계부터 반영해 리스크를 최소화하고 신뢰도를 높이려는 의도를 뚜렷하게 드러내고 있다. 이에 더해 카카오는 전문가 자문 그룹 운영에 그치지 않고 대학생 및 청년층을 대상으로 한 학계 교류 프로그램도 확대 운영할 예정이다. 다양한 분야의 외부 연사를 초빙한 강연과 소통 프로그램을 통해 만성적인 구인난에 시달리는 첨단 기술 산업계에서 우수 인재와의 접점을 넓히고 잠재적인 채용 파이프라인을 구축하겠다는 계획이다. 카카오 관계자는 국내 최고 수준의 AI 및 ICT 전문가들과 지속적인 논의를 거쳐 카카오 AI의 강점과 방향성을 더욱 정교하게 다듬어 갈 것이라며 학계 전반을 아우르는 다양한 프로그램을 통해 기술과 서비스의 발전 방향을 모색하겠다고 말했다.2026-03-09 17:38:16
많이 본 뉴스
영상
Youtube 바로가기
![[사설] 환율 안정에 안주할 때 아니다…외환 방어력 키울 골든 타임이다](https://image.ajunews.com/content/image/2026/07/13/20260713092838404021_518_323.jpg)