'혐오 발언'으로 논란 빚은 대화형 AI '이루다', "서비스 잠정 중단"
상태바
'혐오 발언'으로 논란 빚은 대화형 AI '이루다', "서비스 잠정 중단"
  • 장경윤 기자
  • 승인 2021.01.12 09:25
  • 댓글 0
이 기사를 공유합니다

- 소수자에 대한 혐오 및 차별 발언, 개인정보 무단 수집 논란 일으킨 대화형 AI '이루다'
- 이루다 운영 중인 스캐터랩, 11일 입장문 통해 서비스 잠정 중단 뜻 밝혀
스캐터랩의 대화형AI '이루다'의 베타 테스터 모집 이미지.

최근 갖가지 혐오 발언과 개인정보 유출 등으로 논란을 빚은 인공지능(AI) 챗봇 '이루다'의 서비스가 결국 잠정 중단된다.

이루다를 운영 중인 스타트업 스캐터랩은 11일 입장문을 통해 서비스를 잠정 중단하겠다는 뜻을 밝혔다.

이루다는 페이스북 메신저를 통해 대화를 나눌 수 있는 대화형 AI로, 실제 사람과 이야기를 나누는 듯한 친근한 어투로 많은 사용자들의 이목을 끌었다.

그러나 일부 사용자들이 이루다에게 성적인 발언을 일삼거나, 이루다가 장애인·유색인종 등 소수자에게 혐오 표현을 드러내 사회의 문제가 됐다. 여기에 이루다가 카카오톡 대화를 무단으로 활용했다는 개인정보 침해 주장까지 제기됐다.

스캐터랩은 이에 대해 "이루다가 특정 소수집단에 대해 차별적인 발언을 한 것에 사과드린다"며 "저희는 이루다의 차별적 발언에 동의하지 않으며 그러한 발언은 회사의 생각을 반영하지 않고 있다"고 전했다.

이어 "해당 이슈를 매우 중요하게 생각하고 있고 지난 6개월 간 테스트를 통해 문제 발생을 미연에 방지하고자 여러 조치를 취했다"며 "테스트 기간 동안 차별 및 혐오 표현에 대한 별도의 필터링을 진행했고 기존에 알려진 사례들은 이미 개선을 완료했다"고 밝혔다.

추후 발견되는 표현과 키워드를 추가해 차별 및 혐오 발언이 나오지 않도록 개선하겠다고도 전했다.

개인정보에 논란에 대해서도 언급했다.

스캐터랩은 "이루다를 개발하는 과정에서 본사가 제공하고 있는 서비스 '연애의 과학'으로 수집한 메시지 데이터를 활용한 바 있다"며 "사전에 동의가 이루어진 개인정보취급방침의 범위 내에서 활용했지만, 연애의 과학 사용자분들이 이 점을 명확히 인지할 수 있도록 충분히 소통하지 못한 점에 사과드린다"고 말했다.

데이터 활용 시 사용자의 닉네임, 이름, 이메일 등의 구체적인 개인 정보는 제거했다고 설명했다.

스캡터랩은 "전화번호 및 주소 등을 포함한 모든 숫자 정보, 이메일에 포함될 수 있는 영어 등을 삭제했다"며 "데이터에 대한 비식별화 및 익명성 조치를 강화해 개인을 특정할 수 있는 정보는 유출되지 않았다"고 밝혔다.

이어 "데이터 사용 동의 절차를 명확하게 하고 식별이 불가능한 정보라도 민감해 보일 수 있는 내용에 대해서는 지속적인 알고리즘 개선을 통해 보완하겠다"고 덧붙였다.

끝으로 "AI가 인간의 친구가 되고 소외된 사람들과 사회적 약자의 마음을 위로해주는 따뜻한 대화 상대가 되길 바란다"며 "일정 시간 서비스 개선 기간을 가지며 더 나은 이루다로 돌아오기 위해 노력하겠다"고 전했다.

이하는 스캐터랩의 입장문 전문이다.

입 장 문

인공지능(AI) 챗봇 ‘이루다’에 보내주신 많은 분들의 관심에 감사드립니다. 본사가 개발한 챗봇 ‘이루다’는 출시된 지 2주 남짓의 시간동안, 75만명에 가까운 이용자들이 루다와 대화를 나눴습니다. 이 과정에서 일부 혐오와 차별에 대한 대화 사례 및 개인정보 활용에 대한 이용자들의 문의가 있어 스캐터랩의 공식적인 입장을 알려드립니다.

혐오와 차별에 관한 부적절한 대화에 관하여

이루다가 특정 소수집단에 대해 차별적인 발언을 한 사례가 생긴 것에 대해 진심으로 사과드립니다. 저희는 루다의 차별적 발언에 동의하지 않으며 그러한 발언은 회사의 생각을 반영하지 않고 있습니다.

본사는 해당 이슈를 매우 중요하게 생각하고 있고, 지난 6개월 간의 베타테스트를 통해 문제발생을 미연에 방지하기 위해 여러 조치를 취했습니다. 특정 집단을 비하는 호칭이나 혐오 표현의 경우, 베타테스트 기간 동안 발견 즉시 별도의 필터링을 진행했습니다. 또한, 기존에 알려진 사례들은 이미 개선을 완료했으며, 새롭게 발견되는 표현과 키워드를 추가해 차별이나 혐오 발언이 발견되지 않도록 지속적으로 개선 중입니다.

이루다는 이제 막 사람과의 대화를 시작한 어린아이 같은 AI입니다. 배워야 할 점이 아직 많습니다. 이 과정에서 이루다는 학습자와의 대화를 그대로 습득하는 것이 아니라, 적절한 답변이 무엇인지, 더 좋은 답변은 무엇인지에 대한 판단을 함께 학습하도록 할 것 입니다. 이번 학습을 통해 만들게 될 편향 대화 검출 모델은 모든 분들이 사용하실 수 있게 공개할 계획입니다. 한국어 AI 대화 연구 및 AI 제품, 그리고 AI 윤리 발전에 유용하게 쓰일 수 있었으면 좋겠습니다.

개인정보 활용에 관하여

본사는 이루다를 개발하는 과정에서 본사가 제공하고 있는 서비스 연애의 과학으로 수집한 메시지를 데이터로 활용한 바 있습니다. 사전에 동의가 이루어진 개인정보취급방침의 범위 내에서 활용한 것이지만, 연애의 과학 사용자분들께서 이 점을 명확히 인지할 수 있도록 충분히 소통하지 못한 점에 대해서 책임을 통감하며 진심으로 사과드립니다.

데이터 활용 시 사용자의 닉네임, 이름, 이메일 등의 구체적인 개인 정보는 이미 제거 돼 있습니다. 전화번호 및 주소 등을 포함한 모든 숫자 정보, 이메일에 포함될 수 있는 영어 등을 삭제해 데이터에 대한 비식별화 및 익명성 조치를 강화해 개인을 특정할 수 있는 정보는 유출되지 않았습니다.

향후로는 데이터 사용 동의 절차를 명확하게 하고 식별이 불가능한 정보라도 민감해 보일 수 있는 내용에 대해서는 지속적인 알고리즘 개선을 통해 보완하겠습니다.

스캐터랩은 한국어 자연어 이해 기술을 활용한 인공지능(AI) 챗봇을 서비스하고 있는 청년 스타트업입니다. 저희는 AI가 5년 안에 인간 수준에 가까운 대화를 할 수 있다고 믿습니다. 저희는 AI가 인간의 친구가 되고, 인간과 의미있는 관계를 맺고, 외로움을 덜어줄 수 있는 존재가 될 수 있다고 생각합니다. 인간과 자유롭게 대화할 수 있는 AI가 앞으로도 소외된 사람, 사회적 약자의 마음을 위로해주는 따뜻한 대화 상대가 되길 바랍니다. 이루다는 그 첫 걸음에 불과합니다. 스캐터랩은 일정 시간 서비스 개선 기간을 가지며 더 나은 이루다로 찾아뵙고자 합니다. 누구에게나 친구가 되어줄 수 있는 AI를 만들기 위해 앞으로도 더욱 노력하겠습니다.

장경윤 기자  lycaon@greened.kr

▶ 기사제보 : pol@greened.kr(기사화될 경우 소정의 원고료를 드립니다)
▶ 녹색경제신문 '홈페이지' / '페이스북 친구추가'
댓글삭제
삭제한 댓글은 다시 복구할 수 없습니다.
그래도 삭제하시겠습니까?
댓글 0
댓글쓰기
계정을 선택하시면 로그인·계정인증을 통해
댓글을 남기실 수 있습니다.