전체기사 최신뉴스 GAM 라씨로
KYD 디데이
산업 생활경제

속보

더보기

[김정호의 4차혁명 오딧세이] 인공지능을 위한 인공데이터 생산

기사입력 : 2019년12월16일 08:00

최종수정 : 2020년03월10일 16:44

[편집자] 4차 산업혁명은 모든 사물과 인간을 연결하여 빅데이터를 모으고, 이를 이용하여 인공지능으로 학습해, 결국 인공지능이 인간을 대체하는 시대를 말한다. 이러한 4차 산업혁명의 물결이 산업뿐만 아니라 경제, 사회, 정치 등 전 분야에 걸쳐서 막대한 변화를 일으키고 있다.

글로벌뉴스통신사 뉴스핌은 '김정호의 4차혁명 오딧세이' 칼럼을 매주 연재하며 4차 산업혁명의 본질과 영향, 그리고 전망을 독자들에게 쉽게 소개하고자 한다. 4차 산업혁명의 핵심은 바로 인공지능, 빅데이터, 클라우드 컴퓨팅으로 표현할 수 있으며 그 핵심 부품이 반도체이다. 이들 핵심 기술의 개념과 원리, 응용을 설명하여 일반 독자들이 4차 산업혁명에 대해서 공감하고 이해하며 더 나아가 개인과 기업, 국가의 미래를 계획하는 것을 돕고자 한다.

김정호 카이스트(KAIST) 전기 및 전자공학과 교수는 서울대 전기공학과를 졸업하고 미국 미시건대에서 박사 학위를 받았다. AI대학원 겸임교수, IEEE펠로우, 카이스트 ICT석좌교수, 한화 국방 인공지능 융합연구 센터장, 삼성전자 산학협력센터장 등을 겸하고 있다.

데이터가 필요한 인공지능 학습

인공지능 중에서 데이터로 학습하는 방식을 기계학습(Machine Learning)이라고 하고, 그 기계학습 중에서 데이터에 이름(Label)을 붙여서 학습하는 방식을 지도학습(Supervised Learning)이라고 한다.

김정호 교수

데이터에 이름을 붙여야 하는 인공지능 학습 방식이다. 대표적으로 이미지를 인식하는 CNN(Convolutional Neural Network) 알고리즘이 이 방식의 인공지능이 된다. 이미지와 이름을 보고 학습해서 물체를 판단해 낸다.

그런데 이러한 지도학습 방법은 많은 비용과 노동력이 필요해서 결국 시간과 자본이 들어간다. CNN 학습을 위해서는 수백만 장, 수천만 장의 사진을 모으고, 그 사진에 이름을 붙여야 한다. 이러한 작업에 개인이 자발적으로 이름을 붙일 수 있으나 그 한계가 있다.

구글과 페이스북은 인터넷과 SNS로부터 수많은 데이터인 사진 이미지를 모은다. 여기에 모두 직접 사람이 이름을 붙이기는 불가능에 가깝다. 그래서 구글과 페이스북은 사진 상황을 보거나, 해시태그를 이용해서 자동으로 그림에 이름을 붙이는 인공지능 알고리즘 연구를 하기도 한다. 이것이 모두 데이터에 이름을 붙이는 데 필요한 노력이다. 인공지능이 학습하는 데 필요한 비용이다. 데이터와 이름은 무료가 아니다.

사람 중에 똑똑한 사람을 '하나를 알려주면 열을 안다'라고 표현하기도 한다. 학생을 지도하다 보면 그런 학생을 종종 만난다. 나중에는 그 학생이 오히려 나에게 스승이 된다. 그런 학생들을 통해서 거꾸로 배운다. 이럴 때 학교에 있는 교수로 최고의 기쁨을 느낀다. 이런 학생은 스스로 학습하고 연구하는 독자적인 학습과 연구 수행능력을 갖추게 된다.

인공지능을 지도할 때도 마찬가지이다. 학습을 줄이고 최대한 인공지능의 지능을 높이고자 연구한다. 그러면 데이터 모집과 이름 붙이기 수고가 줄어들 수 있다. 그럼 척척 알아서 학습하게 된다.

CNN을 이용한 이미지 분류 및 탐지 방법. [출처=KAIST]

최소한의 데이터로 인공지능 학습

이러한 연구 중, 최근에는 인공지능 연구로 전이학습(Transfer Learning)이라고 불리는 학습 방법이 있다. 한번 배운 학습 결과를 다른 곳에 다시 쓴다는 의미이다. 다시 말하면, 여러 번 배울 필요가 없다는 의미이다. 수학에서 기초 원리를 잘 파악하면 다양한 응용문제를 푸는 원리와 같다.

이처럼 한번 학습한 결과를 다른 응용에 적용하려는 시도를 전이학습(Transfer Learning)이라고 부른다. 학습과정에서 얻는 인공지능망의 구성과 변수도 다른 용도의 인공지능망으로 전이될 수 있다. 그럼 이를 전수한 새로운 인공지능 신경망은 학습량이 줄어든다. 아예 이러한 전체 과정을 스스로 할 수도 있다. 이 방법을 자체학습(Self-learning)이라고 부른다.

최근 연구하는 인공지능 학습 방법이다. 모두 학습 부담을 줄이고 데이터 필요 분량을 줄이려는 시도이다.

아예 한번 교육으로 모든 교육이 끝나는 단수학습(One short Learning) 방법에 대한 연구도 시작됐다. 수학에서 문제 하나만 풀어보면, 유사한 모든 문제를 푸는 능력이라 보면 된다. 천재를 키우는 인공지능 학습 방법으로 보면 된다.

예를 들면 어린이를 학습할 때, 공룡 사진 하나만 보여주면, 그 이름을 영원히 기억한다. 지금의 인공지능 학습은 많은 수의 사진을 보여주면서 학습하고 그 결과로 인공지능망이 정해진다. 단 한 번의 이미지 학습으로 인공지능망을 정하려는 시도인 셈이다.

매우 도전적이지만, 언제인가 인공지능이 이 단계에 도달할 것으로 본다. 이 학습 방법은 '하나를 가르쳐 주면 모든 것을 안다'라는 설명으로도 가능하다. 천재 학생 지도 방법이다. 이 방법 역시 데이터를 최소화하면서 인공지능을 학습하는 방법이라고 본다.

인공 데이터(Artificial Data)의 생성

인공지능에는 학습을 위한 데이터가 필요하다. 일반적으로 데이터가 많을수록 지능이 높아진다. 그래서 빅데이터를 모으려고 한다. 그래서 데이터도 인공적으로 만들려고 한다. 이를 필자는 인공 데이터(Artificial Data)라고 부른다. 인공지능(Artificial Intelligence)처럼 인공 데이터(Artificial Data)도 대세가 된다. 아예 사람의 도움을 받지 않고 인공지능 스스로가 인공지능 학습용 데이터를 만들 수 있는 세상이 된다.

데이터를 인공적으로 만드는 방법은 제일 먼저 원본 이미지를 변형하는 방법이다. 글자를 인식하는 CNN을 위한 손글씨 데이터를 만든다고 하면, 기본 데이터 글씨(MNIST)를 기초로 컴퓨터가 그 글씨체를 변형할 수 있다.

아래위로 길게 늘이거나, 글씨체 자체를 기울이게 할 수 있다. 또는 흐리게 만들거나, 가늘게 만들 수 있다. 이미지에 잡음을 넣을 수 있다. 바탕도 바꿀 수 있다. 또는 색깔을 다르게 입힐 수 있다. 또는 글자 크기를 키울 수도 있다. 컴퓨터와 알고리즘을 결합하면 한 장의 기본 글씨 이미지로 수백 장, 수천 장의 파생 데이터를 컴퓨터로 만들 수 있다.

이렇게 기본 데이터를 변형해 빅데이터를 만들 수 있다. 이 빅데이터는 다시 인공지능 학습에 쓰인다. 인공(Artificial)이 돌고 돈다.

처음부터 아예 컴퓨터가 스스로 데이터를 만들 수 있다. 그 데이터로 인공지능이 학습한다. 예를 들어 자율주행자동차를 위한 학습용 사고 장면 영상을 만든다고 가정하자. 자율주행자동차 학습을 위해 영상을 직접 만드는 것은 매우 위험하고 비싸다. 따라서 사고 영상을 컴퓨터로 인공적으로 만들어 이를 이용해서 인공지능이 학습하는 것이 효율적이다.

제목과 주제를 주면 컴퓨터가 3차원 영상과 이미지를 만들어 내는 연구가 진행 중이다. 그렇게 되면 인공지능이 경험하는 세계도 인공적으로 컴퓨터로 만들어진다. 데이터를 만드는 시간과 비용, 수량의 한계를 인공 데이터 생성을 통해서 해결하려고 한다. 이런 방식을 필자는 데이터 증강(Data Augmentation)이라고 부르기도 한다.

그뿐만 아니라 강화학습(Reinforcement Learning)에서도 인공적으로 계산해서 학습한다. 강화학습에서는 게임을 하듯이 학습한다. 알파고가 이세돌 9단과 바둑을 둘 때 사용한 인공지능 학습 방법이다.

이제는 컴퓨터끼리 게임을 하면서 바둑 기보 데이터를 생산한다. 그러니 이 상황에서도 인공지능 학습을 위한 환경을 컴퓨터가 가상으로 만든다.

강화학습을 이용해서 공학 문제의 최적화 설계도 자동화하려는 시도가 시작되었다. 여기서도 컴퓨터 시뮬레이션으로 데이터가 만들어지고 이를 통해서 학습한다. 이렇게 되면 컴퓨터가 다 알아서 한다. 이제 학습에도 인간의 도움이 점점 덜 필요하게 된다. 학습도 컴퓨터가 담당한다.

CNN에서 손글씨 학습을 위해 사용되는 MINST(Modified national Institute of Standards and Technology) 데이터베이스 이미지. [출처=MINIST]

가상 데이터(Virtual Data)인 세상

인공지능 학습을 위한 데이터를 모으는데 개인의 정보보호와 특허 문제가 발생한다. 학습을 위해 모은 데이터의 주인은 누구이고, 그 개인의 정보는 어디까지 보호해야 할 것인가가 사회적, 법률적, 정치적 쟁점이 될 전망이다. 그래서 빅데이터를 모으기가 점점 더 어렵게 되었다.

그래서 인공지능을 위한 빅데이터를 컴퓨터로 인공으로 만드는 방법이 중요해진다. 앞으로 점점 더 그렇게 될 것으로 예측한다.

이렇게 만들어진 인공 데이터로 다시 인공지능망이 학습한다. 그 학습 결과는 다른 응용 분야로 전이된다. 그 인공지능으로 인공지능 데이터를 만든다. 이제 인간이 파고들 틈이 없다. 인공지능이 인공 데이터도 만들고, 학습도 스스로 한다. 미래 인공지능의 모습이다. 모두 컴퓨터의 성능과 메모리 반도체의 성능이 높아져 가능하다. 인공 세상(Artificial World)이다. 데이터도 가상화(Virtualization)된다. 

김정호 카이스트 전기 및 전자공학과 교수 joungho@kaist.ac.kr

[뉴스핌 베스트 기사]

사진
한덕수, 대선 출마 여부에 "노코멘트" [서울=뉴스핌] 이나영 기자=  한덕수 대통령 권한대행 국무총리는 미국의 관세 부과 조치에 대해 "맞대응하지 않을 것"이라는 입장을 밝혔다. 한 대행은 20일(현지시간) 영국 일간 파이낸셜타임스(FT)와의 인터뷰에서 "양측이 모두 윈-윈(win-win)할 수 있는 방법을 찾기 위해 노력할 것"이라고 전했다. 그는 "한국을 지금의 모습으로 만드는 데는 미국의 역할이 매우 컸다"며 "한국전쟁 이후 미국은 원조, 기술이전, 투자, 안전 보장을 제공했다. 이는 한국을 외국인에게 매우 편안한 투자 환경으로 만드는 데 도움이 됐다"고 강조했다. 이어 한 대행은 미국과의 통상 협상에서 한국의 대미 무역 흑자 축소 방안을 논의할 수 있다고 밝혔다. [서울=뉴스핌] 이길동 기자 = 한덕수 대통령 권한대행 겸 국무총리. 2025.03.24.gdlee@newspim.com 한 대행은 "협상에서 미국산 액화천연가스(LNG)와 상업용 항공기 구매 등을 포함해 대미 무역 흑자를 줄이기 위한 방안을 논의할 수 있다"며 "조선업 협력 증진도 미국이 동맹을 강화하는 데 도움이 될 것"이라고 밝혔다. 또한 FT는 "비관세 장벽을 낮추는 방안도 논의될 수 있다"고 한 대행이 언급했다고 전했다. 한 대행은 협상 과정에서 "일부 산업이 어려움을 겪을 수 있다"면서도, 양국 간 무역의 자유가 확대되면 "한국인의 이익도 증가할 것"이라고 밝혔다. FT는 방위비 분담금 재협상 여부에 대해서는 사안에 따라 재협상에 나설 수 있음을 시사했다고 전했다. 한편, 한 대행은 6·3 대통령선거 출마 여부에 대해 "아직 결정을 내리지 않았다"며 "노코멘트"라고 답했다. nylee54@newspim.com 2025-04-20 13:43
사진
호미들 중국 한한령 어떻게 뚫었나 [베이징=뉴스핌] 조용성 특파원 = 중국의 '한한령'(限韓令, 중국의 한류 제한령)이 해제되지 않은 상황에서 우리나라 가수가 중국에서 공연을 한 사실이 알려지며 그 배경에 관심이 모이고 있다. 18일 베이징 현지 업계에 따르면 우리나라 3인조 래퍼 '호미들'이 지난 12일 중국 후베이(湖北)성 우한(武漢)시에서 공연을 펼쳤다. 반응은 상당히 뜨거웠다. 중국인 관객들은 공연장에서 호미들의 노래를 따라 부르기도 하고, 음악에 맞춰 분위기를 만끽했다. 공연장 영상은 중국의 SNS에서도 퍼져나가며 관심을 받고 있다. 우리나라 국적 가수의 공연은 중국에서 8년 동안 성사되지 못했다. 세계적인 성공을 거둔 BTS도 중국 무대에 서지 못했다. 때문에 호미들의 공연이 중국 한한령 해제의 신호탄이 아니냐는 분석도 나오고 있다. 호미들 공연이 성사된 데 대해 중국 베이징 현지 문화콘텐츠 업계 관계자들은 공연이 소규모였다는 점과 공연이 성사된 도시가 우한이었다는 두 가지 요인을 지목했다. 호미들이 공연한 우한의 우한칸젠잔옌중신(武漢看見展演中心)은 소규모 공연장이다. 호미들의 공연에도 약 600여 명의 관객이 입장한 것으로 전해진다. 중국에서 800명 이하 공연장에서의 공연은 정식 문화공연 허가를 받지 않아도 된다. 중국에서는 공연 규모와 파급력에 따라 성(省) 지방정부 혹은 시정부가 공연을 허가한다. 지방정부가 허가 여부를 판단하지 못할 경우 중앙정부에 허가 판단을 요청한다. 한한령 상황에서 우리나라 가수의 문화공연은 사실상 금지된 상황이었다. 호미들의 공연은 '마니하숴러(馬尼哈梭樂)'라는 이름의 중국 공연기획사가 준비했다. 이 기획사는 공연허가가 아닌 청년교류 허가를 받아서 공연을 성사시킨 것으로 전해지고 있다. 이와 함께 우한시의 개방적인 분위기도 공연 성사에 큰 역할을 한 것으로 평가되고 있다. 우한에는 대학이 밀집해 있으며 청년 인구 비중이 높다. 때문에 우한에는 다양한 문화 콘텐츠에 대한 수요가 높다. 게다가 젊은 층이 많은 만큼 우한에서는 실험적인 정책이 시행되어 왔다. 우한시는 중국에서는 최초로 시 전역에서 무인택시를 운영하게끔 허가하기도 했다. 리스크를 감수하면서 파격적인 정책이 발표되는 우한인 만큼, 한한령 상황임에도 호미들의 공연이 성사됐을 것이라는 평가가 나온다. 베이징의 한 문화업체 관계자는 "우한시가 개방적이라는 점에도 불구하고, 호미들의 공연은 소극적인 홍보 활동만이 펼쳐지는 한계를 보였다"며 "공연기획사 역시 한한령 상황을 의식하지 않을 수 없었을 것"이라고 설명했다. 또 다른 현지 문화콘텐츠 업체 관계자는 "현재로서는 한국의 최정상급 가수가 대규모 콘서트를 개최하는 것은 사실상 불가능하다"며 "어서 빨리 한한령이 해제되기를 기대하고 있지만, 한한령이 해제될 것이라는 시그널은 아직 중국 내에서 감지되고 있지 않다"고 언급했다. 호미들의 중국 우한 공연 모습 [사진=더우인 캡처] ys1744@newspim.com 2025-04-18 13:10
안다쇼핑
Top으로 이동