알파제로 뛰어넘는 뮤제로 등장... 룰조차 필요없어.jpg

ㅇㅇ · 2021.04.14 12:58:35

viewimage.php?id=23b8df35f1dd3bad&no=24b0d769e1d32ca73dec81fa11d028314d3faebecfec25ed6aa779bc795bf314e8cc29fa9d33990ef8cbc2ee4b68021e6408de2bd488a4250efac0d6f1503b68101d3515a4bb5643e6a339ad0376cdbb7794eec264a88bbdd4b64d4d5545d8131abe66a385c3a137

딥마인드가 알파고(AlphaGo), 알파고제로(AlphaGo Zero), 알파제로(AlphaZero)에 이어 '뮤제로(MuZero)'라는 또 다른 걸출한 인공지능(AI) 알고리즘을 세상에 내놨다.

인공지능(AI)의 한 분야인 강화학습 발전에 신기원을 이뤘고, 범용AI(일반지능AI)에 한발 더 다가섰다는 평가다. 특히 '뮤제로'는 이전 알파고들과 달리 게임 규칙을 모르는 상태(사전에 규칙을 알려주지 않은)에서 강화학습을 사용해 바둑과 체스, 쇼기(일본 장기)를 정복(마스터)했을 뿐 아니라 한발 더 나아가 알파제로가 하지 못한 아타리게임까지 마스터했다. '뮤(Mu)는 라틴어로 산이라는 뜻이다. '뮤제로'가 또 하나의 산을 넘었다는 의미로 보인다. BBC 등 외신에 따르면 딥마인드는 '뮤제로'를 지난 23일(현지시각) 국제학술지 ‘네이처’에 발표했다.

■뮤제로는 어떤 AI?

'뮤제로'는 딥마인드가 작년말 예비 논문에 처음 소개했고, 이번에 네이처에 전격 공개했다. 이전 알파고들과 달리 규칙이 주어지지 않았는데도(without rule) 바둑, 체스 쇼기는 물론 아타리 비디오 게임까지 정복(마스터)했다. 규칙이 없는 상태에서도 이전 알파고들 보다 나은 성과를 낸 것이다.

이전 알파고들은 바둑, 체스, 쇼기에서 사람을 이기는 놀라운 성과를 냈지만 모두 규칙을 줬었다. 반면 '뮤제로'는 사전에 게임 규칙을 입력해주지 않았음에도 바둑, 체스, 쇼기에서 보여줬던 알파고제로의 능력은 물론 알파고제로가 보여주지 못한 아타리 게임까지 정복했다.

경희대 이경전 교수는 "지난번 알파제로는 보드게임에만 적용된 건데 뮤제로는 복잡한 2D 그래픽이 있는 게임에서 57개 아타리 게임을 다 할 수 있는 학습 방법을 찾았다"면서 "어떤 문제를 해결하는 지능을 개발하려 할때 그 문제의 규칙(도메인 지식)을 몰라도 학습할 가능성을 보여줬다는 점에서 의미가 크다"고 설명했다. 이어 이 교수는 "뮤제로는 해상도가 96*96 정도인 2차원 게임 아타리 57개를 포함해 총 60종 게임을 정복했다"면서 "딥마인드 성과가 놀랍다"고 덧붙였다.

'뮤제로'에 대해 답마인드는 "알려지지 않은 환경(규칙을 제시하지 않은 환경)에서도 이기는 전략을 기획(planning)할 수 있는 능력을 갖췄다"고 설명했다. '뮤제로'를 개발한 이유에 대해 딥마인드 수석연구과학자 데이비드 실버(David Silve)는 BBC와의 인터뷰에서 "실제 사람 세계는 매우 복잡하고 혼란스럽다. 어떻게 돌아가는 지 누구도 룰북(rulebook)을 주지 않는다. 그럼에도 사람은 다음에 무얼 해야 할지 플랜과 전략을 세울 수 있다"고 설명했다. 즉, 사람처럼 규칙 없이도 플랜과 전략을 세울 수 있게 '뮤제로'를 개발했다는 것이다.

실버는 "세계가 어떻게 돌아가는 지 이해하는 걸 스스로 구축할 수 있고, 이 이해를 미리보기 기획에 적용한 시스템을 처음으로 개발했다"면서 "뮤제로는 무에서 출발했지만 시행착오를 거쳐 세상의 규칙은 물론 슈퍼맨과 같은 성능을 낼 수 있는 규칙들을 동시에 발견했다"고 강조했다.

'뮤제로'의 독특성은 학습 방법에 있다. 기존 AI처럼 모든 환경을 학습하지 않는다. 대신 환경의 가장 중요한 것만 학습한다. 이것을 가능케 하는 것이 플래닝이고, '뮤제로'는 이 플래닝 때문에 비범한 능력을 갖췄다. 이를 딥마인드는 이렇게 설명했다. 사람은 보통 먹구름이 몰려오면 비가 올까봐 우산을 갖고 가는데 이것이 플래닝이고 플래닝은 인간 지성의 중요한 부분으로 "우리 AI도 이런 플래닝 능력을 갖길 원했다"고 설명했다.

딥마인드는 이 모델을 '알파제로'가 갖고 있던 미리보기(lookahead) 트리 서치와 결합해 '뮤제로'라는 새로운 명물을 만들어 냈다. 보통 인공지능 연구자들은 문제를 해결하는 데 두 전략을 사용한다. 하나는 게임 규칙이나 지식에 기반한 의사결정 트리 검색, 즉 미리보기 검색이고 다른 하나는 모델 기반 학습이다. 게임 환경을 정확하게 모델링한 뒤 이를 기반으로 전략을 짜서 문제를 해결하는 방법이다. 하지만 가능한 모든 요소들을 모델에 넣으려면 매우 복잡한 계산이 필요하다. 특히 시각적 요소가 많은 비디오 게임은 이런 방식이 불가능하다. 이를 해결하기 위해 '뮤제로'는 게임의 전체 환경을 모델링하는 대신 각 의사결정 단계에서 가장 중요한 것만 모델링하는 방식을 취했다.

즉, 이전 인공지능에 비해 데이터를 매우 경제적으로 사용했다. 딥마인드는 "미즈 팩맨(Ms. Pac-Man) 같은 아타리 비디오 게임에서 '뮤제로'는 하나의 무브당 6~7가지 경우의 수밖에 고려하지 못하는 경우에도 게임을 훌륭히 치러냈다"고 설명했다. 훈련량이 많지 않았음에도 좋은 결과를 낸 것이다. 딥마인드는 아타리 게임을 훈련하는 데 단일 GPU로 2~3주 걸렸다고 말했다. 각 의사결정 단계에서 중요한 측면만 고려했기 때문이다.

실제, 그동안은 환경의 모든 면을 모델링하는 복잡성 때문에 아타리 같은 동영상이 풍부한 도메인과는 경쟁할 수 없었고, 현재까지 아타리와 경쟁한 가장 좋은 결과는 DQN, R2D2, 에이전트57 같은 모델프리시스템이다. 이들 모델프리시스템은 이름처럼 학습 모델을 사용하지 않고 대신 다음에 취할 가장 나은(베스트) 행동을 추정할 뿐이다

동영상 압축 등에 유용.. 군사용 자동살인무기로 악용될 우려도 있어

이전 알파제로는 화학, 양자물리학 등에 미적용되고 있다. 딥마인드는 "뮤제로의 파워풀한 러닝과 플래닝 알고리즘은 로보틱스, 산업 시스템, 게임의 룰이 알려지지 않은 다른 복잡한 현실 환경 문제를 해결하는데 신기원을 열 것"이라고 설명했다.

특히 딥마인드는 유튜브의 동영상 압축에 뮤제로를 적용하는 방법을 꾀하고 있다. 동영상 압축 효율을 높이면 유튜브 운영에 들어가는 비용을 줄일 수 있기 때문이다.

뮤제로는 지난해 11월 외부에 처음 공개됐는데 이후 미 공군이 뮤제로의 공개 버전을 응용해 적군의 미사일 발사체를 찾아내는 인공지능 알고리즘(ARTUMu)을 개발하기도 했다.

이 때문에 일각에서는 '뮤제로'의 악용 가능성에 대한 우려도 나왔다. 컴퓨터 과학자와 무기 전문가, 인권 단체들이 참여한 단체인 '스톱 킬러 로봇(Stop Killer Robots)'이 대표적인데 이 단체는 'ARTUMu'에 대해 "미 공군이 치명적인 자동 무기를 만드는데 한발 더 나아갔다"고 지적했다.

번호	제목	글쓴이	작성일	조회	추천
설문	SNS로 싸우면 절대 안 질 것 같은 고집 있는 스타는?	운영자	24/05/06	-	-
913952	20대 가 이상한게 아니라 이나라 인구구조가 원래 그따구인데 [1]	ㅇㅇ(222.106)	21.04.23	45	0
913951	오늘 삼성전자 방어하는거보고 진짜 미친주식이라고 생각함. [3]	ㅇㅇ(14.46)	21.04.23	278	0
913950	주식을 살때는 최대한 신중하게 조사하고 사야돼 [4]	ㅇㅇ(23.105)	21.04.23	121	0
913949	절대 사지마라	000(223.39)	21.04.23	75	0
913948	ㅋㅋㅋㅋㅋㅋㅋㅋㅋ 병신들 [6]	ㅇㅇ(211.58)	21.04.23	74	0
913947	어떤 주식을 살려고 마음 먹었으면 저점에서 사야 될거 아냐 [4]	ㅇㅇ(23.105)	21.04.23	139	0
913946	주갤할 시간에 고수들은 한진중공업으로 7000만원을 벌었습니다 [1]	ㅇㅇ(223.39)	21.04.23	152	0
913944	무슨 개나소나 주식 전문가인척 하고 다니냐 [3]	ㅇㅇ(27.115)	21.04.23	99	1
913943	좋아하는여자 생리혈매달먹기vs똥오줌매일먹기 [1]	ㅇㅇ(39.7)	21.04.23	88	0
913942	얼마전에 어떤 슈퍼개미가 베뉴지 사라고 해서 [1]	ㅇㅇ(211.237)	21.04.23	104	0
913941	섹시한 겨드랑이 ㅗㅜㅑ	ㅇㅇ(223.62)	21.04.23	139	1
913940	보험주 포트에 좀 넣어둘까? [9]	ㅇㅇ(49.166)	21.04.23	132	0
913939	주갤에서 훈수두는 새끼들 ip옆에 수익률,시드 표시해야된다 [1]	ㅇㅇ(180.230)	21.04.23	45	0
913938	루저들이라 일할 의욕이 없는거 아냐 [1]	ㅇㅇ(23.105)	21.04.23	27	0
913935	대한제당 본주는 얼마에 사면 적절함?	ㅇㅇㅇ(221.139)	21.04.23	86	0
913934	지금 20대들이 일할 의욕이 없는게 [2]	고운말(116.37)	21.04.23	210	4
913933	수익인증 [1]	332(121.170)	21.04.23	128	2
913932	삼성증권어플고수있냐	ㅇㅇ(223.38)	21.04.23	48	0
913931	나 정치에 관심없는데 이거 궁금함 [7]	ㅇㅇ(223.38)	21.04.23	102	0
913930	나 김민주 닮음 [1]	ㅇㅇ(223.38)	21.04.23	107	1
913929	원래 여성향수만으로 홀릴수가 있냐? [2]	ㅇㅇ(39.7)	21.04.23	60	0
913928	그리고 중요한게 오를때는 사면 안돼 [1]	ㅇㅇ(23.105)	21.04.23	55	0
913927	TS 사라고 했던놈 왜 그렇게 설레발 쳤는지 알겠네 [2]	XXXtentaci(1.247)	21.04.23	235	0
913926	갤에 나이제한좀 걸자 [3]	ㅇㅇ(175.223)	21.04.23	65	0
913924	단타 주식은 돈있는 새끼들이 쓸어가는 도박이더만 [3]	ㅇㅇ(27.115)	21.04.23	134	0
913922	30대가 소개팅에 가디건 걸치고 나가면 예의가 없는거냐? [2]	dd(122.34)	21.04.23	78	0
913921	코인 다시 오름	ㅇㅇ(211.58)	21.04.23	90	0
913920	금융 사기를 당하는 이유도 고소득을 보장한다는거에 속은거지	ㅇㅇ(23.105)	21.04.23	13	0
913919	나도 다음주 예상픽 [1]	000(223.39)	21.04.23	201	0
913917	많이 먹을려고 생각하고 종목을 찾으면 당하기가 쉬워	ㅇㅇ(23.105)	21.04.23	38	0
913915	바닥에 칠하는 왁스 만드는 회사도 전망이 있을까?	ㅇㅇ(211.237)	21.04.23	20	0
913914	몇년전에 어떤대학생 돈 비트코인으로잃고 과외해서복구햇다던데 [1]	182^^*(182.228)	21.04.23	67	0
913912	Hmm 장기운임계약 [2]	고양이는야옹하고운다	21.04.23	277	2
913911	삼성증권 새로가입했는데 15계좌에서 돈빼가냐?	ㅇㅇ(223.38)	21.04.23	28	0
913910	니들 단 하나의 운동만 한다면 뭐할거냐 [7]	ㅇㅇ(58.230)	21.04.23	127	0
913909	단타투기하는 외국인들하고 기관 구속시켜야돼	ㅇㅇ(27.115)	21.04.23	24	0
913906	13년도에 군대선임이 비트코인 이야기할때 헛소리 치부말껄 [2]	ㅇㅇ(121.164)	21.04.23	74	0
913904	진짜 문재인보유국 든든하다! [1]	ㅇㅇ(223.38)	21.04.23	74	1
913903	다음주 상한가 종목 [3]	ㅇㅇ(223.39)	21.04.23	350	3
913902	진짜 20대는 뽕맛간 애들 같다 [41]	ㅇㅇ(220.124)	21.04.23	1947	21
913901	KAI 떡상 기원 1일차	ㅇㅇ(223.33)	21.04.23	22	0
913900	회전율 높은게 은근 수익률 갉아먹더라 [2]	케말파샤	21.04.23	135	0
913899	빗코 천만원 넘었다고 난리칠때 살껄 [2]	ㅇㅇ(121.164)	21.04.23	84	0
913898	코인 다 떨어졌지? 지금 드가도 됨?	ㄹㅋㅋ(106.102)	21.04.23	30	0
913897	지금은 삼전 장투할때 아니라는 밑에글을보고^^ [3]	젓같다lh씨발것들아(121.174)	21.04.23	292	0
913896	삼성전자 차트로 보는 적정 가격은 6만5천원이야 [3]	ㅇㅇ(23.105)	21.04.23	163	1
913895	20대 한남이 최악의세대인건 맞음 [49]	ㅇㅇ(218.232)	21.04.23	9546	101
913894	삼성증권 종합 신규 수수료 혜택 없음?	ㅇㅇ(1.234)	21.04.23	38	0
913893	난 장투 마인드로 매수했다가 단타로 팔아치움 [1]	ㅇㅇ(211.237)	21.04.23	79	0
913890	지금 삼전 물린새끼들 몇층까지는 익절바라볼수있음? [2]	ㅇㅇ(223.38)	21.04.23	145	0

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[주식 갤러리]

갤러리 본문 영역

게시물을 간편하게 NFT로 만들어 보세요!

NFT 발행 방법

NFT 발행

비회원 글삭제,수정

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결