알파제로 뛰어넘는 뮤제로 등장... 룰조차 필요없어.jpg

ㅇㅇ · 2021.04.14 12:58:35

viewimage.php?id=23b8df35f1dd3bad&no=24b0d769e1d32ca73dec81fa11d028314d3faebecfec25ed6aa779bc795bf314e8cc29fa9d33990ef8cbc2ee4b68021e6408de2bd488a4250efac0d6f1503b68101d3515a4bb5643e6a339ad0376cdbb7794eec264a88bbdd4b64d4d5545d8131abe66a385c3a137

딥마인드가 알파고(AlphaGo), 알파고제로(AlphaGo Zero), 알파제로(AlphaZero)에 이어 '뮤제로(MuZero)'라는 또 다른 걸출한 인공지능(AI) 알고리즘을 세상에 내놨다.

인공지능(AI)의 한 분야인 강화학습 발전에 신기원을 이뤘고, 범용AI(일반지능AI)에 한발 더 다가섰다는 평가다. 특히 '뮤제로'는 이전 알파고들과 달리 게임 규칙을 모르는 상태(사전에 규칙을 알려주지 않은)에서 강화학습을 사용해 바둑과 체스, 쇼기(일본 장기)를 정복(마스터)했을 뿐 아니라 한발 더 나아가 알파제로가 하지 못한 아타리게임까지 마스터했다. '뮤(Mu)는 라틴어로 산이라는 뜻이다. '뮤제로'가 또 하나의 산을 넘었다는 의미로 보인다. BBC 등 외신에 따르면 딥마인드는 '뮤제로'를 지난 23일(현지시각) 국제학술지 ‘네이처’에 발표했다.

■뮤제로는 어떤 AI?

'뮤제로'는 딥마인드가 작년말 예비 논문에 처음 소개했고, 이번에 네이처에 전격 공개했다. 이전 알파고들과 달리 규칙이 주어지지 않았는데도(without rule) 바둑, 체스 쇼기는 물론 아타리 비디오 게임까지 정복(마스터)했다. 규칙이 없는 상태에서도 이전 알파고들 보다 나은 성과를 낸 것이다.

이전 알파고들은 바둑, 체스, 쇼기에서 사람을 이기는 놀라운 성과를 냈지만 모두 규칙을 줬었다. 반면 '뮤제로'는 사전에 게임 규칙을 입력해주지 않았음에도 바둑, 체스, 쇼기에서 보여줬던 알파고제로의 능력은 물론 알파고제로가 보여주지 못한 아타리 게임까지 정복했다.

경희대 이경전 교수는 "지난번 알파제로는 보드게임에만 적용된 건데 뮤제로는 복잡한 2D 그래픽이 있는 게임에서 57개 아타리 게임을 다 할 수 있는 학습 방법을 찾았다"면서 "어떤 문제를 해결하는 지능을 개발하려 할때 그 문제의 규칙(도메인 지식)을 몰라도 학습할 가능성을 보여줬다는 점에서 의미가 크다"고 설명했다. 이어 이 교수는 "뮤제로는 해상도가 96*96 정도인 2차원 게임 아타리 57개를 포함해 총 60종 게임을 정복했다"면서 "딥마인드 성과가 놀랍다"고 덧붙였다.

'뮤제로'에 대해 답마인드는 "알려지지 않은 환경(규칙을 제시하지 않은 환경)에서도 이기는 전략을 기획(planning)할 수 있는 능력을 갖췄다"고 설명했다. '뮤제로'를 개발한 이유에 대해 딥마인드 수석연구과학자 데이비드 실버(David Silve)는 BBC와의 인터뷰에서 "실제 사람 세계는 매우 복잡하고 혼란스럽다. 어떻게 돌아가는 지 누구도 룰북(rulebook)을 주지 않는다. 그럼에도 사람은 다음에 무얼 해야 할지 플랜과 전략을 세울 수 있다"고 설명했다. 즉, 사람처럼 규칙 없이도 플랜과 전략을 세울 수 있게 '뮤제로'를 개발했다는 것이다.

실버는 "세계가 어떻게 돌아가는 지 이해하는 걸 스스로 구축할 수 있고, 이 이해를 미리보기 기획에 적용한 시스템을 처음으로 개발했다"면서 "뮤제로는 무에서 출발했지만 시행착오를 거쳐 세상의 규칙은 물론 슈퍼맨과 같은 성능을 낼 수 있는 규칙들을 동시에 발견했다"고 강조했다.

'뮤제로'의 독특성은 학습 방법에 있다. 기존 AI처럼 모든 환경을 학습하지 않는다. 대신 환경의 가장 중요한 것만 학습한다. 이것을 가능케 하는 것이 플래닝이고, '뮤제로'는 이 플래닝 때문에 비범한 능력을 갖췄다. 이를 딥마인드는 이렇게 설명했다. 사람은 보통 먹구름이 몰려오면 비가 올까봐 우산을 갖고 가는데 이것이 플래닝이고 플래닝은 인간 지성의 중요한 부분으로 "우리 AI도 이런 플래닝 능력을 갖길 원했다"고 설명했다.

딥마인드는 이 모델을 '알파제로'가 갖고 있던 미리보기(lookahead) 트리 서치와 결합해 '뮤제로'라는 새로운 명물을 만들어 냈다. 보통 인공지능 연구자들은 문제를 해결하는 데 두 전략을 사용한다. 하나는 게임 규칙이나 지식에 기반한 의사결정 트리 검색, 즉 미리보기 검색이고 다른 하나는 모델 기반 학습이다. 게임 환경을 정확하게 모델링한 뒤 이를 기반으로 전략을 짜서 문제를 해결하는 방법이다. 하지만 가능한 모든 요소들을 모델에 넣으려면 매우 복잡한 계산이 필요하다. 특히 시각적 요소가 많은 비디오 게임은 이런 방식이 불가능하다. 이를 해결하기 위해 '뮤제로'는 게임의 전체 환경을 모델링하는 대신 각 의사결정 단계에서 가장 중요한 것만 모델링하는 방식을 취했다.

즉, 이전 인공지능에 비해 데이터를 매우 경제적으로 사용했다. 딥마인드는 "미즈 팩맨(Ms. Pac-Man) 같은 아타리 비디오 게임에서 '뮤제로'는 하나의 무브당 6~7가지 경우의 수밖에 고려하지 못하는 경우에도 게임을 훌륭히 치러냈다"고 설명했다. 훈련량이 많지 않았음에도 좋은 결과를 낸 것이다. 딥마인드는 아타리 게임을 훈련하는 데 단일 GPU로 2~3주 걸렸다고 말했다. 각 의사결정 단계에서 중요한 측면만 고려했기 때문이다.

실제, 그동안은 환경의 모든 면을 모델링하는 복잡성 때문에 아타리 같은 동영상이 풍부한 도메인과는 경쟁할 수 없었고, 현재까지 아타리와 경쟁한 가장 좋은 결과는 DQN, R2D2, 에이전트57 같은 모델프리시스템이다. 이들 모델프리시스템은 이름처럼 학습 모델을 사용하지 않고 대신 다음에 취할 가장 나은(베스트) 행동을 추정할 뿐이다

동영상 압축 등에 유용.. 군사용 자동살인무기로 악용될 우려도 있어

이전 알파제로는 화학, 양자물리학 등에 미적용되고 있다. 딥마인드는 "뮤제로의 파워풀한 러닝과 플래닝 알고리즘은 로보틱스, 산업 시스템, 게임의 룰이 알려지지 않은 다른 복잡한 현실 환경 문제를 해결하는데 신기원을 열 것"이라고 설명했다.

특히 딥마인드는 유튜브의 동영상 압축에 뮤제로를 적용하는 방법을 꾀하고 있다. 동영상 압축 효율을 높이면 유튜브 운영에 들어가는 비용을 줄일 수 있기 때문이다.

뮤제로는 지난해 11월 외부에 처음 공개됐는데 이후 미 공군이 뮤제로의 공개 버전을 응용해 적군의 미사일 발사체를 찾아내는 인공지능 알고리즘(ARTUMu)을 개발하기도 했다.

이 때문에 일각에서는 '뮤제로'의 악용 가능성에 대한 우려도 나왔다. 컴퓨터 과학자와 무기 전문가, 인권 단체들이 참여한 단체인 '스톱 킬러 로봇(Stop Killer Robots)'이 대표적인데 이 단체는 'ARTUMu'에 대해 "미 공군이 치명적인 자동 무기를 만드는데 한발 더 나아갔다"고 지적했다.

번호	제목	글쓴이	작성일	조회	추천
설문	어떤 상황이 닥쳐도 지갑 절대 안 열 것 같은 스타는?	운영자	24/05/20	-	-
공지	▦주식 갤러리 용어/은어 길라잡이 초급에서 고급까지!! Ver 1.1 [481]	*우주방어*	11.09.26	244831	277
공지	주식 갤러리 이용 안내 [177]	운영자	20.05.08	62188	75
5260726	한녀들이 뭐라 지껄이든 불체자인건 변함없음	ㅇㅇ(221.141)	23:21	3	0
5260725	.	ㅇㅇ(211.234)	23:20	5	0
5260724	나도 한남이지만 국결할바엔 재기한다	ㅇㅇ(118.235)	23:20	7	2
5260723	쟤 동남아 열등감있는것도 욕먹어서임 [2]	25세 황근출(118.235)	23:20	16	1
5260722	임계점 돌파, 완전 잠식된 나거한, 앞으로가 기대된다	ㅇㅇ(1.251)	23:20	5	0
5260721	도태인셀 새끼들아 너그 통장잔고는 안녕하시냐?	KM-69	23:19	9	0
5260720	꼬우면 나거한 탈조선 하라니깐 븅신들아?? [4]	슈엔임신교배프레스	23:19	22	4
5260719	14수생은 벳녀한테도 차일 듯 한데	ㅇㅇ(222.234)	23:19	2	0
5260717	미혼 한남은 재기해야만 한다 [1]	ㅇㅇ(118.235)	23:18	11	0
5260716	아쉬운건 주갤노괴들은 n번방 끼고싶어도 못낀다는거임	주갤러(117.111)	23:18	5	0
5260715	한남은 한녀 까는데, 한녀는 동남아깜. 왜?	주갤러(119.192)	23:18	9	2
5260714	여자들 외모 상위 30%는 대부분	주갤러(211.199)	23:18	10	0
5260713	화가 많이 났구나 KM-69야 [2]	25세 황근출(118.235)	23:17	18	1
5260712	주갤이 ㄹㅇ 페미보다 더한 개병신 집단인 이유 [7]	슈엔임신교배프레스	23:17	22	3
5260711	잠깐만 공개한다 10초만준다 곧 삭제함	주갤러(45.143)	23:17	3	0
5260710	한녀랑 데이트하고싶으면 개추	주갤러(121.149)	23:17	19	3
5260709	얘네들 여시는 욕하는데 손정우는 쉴드치더라	ㅇㅇ(118.235)	23:17	10	0
5260708	주태남 인셀 새끼들아 이 나라 뜰 거면 제발 빨리 떠 씨발새끼들아	KM-69	23:17	5	0
5260707	주념댓좀 부탁합니다	123번뇌왕2	23:16	11	0
5260705	40쳐먹고 주한미군 사진 올리며 성희롱하는 노괴년들만 할까	ㅇㅇ(222.100)	23:16	7	0
5260704	러시아어 배우고 예쁜 러시아 여자 만나자	하네다(121.134)	23:16	4	0
5260702	한녀 연애 및 결혼은 인싸호소인들이 다 알아서 해주겠지	주갤러(1.237)	23:15	18	1
5260701	주갤러들만 보면 인간의 모든 감정의 근원은 성욕같음 [3]	슈엔임신교배프레스	23:15	18	2
5260700	너네같은 새끼들이 나대는 걸 보니 이 나라는 살만한 나라구나 [4]	KM-69	23:15	14	0
5260699	나 동남아 혼혈인데 혼혈 장단점 알려준다	ㅇㅇ(118.235)	23:15	10	0
5260698	메좇아지매는 뭐가 메좇아지매를 그렇게 만들었음??	주갤러(125.130)	23:15	3	0
5260697	주갤롬들에게는 항상 미안하고 고맙다	주갤러(117.111)	23:15	4	0
5260696	원폭질한게 태평양전쟁에서 양키가 밀리고 있었다는 증거임	테고시유야	23:15	7	2
5260695	아 공장 들어갔다가 욕먹고 추노했다 그랬지	25세 황근출(118.235)	23:14	12	0
5260694	벳녀여친 사겼는데 솔직히 좀 쪽팔림...	ㅇㅇ	23:14	20	1
5260693	똥남아년이랑 결혼한 주갤러들 근황	ㅇㅇ(118.235)	23:14	10	0
5260692	근데 한남이 먼저 도게자 박으면 화풀릴 수도 있음 [1]	주갤러(211.234)	23:14	13	0
5260691	여성시대 N번방 수사하라는게 그렇게 잘못된 일인가	ㅇㅇ(222.100)	23:14	6	2
5260690	그래도 한녀 포기못하면 개추 [3]	주갤러(121.149)	23:14	28	3
5260689	MBC, jtbc는 여시들의 최후의 보루임 [4]	■노괴주작감지기■(115.20)	23:14	20	3
5260688	118.235 저년 진짜 또 있네	ㅇㅇ(117.111)	23:13	9	0
5260687	남아 낙태 운동이 활발해져야 한다	ㅇㅇ(118.235)	23:13	10	0
5260686	걸스캔두애니띵이라는데 한남들이 화해하건 말건 뭔 상관임?? [1]	주갤러(125.130)	23:13	5	1
5260685	주갤러들보면 참 뭐가 저렇게 만들었을까... [5]	슈엔임신교배프레스	23:13	27	4
5260684	일남=한녀인 이유	ㅇㅇ(58.122)	23:13	9	1
5260683	화보인데 짤녀 웃기지 않음? ㅋㅋㅋㅋ	ㅇㅇ	23:13	9	1
5260682	한계집은 역겨워 (feat. 양녀에게 지랄하는 한괴)	ㅇ.ㅇ(112.152)	23:13	13	3
5260681	야 여친 개시발련이 어? ㅇㅇ	ㅇㅇ(119.69)	23:13	7	0
5260680	KM-69 딱 봐도 결정사 컷 당한 노괴잖아	주갤러(1.237)	23:12	19	3
5260679	그냥 한남 한녀 화해하면 안되냐고	ㅇㅇ(118.235)	23:12	30	4
5260678	지금 한남은 남아선호사상이 가져온 재앙이다 [1]	ㅇㅇ(118.235)	23:12	20	0
5260677	너넨 씨부리지 말고 아가리 좀 쳐 닫으며 살아 씨발새끼들아 쫌 [1]	KM-69	23:12	15	0
5260675	애초에 14수가 배짱도 있고 깡이 있었으면 [2]	25세 황근출(118.235)	23:10	25	2

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[주식 갤러리]

갤러리 본문 영역

게시물을 간편하게 NFT로 만들어 보세요!

NFT 발행 방법

NFT 발행

비회원 글삭제,수정

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결