알파제로 뛰어넘는 뮤제로 등장... 룰조차 필요없어.jpg

ㅇㅇ · 2021.04.14 12:58:35

viewimage.php?id=23b8df35f1dd3bad&no=24b0d769e1d32ca73dec81fa11d028314d3faebecfec25ed6aa779bc795bf314e8cc29fa9d33990ef8cbc2ee4b68021e6408de2bd488a4250efac0d6f1503b68101d3515a4bb5643e6a339ad0376cdbb7794eec264a88bbdd4b64d4d5545d8131abe66a385c3a137

딥마인드가 알파고(AlphaGo), 알파고제로(AlphaGo Zero), 알파제로(AlphaZero)에 이어 '뮤제로(MuZero)'라는 또 다른 걸출한 인공지능(AI) 알고리즘을 세상에 내놨다.

인공지능(AI)의 한 분야인 강화학습 발전에 신기원을 이뤘고, 범용AI(일반지능AI)에 한발 더 다가섰다는 평가다. 특히 '뮤제로'는 이전 알파고들과 달리 게임 규칙을 모르는 상태(사전에 규칙을 알려주지 않은)에서 강화학습을 사용해 바둑과 체스, 쇼기(일본 장기)를 정복(마스터)했을 뿐 아니라 한발 더 나아가 알파제로가 하지 못한 아타리게임까지 마스터했다. '뮤(Mu)는 라틴어로 산이라는 뜻이다. '뮤제로'가 또 하나의 산을 넘었다는 의미로 보인다. BBC 등 외신에 따르면 딥마인드는 '뮤제로'를 지난 23일(현지시각) 국제학술지 ‘네이처’에 발표했다.

■뮤제로는 어떤 AI?

'뮤제로'는 딥마인드가 작년말 예비 논문에 처음 소개했고, 이번에 네이처에 전격 공개했다. 이전 알파고들과 달리 규칙이 주어지지 않았는데도(without rule) 바둑, 체스 쇼기는 물론 아타리 비디오 게임까지 정복(마스터)했다. 규칙이 없는 상태에서도 이전 알파고들 보다 나은 성과를 낸 것이다.

이전 알파고들은 바둑, 체스, 쇼기에서 사람을 이기는 놀라운 성과를 냈지만 모두 규칙을 줬었다. 반면 '뮤제로'는 사전에 게임 규칙을 입력해주지 않았음에도 바둑, 체스, 쇼기에서 보여줬던 알파고제로의 능력은 물론 알파고제로가 보여주지 못한 아타리 게임까지 정복했다.

경희대 이경전 교수는 "지난번 알파제로는 보드게임에만 적용된 건데 뮤제로는 복잡한 2D 그래픽이 있는 게임에서 57개 아타리 게임을 다 할 수 있는 학습 방법을 찾았다"면서 "어떤 문제를 해결하는 지능을 개발하려 할때 그 문제의 규칙(도메인 지식)을 몰라도 학습할 가능성을 보여줬다는 점에서 의미가 크다"고 설명했다. 이어 이 교수는 "뮤제로는 해상도가 96*96 정도인 2차원 게임 아타리 57개를 포함해 총 60종 게임을 정복했다"면서 "딥마인드 성과가 놀랍다"고 덧붙였다.

'뮤제로'에 대해 답마인드는 "알려지지 않은 환경(규칙을 제시하지 않은 환경)에서도 이기는 전략을 기획(planning)할 수 있는 능력을 갖췄다"고 설명했다. '뮤제로'를 개발한 이유에 대해 딥마인드 수석연구과학자 데이비드 실버(David Silve)는 BBC와의 인터뷰에서 "실제 사람 세계는 매우 복잡하고 혼란스럽다. 어떻게 돌아가는 지 누구도 룰북(rulebook)을 주지 않는다. 그럼에도 사람은 다음에 무얼 해야 할지 플랜과 전략을 세울 수 있다"고 설명했다. 즉, 사람처럼 규칙 없이도 플랜과 전략을 세울 수 있게 '뮤제로'를 개발했다는 것이다.

실버는 "세계가 어떻게 돌아가는 지 이해하는 걸 스스로 구축할 수 있고, 이 이해를 미리보기 기획에 적용한 시스템을 처음으로 개발했다"면서 "뮤제로는 무에서 출발했지만 시행착오를 거쳐 세상의 규칙은 물론 슈퍼맨과 같은 성능을 낼 수 있는 규칙들을 동시에 발견했다"고 강조했다.

'뮤제로'의 독특성은 학습 방법에 있다. 기존 AI처럼 모든 환경을 학습하지 않는다. 대신 환경의 가장 중요한 것만 학습한다. 이것을 가능케 하는 것이 플래닝이고, '뮤제로'는 이 플래닝 때문에 비범한 능력을 갖췄다. 이를 딥마인드는 이렇게 설명했다. 사람은 보통 먹구름이 몰려오면 비가 올까봐 우산을 갖고 가는데 이것이 플래닝이고 플래닝은 인간 지성의 중요한 부분으로 "우리 AI도 이런 플래닝 능력을 갖길 원했다"고 설명했다.

딥마인드는 이 모델을 '알파제로'가 갖고 있던 미리보기(lookahead) 트리 서치와 결합해 '뮤제로'라는 새로운 명물을 만들어 냈다. 보통 인공지능 연구자들은 문제를 해결하는 데 두 전략을 사용한다. 하나는 게임 규칙이나 지식에 기반한 의사결정 트리 검색, 즉 미리보기 검색이고 다른 하나는 모델 기반 학습이다. 게임 환경을 정확하게 모델링한 뒤 이를 기반으로 전략을 짜서 문제를 해결하는 방법이다. 하지만 가능한 모든 요소들을 모델에 넣으려면 매우 복잡한 계산이 필요하다. 특히 시각적 요소가 많은 비디오 게임은 이런 방식이 불가능하다. 이를 해결하기 위해 '뮤제로'는 게임의 전체 환경을 모델링하는 대신 각 의사결정 단계에서 가장 중요한 것만 모델링하는 방식을 취했다.

즉, 이전 인공지능에 비해 데이터를 매우 경제적으로 사용했다. 딥마인드는 "미즈 팩맨(Ms. Pac-Man) 같은 아타리 비디오 게임에서 '뮤제로'는 하나의 무브당 6~7가지 경우의 수밖에 고려하지 못하는 경우에도 게임을 훌륭히 치러냈다"고 설명했다. 훈련량이 많지 않았음에도 좋은 결과를 낸 것이다. 딥마인드는 아타리 게임을 훈련하는 데 단일 GPU로 2~3주 걸렸다고 말했다. 각 의사결정 단계에서 중요한 측면만 고려했기 때문이다.

실제, 그동안은 환경의 모든 면을 모델링하는 복잡성 때문에 아타리 같은 동영상이 풍부한 도메인과는 경쟁할 수 없었고, 현재까지 아타리와 경쟁한 가장 좋은 결과는 DQN, R2D2, 에이전트57 같은 모델프리시스템이다. 이들 모델프리시스템은 이름처럼 학습 모델을 사용하지 않고 대신 다음에 취할 가장 나은(베스트) 행동을 추정할 뿐이다

동영상 압축 등에 유용.. 군사용 자동살인무기로 악용될 우려도 있어

이전 알파제로는 화학, 양자물리학 등에 미적용되고 있다. 딥마인드는 "뮤제로의 파워풀한 러닝과 플래닝 알고리즘은 로보틱스, 산업 시스템, 게임의 룰이 알려지지 않은 다른 복잡한 현실 환경 문제를 해결하는데 신기원을 열 것"이라고 설명했다.

특히 딥마인드는 유튜브의 동영상 압축에 뮤제로를 적용하는 방법을 꾀하고 있다. 동영상 압축 효율을 높이면 유튜브 운영에 들어가는 비용을 줄일 수 있기 때문이다.

뮤제로는 지난해 11월 외부에 처음 공개됐는데 이후 미 공군이 뮤제로의 공개 버전을 응용해 적군의 미사일 발사체를 찾아내는 인공지능 알고리즘(ARTUMu)을 개발하기도 했다.

이 때문에 일각에서는 '뮤제로'의 악용 가능성에 대한 우려도 나왔다. 컴퓨터 과학자와 무기 전문가, 인권 단체들이 참여한 단체인 '스톱 킬러 로봇(Stop Killer Robots)'이 대표적인데 이 단체는 'ARTUMu'에 대해 "미 공군이 치명적인 자동 무기를 만드는데 한발 더 나아갔다"고 지적했다.

번호	제목	글쓴이	작성일	조회	추천
설문	어떤 상황이 닥쳐도 지갑 절대 안 열 것 같은 스타는?	운영자	24/05/20	-	-
공지	▦주식 갤러리 용어/은어 길라잡이 초급에서 고급까지!! Ver 1.1 [481]	*우주방어*	11.09.26	244645	277
공지	주식 갤러리 이용 안내 [177]	운영자	20.05.08	62128	75
5250820	지금 침묵하는 정치인 새끼들 누구누구 있는지 박제해라	ㅇㅇ(61.98)	16:18	12	3
5250819	잘생겨서 한녀한태 비동간 당해봐서 다행이다 'ㅅ'	뀨깽이	16:18	11	0
5250818	주붕이 특. PNG [1]	뀨깽이	16:17	9	0
5250817	대만에 지진 나는게 뭐가 큰일임?	주갤러(45.84)	16:17	21	1
5250816	세계 최초 자국남성에게 버림받은 도태된 한녀들 ㅋㅋㅋ [6]	ㅇㅇ(118.235)	16:16	53	3
5250815	니들이 아무리 우겨도 주갤이 졌어… [2]	주갤러(175.223)	16:16	28	0
5250814	여자 전과숨기기법은 좋은법이야. [1]	주갤러(223.62)	16:16	12	0
5250813	나나소나윤 이혼 염원하는 노괴년들 ㅋㅋㅋ	ㅇㅇ(125.143)	16:15	14	1
5250811	이러다 한녀 전과숨기기 법안도 추진하겠노 ㅋㅋ [1]	주갤러(118.235)	16:14	36	6
5250810	한녀는 외모 무관하게 찌질하더라 ㅋㅋㅋㅋㅋ [2]	ㅇㅇ(118.235)	16:13	25	2
5250809	위대하신 한국여성분들께 선택 못받은 남자들의 최후 ㅠㅠ [1]	ㅇㅇ(175.199)	16:13	41	4
5250808	희한하게 찌질하게 생긴애들은 찌질하더라 [1]	ㅇㅇ(115.41)	16:12	14	0
5250807	한녀충피싸개들 나나소윤 존나 싫어하네 ㅋㅋㅋㅋ [6]	ㅇㅇ(175.199)	16:12	60	12
5250806	대만인들 지진 나는거 보면 웃긴 ㅋㅋ [1]	주갤러(45.84)	16:11	22	0
5250804	한녀는 멍청해서 파일럿이 국가에서 어떤 대우를 받는지	ㅇㅇ(118.235)	16:11	23	1
5250803	요즘 대만 보면 정이 뚝 떨어짐 [1]	주갤러(45.84)	16:10	25	3
5250802	아줌마 떳떳하면 그만떨어 [1]	똥ㄱH(118.235)	16:10	29	0
5250801	책임져달라고? [2]	25세 황근출(118.235)	16:10	69	11
5250800	남자가 찌질하게 여시M 번방 타령하냐 ㅉ_ㅉ [1]	뀨깽이	16:09	23	0
5250799	외교 문제로 번질수 있는 문제를 아무일도 안일어날거래 ㅋㅋㅋ	ㅇㅇ(125.143)	16:08	22	0
5250798	존버하니까 되는구나 [2]	ㅇㅇ(211.205)	16:08	31	1
5250797	조주빈이 형량 40년을 받을만큼 크게 잘못했는지 싶다 [9]	LGTWINZ	16:06	134	16
5250796	金正恩将軍同志万歳 [3]	ㅇㅇ(211.234)	16:06	41	0
5250795	근데 여시 사건 [2]	ㅇㅇ	16:06	84	7
5250794	나 여시하지만 떳떳한데, 너네가 여혐선동해서 이미지 나빠졌어 [9]	주갤러(223.62)	16:05	91	2
5250793	한녀스럽다<-제시한다 이기	25세 황근출(118.235)	16:04	32	0
5250792	여시들은 왜 팝콘 뜯고 구경중인 주갤러들한테 화풀이하노 ㅋㅋㅋ [1]	주갤러(211.184)	16:04	20	1
5250791	1950년대에 한국어느 대기업일가에서 친옵충&사촌놈들이 여동생을 성폭행 [1]	ㅇㅇ(210.106)	16:04	19	1
5250790	N번방 내사한다고 믿는 흑우없제? [1]	주갤러(211.234)	16:04	38	1
5250789	국장에서 몰빵투자를 해도 되는 종목은 이것뿐이다	ㅇㅇ(118.235)	16:03	18	1
5250788	한국 남녀 임금 격차 31.2%, OECD 1위 [4]	ㅇㅇ(125.130)	16:03	44	0
5250787	한녀 2030 중 여시 비율은 13.3%	Salao	16:03	32	1
5250786	조주빈 40년이 이렇게 돌아오는구나 [2]	주갤러(211.184)	16:03	76	12
5250785	남자들 처녀든 비처녀든 욕하는 이유가 뭐임? ㄷㄷ [3]	ㅇㅇ(223.38)	16:02	30	0
5250784	중력절 기념 올해 조회수 580만 8주년 노래 [1]	낮져	16:02	29	3
5250783	이게 다 마편 신고 해보라고 깝치던 줌번방 때문이다 ㅋㅋㅋ	ㅇㅇ(125.143)	16:02	33	4
5250782	뭐? 한녀들 이혼 경력까지 싹 다 지워준다고? [2]	ㅇㅇ(61.98)	16:02	47	6
5250781	나는 호빗한국인들이 너무 역겨워 [1]	●Alida걸레살해(117.111)	16:02	14	0
5250780	딸과 다툰 아이 찾아가 흉기로 찌른 엄마 [1]	퍼플헤이즈	16:01	32	3
5250779	이제 한녀는 중고여부도 확인 불가인데 국결해야겠지? ㅋ [1]	ㅇㅇ(118.235)	16:01	46	6
5250778	언냐들 깡다구 하나는 인정	주갤러(211.184)	16:00	31	0
5250776	갓 나온 따끈따끈한 변호사님 블로그 ㅋㅋㅋㅋ [14]	■노괴주작감지기■(115.20)	15:58	334	39
5250775	나는 사실 묻힐줄알았다 [4]	주갤러(211.184)	15:58	71	4
5250774	망갤 테스트 [4]	주갤러(45.84)	15:57	78	6
5250773	변호사들 노났노	주갤러(211.184)	15:56	52	0
5250772	지금도 결혼하겠다는 30대 초~중반 퐁퐁남들 시대만 끝나면 [5]	LGTWINZ	15:56	145	16
5250771	이혼 후 혼인무효도 결국 한녀만 피하면 문제 없음 [1]	주갤러(125.133)	15:56	38	4
5250770	국장 하지 말어야 하는 이유.	주갤러(1.220)	15:56	30	2

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[주식 갤러리]

갤러리 본문 영역

게시물을 간편하게 NFT로 만들어 보세요!

NFT 발행 방법

NFT 발행

비회원 글삭제,수정

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결