- 회원들이 추천해주신 좋은 글들을 따로 모아놓는 공간입니다.
- 추천글은 매주 자문단의 투표로 선정됩니다.
Date 15/09/30 01:03:41
Name   Azurespace
Subject   사실 구글은 스카이넷을 만들고 있습니다
http://www.cv-foundation.org/openaccess/content_cvpr_2015/papers/Vinyals_Show_and_Tell_2015_CVPR_paper.pdf

이번 글의 소재는 올해 CVPR에 제출된 논문입니다.

구글 오픈딥 소속 연구자들이 내어 놓은 건데, 논문 전면의 이름값들이 후덜덜합니다.

그리고 이름값에 부족하지 않을 정도로 후덜덜한 연구 내용입니다.



논문의 초록에서도 밝히고 있습니다만, Image Caption Generating이라는 분야는 상당히 중요합니다. Computer Vision과 Natural Language Processing를 연결하는 교두보이면서 동시에 각 분야의 아주 원천적인 기술을 요구하기 때문입니다.


이들이 풀려고 시도한 문제 자체는 심플합니다. "컴퓨터에게 어떤 사진을 보여주고, 사진의 내용을 영어(자연어)로 설명해 보라고 하는 것" 이죠.

문제가 심플하다고 해서 해법 또한 심플한 경우는 별로 없습니다.
말이야 쉽지만, 사실 이 문제는 여러 작은 문제들로 나뉘게 됩니다.

첫째로 주어진 사진으로부터 사진 속에 등장하는 오브젝트들의 정체를 가려내는 것.
둘째로 각 오브젝트 사이의 관계를 구해내는 것
셋째로 그 관계성을 어색하지 않은 인간의 언어로 풀어내는 것.


이 문제들 각각이 결코 쉬운 것이 아닙니다. 하지만 구글 아닙니까?



원래 이미지에서 뭔가를 인식하거나 하는 용도로는 Convolutional Neural Network란 걸 주로 씁니다. 왜 이미지 인식에서 CNN이 성능이 좋은가 하는 것도 상당히 흥미로운 주제입니다만, 수식이 안 나올래야 안 나올 수도 없고 그렇게 설명하려고 해도 쉽지 않을 것이니(저는 파인만이 아니에요!), 일단은 얘가 사람의 시세포들이 적당히 뭉쳐 있는 것과 약간 비슷한 연결구조를 가진다, 그래서 이미지 인식에 성능이 좋다. 정도로 이해하시면 됩니다.


그리고 자연 언어 처리, 예를 들어서 영어를 프랑스어로 바꾼다던지, 단어들을 벡터 공간에 매핑한다던지 하는 식의 문제에는 보통 Long Short Term Memory(LSTM)이라고 불리는 재귀 신경망(Recurrent Neural Network)을 사용합니다. CNN 같은 신경망은 한쪽 방향으로만 연결이 존재하는데, RNN들은 반대방향으로도 연결이 존재할 수 있어서 보다 복잡한 처리를 할 수 있게 되거든요.



아무튼 이 연구진들에게는...

1. 이미지 분류에 사용하기 위한 CNN이 있고,
2. 자연어 처리에 사용하기 위한 RNN 또한 있었습니다.


그래서 이 연구자들이 한 짓이 뭔가 하면,

1의 CNN의 마지막 계층을 떼어내고,
2의 RNN 맨 앞 계층에다가 가져다 붙였습니다.


상상해 보세요. 웬 미친 과학자놈들이 머리통에서 뇌를 꺼내다가 다른 뇌 옆에다가 척하고 놓더니 전선으로 여기저기를 마구 연결하기 시작하는 거에요. 어후...

물론 뭐 논리적으로만 존재하는 가상의 신경망이기에 고통을 느낀다거나 거부반응에 끔살을 당한다거나 하지는 않았습니다만...


그리고는 뭐 자기네가 들고 있는 데이터 세트를 거기다가 다시 학습시키는 거에요.
이 데이터 세트는 어떻게 만들었냐면, 사진을 주면 사람이 그 사진의 내용에 대해서 설명하는 영어 문장을 만들어요. 그렇게 수천장 수만장을 반복했기 때문에... 아무튼 똑똑한 사람들이니 좋은 사진과 설명을 사용했겠지요.


이렇게 만들어진 신경망은 비록 사람을 이기는 정도는 아니었지만 기존에 이미지 캡션에 사용되었던 수많은 방법들을 전부 다 격파하는 데 성공했다는 말씀.

[http://i.imgur.com/VIRixJM.jpg]


근데 비교대상이 나였으면 쟤가 이겼을 것 같은데... 영어가 짧아서. 으음....


* 난커피가더좋아님에 의해서 자유 게시판으로부터 게시물 복사되었습니다 (2015-10-08 08:35)
* 관리사유 : 추천게시판으로 복사합니다.



4


    목록
    번호 제목 이름 날짜 조회 추천
    1376 기타삶의 의미를 찾는 단계를 어떻게 벗어났냐면 8 골든햄스 24/03/14 955 19
    1375 기타소수 사막은 얼마나 넓을까? 4 Jargon 24/03/06 879 4
    1374 기타민자사업의 진행에 관해 6 서포트벡터 24/03/06 836 8
    1373 기타노무사 잡론 13 당근매니아 24/03/04 1539 16
    1372 기타2024 걸그룹 1/6 2 헬리제의우울 24/03/03 627 13
    1371 기타소회와 계획 9 김비버 24/03/03 858 20
    1370 기타터널을 나올 땐 터널을 잊어야 한다 20 골든햄스 24/02/27 1565 56
    1369 정치/사회업무개시명령의 효력 및 수사대응전략 8 김비버 24/02/21 1401 16
    1368 체육/스포츠(데이터 주의)'자율 축구'는 없다. 요르단 전으로 돌아보는 문제점들. 11 joel 24/02/19 955 8
    1367 역사 AI를 따라가다 보면 해리 포터를 만나게 된다. 4 코리몬테아스 24/02/18 1056 11
    1366 체육/스포츠(데이터 주의)'빌드업 축구'는 없다. 우루과이전으로 돌아보는 벤투호의 빌드업. 13 joel 24/02/12 1330 30
    1365 기타자율주행차와 트롤리 딜레마 9 서포트벡터 24/02/06 1187 7
    1364 영화영화 A.I.(2001) 18 기아트윈스 24/02/06 1118 23
    1363 정치/사회10년차 외신 구독자로서 느끼는 한국 언론 32 카르스 24/02/05 2558 12
    1362 기타자폐아이의 부모로 살아간다는건... 11 쉬군 24/02/01 2154 69
    1361 일상/생각전세보증금 분쟁부터 임차권 등기명령 해제까지 (4, 完) 6 양라곱 24/01/31 2816 37
    1360 기타텃밭을 가꿉시다 20 바이엘(바이엘) 24/01/31 1002 10
    1359 일상/생각한국사회에서의 예의바름이란 18 커피를줄이자 24/01/27 6534 3
    1358 일상/생각전세보증금 분쟁부터 임차권 등기명령 해제까지 (3) 17 양라곱 24/01/22 6162 22
    1357 일상/생각전세보증금 분쟁부터 임차권 등기명령 해제까지 (2) 17 양라곱 24/01/17 5693 14
    1356 요리/음식수상한 가게들. 7 심해냉장고 24/01/17 1256 20
    1355 일상/생각전세보증금 분쟁부터 임차권 등기명령 해제까지 (1) 9 양라곱 24/01/15 2674 21
    1354 기타저의 향수 방랑기 31 Mandarin 24/01/08 3296 2
    1353 의료/건강환자의 자기결정권(autonomy)은 어디까지 일까? 7 경계인 24/01/06 1280 21
    1352 역사정말 소동파가 만들었나? 동파육 이야기. 13 joel 24/01/01 1309 24
    목록

    + : 최근 6시간내에 달린 댓글
    + : 최근 12시간내에 달린 댓글

    댓글