SPRi - 소프트웨어정책연구소

김건희 교수 (서울대학교) Video captioning 소개 및 연구 현황

김정민AI정책연구실 선임연구원

2017.02.07

7965

글자크기

김건희 교수 (서울대학교) Video captioning 소개 및 연구 현황 프로그램에 대해 일시, 장소, 주제, 발제자, 참석자로 구성된 표
일 시	2016. 02. 06(월) 09:00~12:00
장 소	소프트웨어정책연구소 회의실 (판교글로벌R&D센터)
주 제	Video captioning 소개 및 연구 현황
발 제 자	김건희 (서울대학교 교수)
참 석 자	SPRi 연구진

- 2011년 해외 학회 발표를 시작으로 스텐포드의 이미지 자연어 해석연구가 컴퓨터 비전 학계의 관심을 받고 있음
- 김건희 교수는 해당 연구가 이미지의 단순한 인식을 넘어서 이미지 내 상황을 해석해야 하는 이슈를 다루기 때문에 인공지능이 기반되는 연구라 설명함
- 이는 이미지 분류(Image Classification)의 확장개념으로 볼 수 있으며, 과거의 연구가 이미지 일반화를 위해 이미지내 단어의 결과 조합에 치중했다고 한다면, 이 연구는 상황 해석을 위한 확장 된 단계(Step)를 추가적으로 제안했다는 점을 강조
- 김건희 교수의 현행연구는 영상을 대상으로 한 위 기법의 적용으로 요약됨
- 그는 영상 해석을 위해 위 기법으로 각 구간의 이미지 해석을 수행하고 연속된 캡처 이미지의 해석결과를 분석하여 특정 신(scene) 별 상황을 정확히 해석하는 방안을 제안
- 그의 알고리즘은 관심도(사람이 중요하게 생각하는 이미지의 포커싱 부분)을 기계학습하고 이를 위 연구의 결과 개선에 활용함
- 영상의 자연어 해석 분야를 위해 인간의 이미지 인지지점을 학습한 시도는 실험결과 충분한 경쟁력을 보이는 것으로 나타났으며, 이를 사회이슈 해결을 위한 방안으로 발전시키는 게 중요
- 김건희 교수 (서울대학교)
  
  김건희 교수 (서울대학교)
  
  강연을 듣는 모습
  
  김건희 교수 (서울대학교)
  
  $(".anyslider").anyslider({ animation : "fade", showBullets : false }); $(".anyslider").hover( function() { $(".anyslider").children("a").css("filter", "alpha(opacity=1)"); $(".anyslider").children("a").css("opacity", 1); }, function() { $(".anyslider").children("a").css("filter", "alpha(opacity=0)"); $(".anyslider").children("a").css("opacity", 0); } ); $(".anyslider").children("a").focus(function(){ $(".anyslider").children("a").css("filter", "alpha(opacity=1)"); $(".anyslider").children("a").css("opacity", 1); }).blur(function(){ $(".anyslider").children("a").css("filter", "alpha(opacity=0)"); $(".anyslider").children("a").css("opacity", 0); }); $(function () { console.log($(".anyslider").height($(".anyslider > .as-slide-inner >div:visible").eq(0).height())); });