College Of Engineering
서울공대 이야기
리플에이아이-서울대 김건희 교수팀,
2019 동영상 이해 및 자연어 대화
인공지능 챌린지 세계대회 우승

 
- LSMDC 인공지능 대회 3부분에서 우승,
- FashionIQ 스마트 검색 대회에서 준우승을 차지


<리플에이아이-서울대팀>
 
서울대학교 공과대학(학장 차국헌)은 리플에이아이와 서울대 컴퓨터공학부의 김건희 교수팀이, 컴퓨터비전 분야 세계 최대 학회인 ICCV 2019 (International Conference on Computer Vision 2019)에서 진행된 두개의 인공지능 챌린지 대회에서 각각 우승과 준우승을 차지했다고 1일 밝혔다.


 

 
리플에이아이는 서울대 김건희 교수 연구실에서 창업한 인공지능 스타트업으로, 카카오벤처스로부터 초기 투자를 받았으며 온라인 상에 사용되는 모든 데이터 형식 (자연어, 사진, 동영상, 이모티콘 등)을 아우르는 대화 및 광고 시스템을 개발하는 회사다. 이번 리플에이아이-서울대 팀은 김건희 지도교수를 필두로, 유영재, 정지완, 김종석, 윤희승, 최윤철, 이승환 등의 대학원생과 연구원들이 함께 참여했다.

이들이 참가한 첫번째 대회인 LSMDC (Large Scale Movie Description and Understanding Challenge)는 미국 UC 버클리 대학의 연구자들이 NVIDIA의 후원으로 매년 개최하는 동영상 인식 인공지능대회로 주요 목표는 영화의 연속된 동영상 클립들을 보고 내용을 설명하는 자연어 문장을 생성하는 것이다. 올해는 처음으로 알고리즘이 영화에 등장하는 인물들까지 구분, 인식하여 인물들의 ID를 포함한 정확한 문장을 생성하는 능력도 평가했다. 기계의 인공지능이 사람처럼 자신이 본 영상을 이해하고, 영상의 주인공들을 인식해 연속된 상황을 여러 문장으로 자연스럽게 설명하기 위해 필수적인 인공지능 기능 중 하나이다.
 
이들은 올해 세 번째로 이 대회에 참가해 "Multi-Sentence Description", "Fill-in the Characters”, "Multi-Sentence Description with Characters” 의 3가지 부문에서 UC 버클리 대학 및 옥스퍼드 대학 등을 누르고 모두 1등상을 수상했고 부상으로 3,000 USD 상당의 NVIDIA GPU를 받았다.
 
또한 IBM Research에서 후원하는 자연어-대화 기반 인공지능 패션 추천 대회인  Fashion IQ 챌린지에도 참가, 우승한 Samsung Research America 팀과 1%의 근소한 차이로 2위를 기록해 1,000 USD 의 부상을 받았다.
 
Fashion IQ 챌린지의 목표는 알고리즘이 사용자와 자연어로 대화하며 가장 알맞은 옷을 추천해 주는 것으로 검색된 사진에서 수정 사항을 사용자가 설명하면 이를 반영한 새로운 사진을 추천해주는 알고리즘의 성능을 평가하게 된다. 즉 흰 드레스를 사용자에게 제시했을 때, 사용자가 "허리에 벨트를 추가해” 라고 입력하면 허리에 벨트가 추가된 흰 드레스의 사진을 검색하는 것이다.
 
한편 리플에이아이-서울대 팀은 ICCV 2019가 열리는 Coex에서 학회 기간 동안 (10월 29일 ~ 11월 1일) 현대자동차와 함께 시연을 진행 중이다. 연구원들의 설명과 시연을 통해 동영상을 이해하고 자연어로 대화를 나누는 리플에이아이 시스템의 우수한 기술을 더 가까이에서 체험해 볼 수 있는 기회다.
 
번호 제목 글쓴이 날짜 조회 수
1487 서울대 공대 이제희 교수팀, 컴퓨터그래픽스 기술로 뇌성마비환자 정형수술 효과 예측 hands 2019.12.12 36
1486 서울대 공대 조규진 교수팀, 종이접기 기반의 소프트 로봇 개발 hands 2019.12.12 36
1485 서울대 공대, 액상에서 반응하는 촉매입자 고해상도 관찰 성공 hands 2019.11.28 157
1484 서울대 공대, ‘ ENNOvation Tank 시즌 Ⅱ’ 10개 기업 선정 hands 2019.11.14 253
1483 윤병동 교수 원프레딕트, 올해의 10대 기계기술 선정 hands 2019.11.14 230
1482 서울대 박병우 교수팀, 고효율 장수명 페로브스카이트 태양전지 구현 hands 2019.11.14 222
1481 서울대-SK텔레콤 공동 기술사업화 업무 협약식 hands 2019.11.14 147
» 리플에이아이-서울대 김건희 교수팀, 2019 동영상 이해 및 자연어 대화 인공지능 챌린지 세계대회 우승 hands 2019.11.14 90
1479 서울대 공대, 세계 컴퓨터비전 최대 학회 ICCV 2019 국내 첫 개최 hands 2019.11.14 113
1478 여성교수 공동 채용 나선 亞 주요 7개大 공대학장 hands 2019.11.14 102
1477 윤병동 교수, 한국PHM학회 회장 취임 hands 2019.11.14 91
1476 서울대 윤병동 교수 연구팀, LG전자 소재/생산기술원, 한국기계연구원-한국표준과학연구원 연구팀 PHM Society 2019 PHM Conference ‘Data Challenge Competition’ Winner (1, 2위) 석권 hands 2019.11.14 104
1475 윤병동 교수, PHM Society Fellow 선정 hands 2019.10.24 251
1474 서울대 공대, 늘어나는 금속 전극 제작기술 개발 hands 2019.10.24 248
1473 [서울대 윤병동 교수팀]‘4차 산업혁명’의 숙제, 글로벌화에서 답을 찾다! hands 2019.10.24 238
1472 서울대 기계항공공학부 박찬국 교수팀, 국제 실내 항법 경연대회 스마트폰 및 신발 보행항법 부문 우승 hands 2019.10.24 236
1471 서울대 공대 제 6회 추석맞이 전통문화체험 행사 개최 hands 2019.10.10 744
1470 서울대 공대 나용수 교수팀 외부 자기장을 이용한 핵융합 플라즈마 가속 및 안정화 기술 개발 hands 2019.10.10 283
1469 서울대 조선해양공학과 이신형 교수 미국 및 영국 조선학회 석학회원 선정 hands 2019.10.10 306
1468 서울대 항공우주비행체설계 연구실 학생팀 CRANE, 美 수직비행협회 디자인 경연대회 준우승 hands 2019.09.25 360
Login
College of Engineering Seoul National University
XE Login