LG AI연구원, 세계 최초 ‘Zero-shot Image Captioning’ 챌린지 개최

LG AI연구원이 ‘CVPR(Computer Vision and Pattern Recognition) 2023’에서 ‘NICE: New frontiers for zero-shot for Image Captioning Evaluation Challenge & Workshop’을 개최합니다. 전 세계 AI 연구자 누구나 참여할 수 있는 공개 챌린지로, ‘Zero-Shot Image Captioning’을 통해 ‘AI가 처음 본 이미지를 얼마나 정확하게 이해하고 설명하는지’ 평가합니다. 이번 챌린지 최종 수상팀은 오는 CVPR 2023 워크숍에서 성과를 발표할 기회가 주어집니다.

Zero-Shot Image Captioning 관련 세계 최초 워크숍

Zero-Shot Image Captioning은 AI가 처음 본 사물이나 동물·풍경 등이 포함된 이미지를 보았을 때, 마치 사람의 시각 인지 능력처럼 기존에 학습한 데이터를 기반으로 스스로 이해하고 유추한 결과를 텍스트로 설명할 수 있는 기술을 뜻합니다. NICE: New frontiers for zero-shot for Image Captioning Evaluation Challenge는 이러한 Zero-Shot Image Captioning과 관련해 세계 최초로 진행하는 챌린지입니다. 2월 부터 4 월 말까지 진행되며, 수상자에게는 최대 5,000달러의 상금과 CVPR 2023 워크숍에서 발표하는 기회가 주어지게 됩니다.

Zero-Shot Image Captioning 기술이 점차 고도화되면 이미지 인식 AI 기술의 정확성과 공정성이 향상되고, 나아가 사람들의 실생활에 직접적으로 도움을 주는 기술 개발로 이어질 수 있습니다. 예를 들어, AI가 온라인 상의 방대한 이미지 데이터에 자동으로 캡션과 키워드를 생성하면 검색의 편의성과 정확도가 높아질 것입니다. 의학 전문 데이터를 추가 학습할 경우 의학 영상을 분석하는 ‘의학 전문가 AI’로 활약할 수도 있습니다. 나아가 최근 자연어 검색 분야에서 반향을 일으키고 있는 ‘ChatGPT’처럼, 이미지 검색 분야에서도 혁신을 가져올 것으로 예상됩니다.

LG AI연구원, 서울대학교 AI대학원 및 Shutterstock과 공동 개최

LG AI연구원은 공동연구센터를 설립해 초거대 멀티모달 AI 및 EXAONE을 연구 중인 ‘서울대학교 AI대학원’, 이미지 캡셔닝 AI의 상용화 서비스를 공동으로 준비 중인 'Shutterstock’과 함께 이번 워크숍을 진행합니다. Shutterstock은 편향성과 선정성 등에 대한 AI 윤리 검증을 끝낸 고품질의 이미지-텍스트 데이터셋 26,000개를 무료로 제공합니다. 해당 데이터셋은 사진뿐 아니라 일러스트레이션, 그래픽스 등 다양한 형태의 이미지를 포함하고 있어 대회 참가자들은 저작권과 비용, 품질에 대한 고민 없이 자신들의 AI 모델 최적화와 성능 평가를 진행할 수 있습니다.

이경무 서울대 AI대학원 석좌교수는 “LG AI연구원과 서울대 AI대학원, Shutterstock이 세계 최초로 이번 챌린지를 공동 진행하는 것은 우리나라의 AI 역량이 이미 세계적인 수준에 도달했다는 것을 의미하며 또한 국제적 리더십을 더욱 높이는 계기가 될 것으로 생각한다”라고 말했습니다.

세계적인 학회 CVPR 2023에서 논의의 장 마련

LG AI연구원은 올해 6월 캐나다 밴쿠버에서 열리는 컴퓨터 비전 분야 세계 최고 권위 학회인 CVPR 2023에 참여하여, NICE: New frontiers for Zero-Shot Image Captioning Evaluation 워크숍을 진행합니다. 또한, 이번 챌린지 최종 수상팀은 이날 워크숍에서 성과를 발표할 기회가 주어집니다.

LG AI연구원은 구글, 마이크로소프트 등에서 AI 연구를 진행하고 있는 산업계 전문가들을 비롯해 글로벌 석학들과 함께 이미지 캡셔닝 기술 연구의 방향성과 확장성, AI 윤리 문제에 관해 심도 있는 논의를 진행할 계획입니다. 김승환 LG AI연구원 비전랩장은 “LG AI연구원은 현재 생성형 AI 뿐 아니라, 객체를 인식하는 기술 수준을 넘어 인간 수준으로 환경까지 인식하는 AI로 퀀텀 점프할 수 있는 가능성을 확인했다. 세계적인 학회에서 영상 이해의 핵심 기술이자 기반 기술인 이미지 캡셔닝을 주제로 대회를 개최한 것은 LG가 컴퓨터 비전 분야의 글로벌 입지를 보여준 계기이며, 이번 대회를 통해 전 세계 AI 연구자들과 함께 연구의 의의와 필요성, 그리고 확장 가능성에 관해 함께 논의하는 장을 만들고자 한다”라고 말했습니다.

이번 NICE: New frontiers for zero-shot for Image Captioning Evaluation Challenge는 Zero-Shot Image Captioning의 새로운 지평을 열 것으로 전망됩니다. 전 세계 AI 연구자들의 많은 참여를 기다립니다.

▶ CVPR 2023 NICE Workshop 공식 홈페이지 (Link)