EVL-MCoT: 유해 밈 탐지를 위한 향상된 비전-언어 멀티 CoT
EVL-MCoT: Enhanced Vision-Language Multi-CoT for Harmful Meme Detection
TL;DR AI
1분핵심 요약
연구진이 유해 밈 탐지를 위한 비전-언어 프레임워크 EVL-MCoT를 제안했다. 이 방법은 여러 관점의 다단계 추론을 활용한다.
EVL-MCoT는 프로토타입 유도 디코딩과 컨텍스트 유도 디코딩을 결합해 이미지와 텍스트 신호를 더 정교하게 맞춘다. 특히 미묘한 풍자와 혼합된 멀티모달 단서를 잘 다룬다.
HatefulMemes와 MultiOff에서 강한 성능을 보였으며, 코드도 공개됐다.