라벨링 가이드라인

안녕하세요 성균관대학교 소프트웨어융합대학 인공지능융합학과 석사과정 3기 안채희입니다.

본 문서는 “동영상 장면 감정 분류”(가제) 연구에 필요한 동영상 감정 라벨링 작업의 가이드라인을 제공하기 위 해 작성되었습니다.

라벨링 작업 참여 전 다음 구글폼에서 인적사항을 작성해주시기 바랍니다. https://docs.google.com/forms/d/e/1FAIpQLSfpIjorHK8QQswdcjzv2FNmJ0ukDsMacNoomUcXhybXygLX3Q/viewform?usp=sf_link

라벨링은 주어진 영상에서 인물들의 대사와 표정을 종합적으로 고려하여 이미 작성된 annotation 내의 대사, 감정과 장면의 실제 대사, 감정이 일치한지 확인하는 작업입니다.

이미 작성된 annotation은 대사와 발화 캐릭터, 감정, sentiment, 대화 id, 발화 id, 시즌 번호, 에피 소드 번호, 발화 시작시간, 발화 끝나는 시간으로 이루어져 있습니다.

다시 한번 말씀드리면, 본 annotation에서 대사와 감정, sentiment를 확인하시면 되고, 영상은 대 화id_발화id.mp4로 이루어져 있습니다.

주어진 영상에서 한 대사와 annotation의 대사가 맞지 않는다면 annotation의 대사를 영 상 속 대사로 수정하셔야 합니다.

주어진 영상에서 인물의 감정과 annotation의 감정이 맞지 않는다면 annotation의 감정을 올바르게 수정합니다.

주어진영상에서인물의sentiment와annotation의sentiment가맞지않는다면 annotation의 sentiment를 올바르게 수정합니다.

해당 영상에서 어떤 대화나 인물이 등장하지 않을 경우 해당 영상과 annotation을 삭제합 니다(줄 삭제).

라벨링 대상이 되는 영상에 대한 개요는 아래와 같습니다.

데이터: Friends (프렌즈, 미국 시트콤 영상)

수집 출처: MELD Dataset (https://affective-meld.github.io/ )

전체 영상 개수: 약 6090 개

모집 인원: 1 명

모집 기간 : 2023년 1월 9일(화) ~ 모집시까지 (신청이 많을 경우, 조기에 마감될 수 있습니다)

참가자는 참가 확정 날짜부터 3일동안 자신에게 주어진 데이터(mp4 파일과 csv 파일)에 대해서 일치 확인 작

업을 진행해주시면 되고,   250,000원의 급여가 지급됩니다.

라벨링의 기준은 아래와 같습니다.

라벨1- emotion 분류 및 timestamp : 해당 장면 내 인물들의 상호작용이 어떤 감정을 표출하고 있는가

유형 0) Anger : 다툼, 말싸움, 갈등 등 화난 상황 유형 1) Sadness : 눈물, 이별, 갈등 등 슬픈 상황

유형 2) Joy : 행복, 연애, 장난, 농담, 화목함 등 즐거운 상황 유형 3) Fear : 공포, 폭력, 사고 등 두려운 상황

유형 4) Surprise : 갑작스러움, 경고, 사고 전 등 놀란 상황 유형 5) Disgust : 역겨움/메스꺼움을 나타내는 상황

라벨2- sentiment 분류 : 해당 장면 내 인물들의 상호작용이 긍부정 중 어디에 속하는가

유형 0) Negative : 해당 장면이 부정적인 상황임 유형 1) Positive : 해당 장면이 긍정적인 상황임

유형 2) Neutral : 해당 장면이 긍부정에 해당하지 않음

영상 라벨링에서 대사, 감정, sentiment를 모두 확인해야합니다.

참가자분들은 대사, Emotion, Sentiment 순서로 annotation의 일치 여부를 확인하게 됩니다

예시) "Oh my God, he’s lost it. He’s totally lost it.", 1, 0, 7, "00:20:57", "00:21:00"

이 중에서 영사 내 대사와 annotation에 적혀있는 대사, emotion, sentiment의 일치 여부를 확인하고 수

정해주시면 됩니다.

라벨링은 다음과 같이 진행합니다.

Emotion 라벨:

anger sadness joy

fear surprise disgust

Sentiment 라벨:

negative positive neutral

*영상과 annotation이 일치하지 않는다면 함께 첨부해드린 annotation.csv 파일의 해당 영상에 올바른 감정과

sentiment, 대사로 수정해주시면 됩니다.

문의 연구 담당자 : 안채희 010-5920-1715 (anch0715@g.skku.edu) 서울시 종로구 성균관로 25-2, 국제관 3층 903 / 90326