표정 분석

얼굴 영상이나 사진의 표정을 분석해 주세요. 한 사람이든 여러 참가자든 됩니다. 파일(MP4·MOV·WEBM·JPG·PNG, 여러 개는 ZIP)과 필요하면 구간 시점이 담긴 사건 표, 참가자 표를 첨부할게요. 한 사람이면 전체 표정 분포(우세 표정·감정 점수·정서가와 각성·동작 단위 프로필)와 시간에 따른 변화(시간대·추세·표정 에피소드·정점 순간), 구간 비교를, 여러 참가자면 참가자별 기준선 대비 조건·집단 비교를 효과 크기와 함께 주세요. 그림에는 얼굴 이미지를 넣지 말고 지표 표도 함께 주세요. 단계마다 실행한 코드를 보여 주세요.

표정 분석: 데이터를 추출하고 분석하고 있어요

얼굴 영상이나 사진을 올려 주세요. 한 사람이든 여러 참가자든 됩니다. 프레임마다 얼굴 동작 단위(AU)와 감정 점수, 정서가·각성을 읽어, 한 사람이면 표정 분포와 시간에 따른 변화를, 여러 참가자면 참가자마다 평상시 얼굴을 기준으로 한 조건·집단 비교를 보고서와 지표 표로 드려요. 단계마다 실행한 코드도 채팅에서 바로 볼 수 있어요.

이런 분께 필요해요

  • 면담·사고구술·시청 세션에서 참가자 한 명의 표정 프로필을 기술하려는 연구자
  • 광고·디자인 시안·영상 자극에 대한 참가자들의 표정 반응을 조건별로 비교하려는 연구자
  • 사용성 테스트 녹화에서 표정이 바뀐 순간을 찾으려는 UX·HCI 연구자
  • 수작업 FACS 코딩 없이 영상·사진에서 AU 수준의 표정 지표가 필요한 대학원생

이런 결과를 받아요

결과는 두 가지예요. 보고서에 해석이, 지표 표에 숫자가 있어요. 그 숫자를 만든 코드는 채팅의 단계마다 코드 상자로 남아요.

  • 표정 분석 보고서 이번 분석의 전 과정과 결과 · 자료, 영상 품질(얼굴 검출률·크기·고개 돌림), 논문에 옮길 수 있는 방법 문단; 한 사람: 전체 표정 분포, 시간에 따른 변화(시간대·추세·에피소드·정점, 전문가는 변화점), 구간 비교; 여러 참가자: 조건·집단별 지표(기준선 대비), 효과 크기가 있는 검정; 그림(얼굴 사진 없음), 해석과 한계, 보고 체크리스트, 참고문헌 · MD (PDF·PNG 변환 에이전트로 공유용 PDF)
  • 표정 지표 표 파일·시간대·구간·참가자·조건별 숫자 · 한 사람: 전체 분포, 우세 표정 비율, 시간대, 에피소드, 정점, 추세, 구간, 품질. 여러 참가자: 넓은 표·긴 표(기준선 대비·원래 값), 기술통계, 검정, 민감도. 시트 수는 수준에 따라 늘어요 · XLSX (Excel·R·SPSS로 바로 가져가기)

보고서에 들어가는 지표

채팅의 단계마다 그때 실행한 코드가 상자로 남아요. 누르면 오른쪽에서 코드와 실행 결과를 볼 수 있어요.

  • 동작 단위(AU) 눈썹 올림·내림, 뺨 올림, 미소(AU12), 입꼬리 내림, 입술 누름, 턱 벌림 등 17개 — 블렌드셰이프에서 옮긴 0–1 근사값
  • 감정 점수 행복·놀람·슬픔·분노·혐오·공포 원형 점수(EMFACS, 핵심 AU 필수)
  • 분포 우세 표정별 프레임 비율, 지표마다 평균·SD·중앙값, 정서가(−1~1), 각성(0~1), AU 순위, 표현량
  • 시간 변화 시간대별 평균, Spearman 추세와 분당 기울기, 처음·마지막 1/3 비교, 표정 에피소드(횟수·길이·시작 시점), 정점 순간
  • 구간 구간·클립별 평균, 기준선 구간 대비 변화, 프레임 수준 Cliff's δ(기술적)
  • 품질 얼굴 검출률, 얼굴 크기, 밝기, 고개 돌림 비율
  • 통계(여러 참가자) 참가자 기준선 대비 변화, 설계에 맞는 검정, 효과 크기, Holm 보정, 제외 기준

이렇게 요청하세요

{첨부한 파일}의 표정을 분석해 줘 — {볼 것}. — 밑줄 친 부분을 바꿔 쓰세요.

  • 첨부한 파일: 한 사람의 영상이나 사진, 또는 여러 참가자의 녹화(P01_adA.mp4 … 또는 참가자 표). 여러 개는 ZIP으로 올릴 수 있어요.
  • 볼 것: 한 사람이면 어떤 표정이 주로 나타나고 시간·구간에 따라 어떻게 변하는지, 여러 참가자면 어떤 조건·집단을 비교할지.

함께 올리면 좋아요

  • 한 사람의 얼굴 영상 (MP4·MOV·WEBM, 여러 클립은 ZIP) 얼굴이 화면 폭의 10% 이상, 정면에 가까울수록 정확해요
  • 사건 표 (onset·duration·condition) 영상을 구간으로 나눠요. 기준선(baseline) 구간을 넣으면 평상시 얼굴 대비 변화도 함께 보고해요
  • 참가자 표 (participant·group) 파일을 여러 참가자의 것으로 표시하고 집단 비교에 쓸 집단을 줘요

이렇게도 요청할 수 있어요

  • 이 면담 참가자의 표정을 정리해 줘. 어떤 표정이 주로 나타났고 언제 바뀌었어? → 우세 표정 비율, 정서가·각성 시간 경과, 시점이 적힌 에피소드
  • 앞 30초는 기준선이고, 그다음 광고 A(30–90초)와 광고 B(90–150초)를 봐. 구간을 비교해 줘. → 기준선 대비 구간별 평균, Cliff's δ, 구간 그림
  • 이 사용성 세션 동안 미소(AU12)가 늘었어? 10초 단위로 봐 줘. → AU12 추세(Spearman ρ, 분당 기울기), AU × 시간 지도
  • 광고 A와 B를 본 20명의 표정 반응을 비교해 줘. 앞 20초는 기준선이야. → 여러 참가자: 기준선 대비 정서가·AU12 대응 비교, 조건별 AU 지도

나의 지침

녹화마다 구간·기준선·시간대를 잡는 방식이 달라요. 신경 쓰는 항목만 정하면 나머지는 기본값으로 돌아요. 이름을 붙여 저장해 두면 다음에도 쓸 수 있어요. 보고서 첫 쪽에 어떤 지침이 반영됐고 무엇을 가정했는지 적어요.

  • 구간 (자료) 영상을 구간으로 나누는 방법(자극·질문 시점 등) · 예: 0–30초 기준선, 30–90초 광고 A, 90–150초 광고 B · 첨부한 events.csv 사용 · 기본값: 사건 표 → 클립마다 한 구간(파일 이름) → 영상 전체 순
  • 기준선 (자료) 평상시 얼굴로 볼 구간. 있으면 구간 값을 기준선 대비 변화로도 보여요 · 예: 'rest' 구간 · 앞 20초 · 기본값: baseline·neutral·rest 이름의 구간, 없으면 보정 없이 원래 값
  • 대상 표기 (자료) 보고서에서 이 사람을 부를 이름(한 사람 자료) · 예: 화자 A · 참가자 07 · 기본값: 파일 이름에서, 없으면 P1
  • 한 사람 · 여러 참가자 (자료) 파일이 한 사람의 기록인지 여러 참가자의 것인지. 비우면 자료로 판단해요 · 예: 모두 같은 사람의 클립 · 파일마다 다른 참가자 · 기본값: 참가자 표가 있거나 id 같은 파일 이름(P01_·P02_)이 2개 이상이면 여러 참가자, 아니면 한 사람
  • 한 녹화에 여러 얼굴 (자료) 한 화면에 얼굴이 둘 이상일 때 어떻게 할지 · 예: 왼쪽의 피면접자만 · 얼굴마다 참가자로 · 가장 큰 얼굴만 · 기본값: 프로 이상: 위치로 추적한 사람마다 참가자로, 라이트: 가장 큰 얼굴만
  • 집단 (자료) 여러 참가자일 때 참가자 간 집단(있으면) · 예: P01–P10 A집단, P11–P20 B집단 · 기본값: group 열이 있는 참가자 표를 첨부했으면 그것
  • 사용 가능 기준 (처리) 얼굴이 안 잡혀 영상을 쓸 수 없다고 볼 기준 · 예: 얼굴이 안 잡힌 프레임이 30%를 넘으면 중단 · 기본값: 얼굴이 잡힌 프레임 50% 미만이면 불가, 80% 미만이면 주의
  • 분석 창 (처리) 구간마다 분석할 길이 · 예: 자극마다 앞 10초만 · 기본값: 구간 전체
  • 시간대 폭 (분석) 시간 경과와 시간대별 비율에 쓰는 시간대 폭 · 예: 10초마다 · 기본값: 1분까지 2초, 5분까지 5초, 15분까지 10초, 그 이상 30초
  • 표정 에피소드 (분석) 표정 에피소드로 셀 기준(점수와 최소 길이) · 예: 점수 0.5 이상이 1초 이상 · 기본값: 점수 0.3 이상이 0.5초 이상, 한 프레임 빠짐 허용
  • 주 지표 (분석) 시간 변화·정점·구간·조건·집단 비교에 쓸 지표 · 예: 미소(AU12)와 놀람만 · 기본값: 정서가, 각성, 행복, 놀람, AU12(미소), AU04(눈썹 내림); 여러 참가자면 정서가·각성·AU12·AU04 를 한 묶음으로 Holm 보정
  • 유의수준 (분석) 조건·집단 검정의 α(여러 참가자) · 예: α = .01 · 기본값: α = .05
  • 보고서 언어 (결과 형식) 작성 언어 · 예: 영어로 작성 · 기본값: 요청 언어

이 방법으로 일해요

모델이 숫자를 짐작하지 않아요. 단계마다 분석 스크립트를 실제로 실행하고, 그 코드를 채팅에 상자로 남겨요. 모델은 지침을 파라미터로 바꾸는 일과 결과 해석만 맡아요.

  • 자료 확인 하는 일: 파일(영상·사진)·참가자·구간·길이·해상도를 표로 정리하고, 자료를 보고 한 사람인지 여러 참가자인지 정해요 · 정할 수 있는 것: 구간, 기준선, 한 사람·여러 참가자, 집단 · 확인할 것: 구간과 한 사람/여러 참가자 판정
  • 영상 품질 점검 하는 일: 초당 1장으로 얼굴 검출률·얼굴 크기·밝기·고개 돌림·얼굴 수를 보고 통과/주의/불가 판정 · 정할 수 있는 것: 사용 가능 기준, 여러 얼굴 처리 · 확인할 것: 주의·불가 클립
  • 표정 추출 하는 일: 프레임마다 블렌드셰이프 → AU 근사, 감정 점수, 정서가·각성, 우세 표정; 여러 얼굴은 위치로 추적해 사람별로 나누거나 한 사람만 남겨요 · 정할 수 있는 것: 분석할 사람 · 확인할 것: 얼굴이 잡힌 비율, 찾은 인물
  • 구간 지표 하는 일: 구간마다 평균, 기준선 구간이 있으면 그 대비 변화도 · 정할 수 있는 것: 기준선, 분석 창 · 확인할 것: 기준선이 평상시 얼굴인지
  • 분석 하는 일: 한 사람: 우세 표정 비율, AU 프로필, 시간대별 평균, 추세, 에피소드, 정점(전문가는 변화점·AU 추세·맥락); 여러 참가자: 설계에 맞는 검정, 효과 크기, Holm 보정(프로 이상) · 정할 수 있는 것: 시간대 폭, 에피소드 기준, 주 지표, 유의수준 · 확인할 것: 다시 볼 순간이나 조건
  • 그림 하는 일: 한 사람: 정서가·각성 시간 경과, 감정 타임라인, 표정 비율, AU 프로필, 구간; 여러 참가자: AU 변화 지도, 표정 비율, 조건 비교 (얼굴 사진 없음) · 정할 수 있는 것: — · 확인할 것: 그림의 흐름
  • 해석과 한계 하는 일: 숫자를 바꾸지 않고 표정 패턴을 기술, 느낀 감정은 단정하지 않음 · 정할 수 있는 것: — · 확인할 것: 해석의 범위
  • 보고서 하는 일: 보고서·지표 표 저장 · 정할 수 있는 것: 보고서 언어 · 확인할 것: 체크리스트의 기입 항목

수준에 따라 달라지는 것

받는 파일 형식

  • MP4 · MOV · WEBM · AVI · MKV · M4V 얼굴 영상. 한 영상에 여러 얼굴이 있으면 추적해 사람별로 나눠요(아래 참고)
  • ZIP 압축을 풀어 안의 파일을 읽어요. 한 사람의 클립인지 여러 참가자의 녹화인지는 이름과 표로 정해요
  • 사건 표 onset·duration·condition(초). 영상을 구간으로 나눠요
  • JPG · PNG · WEBP · BMP · TIFF 사진 한 장 = 프레임 하나. 한 사람의 사진 여러 장은 구간으로, 여러 참가자의 사진은 참가자 × 조건으로 비교해요
  • 이 에이전트 하나가 다 받아요: 한 사람이든 여러 참가자든(참가자 표나 P01_·P02_ 같은 id 파일 이름으로 판단, 요청에 적어도 돼요), 영상이든 사진이든. 여러 사람이 한 화면에 있으면 ②가 경고하고 ③이 얼굴을 위치로 이어 붙여요. 프로부터는 사람마다 참가자(A, B, … 왼쪽부터)로 나눠 분석하고, "왼쪽의 피면접자만", "가장 큰 얼굴만", "처음 나온 얼굴"처럼 한 사람만 고를 수도 있어요. 라이트는 가장 큰 얼굴만 읽어요.

방법에 대해

  • 표정은 감정이 아니에요 미소(AU12)가 늘었다는 것은 측정할 수 있지만, 그 사람이 더 즐거웠다는 뜻은 아니에요. 같은 감정도 사람·상황·사회적 규칙에 따라 다르게 드러나요(Barrett 외, 2019). 그래서 보고서는 표정 움직임을 기술하고, 원인은 관찰 기록·자기보고와 함께 해석하도록 안내해요.
  • 분포와 시간 변화 먼저 영상 전체를 요약해요. 프레임마다 어떤 표정이 우세했는지, 얼마나 자주였는지, 지표마다 평균이 얼마였는지요. 그다음 영상을 시간대로 잘라 추세(Spearman ρ, 분당 기울기)를 보고, 감정 점수가 기준 이상으로 이어진 구간을 표정 에피소드로 세어 시작 시점과 함께 적어요. 녹화에서 다시 볼 만한 순간이에요.
  • 기준선이 있으면 좋은 이유 평소 얼굴은 사람마다 달라요. 중립 구간(예: 앞 30초)을 표시하면 구간 지표를 그 대비 변화로도 보여 줘요. 없으면 원래 값을 보고해요.
  • 개인정보 얼굴 영상은 민감한 개인정보예요. 본인 동의 범위 안에서만 올려 주세요. 보고서와 그림에는 얼굴 사진을 넣지 않아요.
  • 팁 정면에서, 고르게 밝게, 얼굴이 화면 폭의 10% 이상 되도록 찍어 주세요.
  • 자극·질문 시점을 사건 표로 적어 주면 구간을 비교할 수 있어요.
  • 결과를 받은 뒤 채팅으로 이어서 요청할 수 있어요. 예: "10초 단위로 봐 줘", "점수 0.5부터 에피소드로 세 줘"
  • 한 사람인지 여러 참가자인지 자료를 보고 정해요. 참가자 표, 사건 표의 participant 열, id 같은 파일 이름 2개 이상(P01_·P02_·sub-01)이 있으면 여러 참가자로 보고 조건·집단을 비교하고, 아니면 모두 한 사람의 기록으로 보고 분포와 시간 변화를 기술해요. 요청에 적으면 그대로 따라요.

자주 묻는 질문

FACS 코더가 매긴 점수와 같나요?
아니요. AU는 얼굴 블렌드셰이프에서 옮긴 0–1 근사값이고, 사람 코더의 0–5 강도와는 척도가 달라요. 한 사람의 표정을 시간에 따라 좇기에 알맞아요.
말하는 장면도 분석되나요?
분석은 되지만 입 주변 AU(턱 벌림·입술 벌어짐)가 말 때문에 커져요. 말하는 구간은 따로 나누거나 해석에서 감안하세요.
여러 참가자를 비교할 수 있나요?
네. 참가자별 파일(P01_adA.mp4, P02_adA.mp4 … 또는 참가자 표)을 올리면 참가자마다 기준선 대비로 조건·집단을 비교하고 효과 크기와 Holm 보정을 붙여요(프로 이상, 3명 미만은 기술통계만).
한 영상에 두 사람이 있으면요?
②가 여러 얼굴이 얼마나 자주 보이는지 알려요. 프로부터는 ③이 얼굴을 위치로 추적해 사람마다 참가자(A, B, … 왼쪽부터; 잠깐 지나가는 사람은 제외)로 분석하고, 실행은 조건·집단 비교로 바뀌어요. 한 사람만 원하면 "왼쪽 사람만 분석해 줘"처럼 적어 주세요. 자리를 바꾸면 뒤섞일 수 있고, 보고서에 그렇게 적어요.
사진도 분석되나요?
네. 사진 한 장은 프레임 하나예요. 표정 분포와 AU 프로필을 내고, 사진 여러 장은 평균 차로 비교해요. 시간에 따른 변화는 영상에서만 계산해요.
우울·자폐 같은 판단에 쓸 수 있나요?
아니요. 연구용 분석이에요. 임상 판단에는 쓰지 마세요.
라이트에서는 무엇을 받나요?
영상 하나의 한 쪽짜리 프로필이에요. 어떤 표정이 우세했고 정서가·각성이 어떻게 움직였는지를 그림 2장과 시트 1장으로요. 구간 비교·추세·에피소드와 전체 보고서는 프로부터예요.
영상은 얼마나 길어도 되나요?
업로드는 파일당 1GB까지예요. 라이트는 영상 1개, 프로는 같은 사람의 클립 10개, 전문가는 20개, 최대 추론는 50개까지 한 번에 분석해요. 여러 참가자의 파일은 60(프로)·120(전문가)·300(최대 추론)개, 사진은 10/100/200/500장까지예요.