顔動作コーディングシステム

頭と首の筋肉

動作符号化システムFACS )は、人間の顔の動きを顔の外観によって分類するシステムであり、スウェーデンの解剖学者カール・ヘルマン・ホルトショーによって開発されたシステムに基づいています。[ 1 ]その後、ポール・エクマンウォレス・V・フリーゼンによって採用され、1978年に発表されました。 [ 2 ]エクマン、フリーゼン、ジョセフ・C・ハーガーは2002年にFACSの重要な更新版を発表しました。[ 3 ] FACSは、顔の外観のわずかな瞬間的な変化から、個々の顔面筋の動きを符号化します。これは心理学者アニメーターにとって有用であることが証明されています。

背景

視覚障害を持つアスリート、サンドリーン・マルティネが競技で喜びを表現している。視覚障害を持つ人が晴眼者と同じ表情を見せるという事実は、表情が生まれつき備わっていることを示している。

2009年、晴眼者と視覚障害者の柔道選手の自発的な表情を調査する研究が行われました。その結果、多くの表情は生得的なものであり、視覚的に学習されたものではないことが明らかになりました。[ 4 ]

方法

FACS [ 5 ]を用いることで、人間のコーダーは解剖学的に考え得るほぼあらゆる表情を手動でコード化することができ、表情を特定の「動作単位」(AU)とその表情を生み出した時間的セグメントに分解することができます。AUはいかなる解釈にも依存しないため、基本的な感情の認識や、周囲の知能環境のための事前プログラムされたコマンドなど、あらゆる高次の意思決定プロセスに利用できます。FACSのマニュアルは500ページ以上あり、AUとその意味に関するエクマンの解釈が示されています。

FACSは、AUを1つまたは複数の筋肉の収縮または弛緩と定義しています。また、いくつかの「動作記述子」も定義しています。これらの動作記述子は、FACSの著者が動作の筋肉的基盤を特定しておらず、AUほど正確に特定の動作を区別していないという点で、AUとは異なります。

例えば、FACSは次のように2種類の笑顔を区別するために使用できます。[ 6 ]

FACSは自己学習用に設計されており、マニュアルやワークショップなど様々な方法で技術を習得し、[ 7 ]試験に合格することで認定を受けることができます。[ 8 ]

現在、表現型のラベル付けには訓練を受けた専門家が必要ですが、研究者はコンピュータを使用してFACSコードを自動的に識別することに成功しています。[ 9 ] FACSコードの自動認識の障害の1つは、手動でコード化されたグラウンドトゥルースデータの不足です。[ 10 ]

用途

ベビーFACS

乳児FACS(乳幼児顔面動作符号化システム)[ 11 ]は、成人FACSを0~2歳乳児の表情を符号化するために改良した行動符号化システムです。乳児の顔面構造と表情パターンに合わせて、特定の顔面筋に対応しています。

この技術は、顔の筋肉、比率、発達能力が大きく異なる乳児に成人の FACS を直接適用することの限界に対処するために、ハリエット・オスター博士とその同僚によって開発されました。

医療での使用

FACSの使用は、うつ病の分析[ 12 ]言語的に表現できない患者の痛みの測定に使用することが提案されている。[ 13 ]

専門分野間の応用

オリジナルのFACSは、チンパンジー[ 14 ]アカゲザル[ 15 ] 、テナガザル[16] 、フクロオオカミ[ 17 ] 、オ​​ランウータン[18 ]などのヒト以外の霊長類の顔の動きを分析できるように改良されました。最近では、イヌ[19]、ウマ[20]、ネコ[21]などの家畜種向けにも開発されましたヒトFACS同様ヒトFACSにも、それぞれの種の認証テストが記載されたマニュアルがオンラインで提供されます[ 22 ]

このように、FACSは解剖学的な基盤を持つため、種間の顔の表情レパートリーを比較するために使用することができます。Vickら(2006)による研究では、FACSは基礎となる形態学的差異を考慮することで修正できることが示唆されています。このような考慮により、ヒトとチンパンジーに見られる相同的な顔面運動を比較することができ、両種の顔の表情が非常に顕著な外観の変化から生じていることを示すことができます。異なる種を対象としたFACSツールの開発により、コミュニケーションや感情の文脈における顔の表情を客観的かつ解剖学的に研究することが可能になります。さらに、顔の表情を種間的に分析することで、どのような感情が人間に特有のものかといった興味深い疑問に答えることができます。[ 22 ]

感情的顔動作コーディングシステム(EMFACS)[ 23 ]と顔動作コーディングシステム感情解釈辞書(FACSAID)[ 24 ]は、感情に関連する顔動作のみを考慮します。これらの例としては、以下のようなものがあります。

感情アクションユニット
幸せ6+12
悲しみ1+4+15
驚き1+2+5B+26
恐れ1+2+4+5+7+20+26
怒り4+5+7+23
嫌悪9+15+17
軽蔑R12A+R14A

コンピューター生成画像

FACSコーディングはコンピュータアニメーション、特にコンピュータフェイシャルアニメーションで広く使用されており、顔の表情はAUのベクターグラフィックとして表現されます。 [ 25 ] FACSベクトルは各AUに対応するブレンドシェイプの重みとして使用され、結果として得られる顔のメッシュは完成した顔をレンダリングするために使用されます。[ 26 ] [ 27 ]ディープラーニング技術を使用して、モーションキャプチャ演技顔のモーションキャプチャ、またはその他のパフォーマンス中に取得された顔画像からFACSベクトルを決定することができます。[ 28 ]

アクションユニットのコード

明確にするために、FACSは表情の指標であり、実際には筋肉の活動度合いに関する生体力学的情報を提供するものではありません。筋肉の活動はFACSの一部ではありませんが、表情に関与する主要な筋肉はここに追加されています。

アクション ユニット(AU) は、個々の筋肉または筋肉グループの基本的な動作です。

動作記述子(AD)は、複数の筋群の活動を伴う可能性のある単位的な運動である(例:顎を前方に突き出す運動)。これらの動作の筋学的基盤は特定されておらず、特定の行動はAUほど正確に区別されていない。

最も正確な注釈付けのために、FACS は少なくとも 2 人の独立した認定 FACS エンコーダーからの合意を提案します。

強度スコアリング

FACS の強度は、アクション ユニット番号に文字 A~E (最小~最大強度) を追加することで注釈が付けられます (例: AU 1A は AU 1 の最も弱いトレースで、AU 1E は個人に可能な最大強度です)。

  • 痕跡
  • B わずか
  • C 顕著または顕著
  • D 重度または極度
  • E 最大値

その他の文字修飾語

FACSコードには、感情表現を表す他の修飾語も存在します。例えば、「R」は顔の右側で起こる動作、「L」は左側で起こる動作を表します。片側性(顔の片側のみで起こる)で特定の側を持たない動作は「U」で示され、両側性で強い側を持つ動作は「A」(非対称性)で示されます。

AU と AD のリスト(基礎となる顔面筋を含む)

メインコード

AU番号FACS名筋肉の基礎
0ニュートラルな顔
1眉毛の内側を上げる前頭筋内側部
2眉毛の外側を上げる前頭筋外側部
4眉を下げる眉間圧筋超眉圧筋皺皺筋
5上まぶた上げ器上眼瞼挙筋上足根筋
6頬上げ眼輪筋(眼輪筋)
7蓋締め眼輪筋(眼瞼部)
8唇を合わせる口輪筋
9鼻のしわ上唇挙筋、アラエケナシ
10上唇を上げる上唇挙筋眼窩下頭
11鼻唇溝深層除去剤小頬骨筋
12リップコーナープーラー大頬骨筋
13鋭い唇引き器口角挙筋(犬歯筋とも呼ばれる)
14ディンプラー頬筋
15口角下降筋口角下制筋(三角筋とも呼ばれる)
16下唇下制筋下唇下制筋
17顎上げ器メンタリス
18唇をすぼめるincisivii 上唇incisivii 下唇
19舌出しショー
20リップストレッチャー広頸筋を伴う滑膜筋
21ネックタイター広頸筋
22リップファンネル口輪筋
23リップタイトナー口輪筋
24唇圧迫器口輪筋
25唇の部分下唇圧子、またはオトガイ筋または口輪筋の弛緩
26びっくり仰天咬筋;側頭筋内翼突筋の弛緩
27口を伸ばす翼突筋二腹筋
28唇を吸う口輪筋

頭部運動コード

AU番号FACS名アクション
51頭を左に回す
52頭を右に向ける
53頭を上げる
54頭を下げる
55頭を左に傾ける
M55頭を左に傾ける対称的な 14 の開始は、頭を左に傾ける動作の直前またはそれと同時に起こります。
56頭を右に傾ける
M56頭を右に傾ける対称的な 14 の開始は、その直前または直後に頭を右に傾ける動作を伴います。
57前進する
M57頭を前に突き出す17+24 の発症の直前、直後、または直後に、頭部が前に突き出されます。
58頭を後ろに下げる
M59頭を上下に振る17+24 の始まりは、その直前、同時、または直後に頭を上下に振る動作 (うなずき) を伴う。
M60頭を左右に振る17+24 の発生の直前、直後、または直後に、左右に頭を振る動作が起こります。
M83頭を上向きに横向きにする対称的な 14 の開始は、頭が上向きになり、左または右に向いたり傾いたりする動きの直前または直後に発生します。

眼球運動コード

AU番号FACS名アクション
61目は左を向く
M61左目対称的な 14 の開始は、左への眼球運動の直前またはそれと同時に起こります。
62目は右を向く
M62右目対称的な 14 の開始は、右への眼球運動の直前またはそれと同時に起こります。
63目を上げる
64目を伏せて
65ウォールアイ
66寄り目
M68目を上に向ける対称的な 14 の発生は、目の上向きの回旋の直前またはそれと同時に起こります。
69他の人を見るための目の位置会話中の相手に視線を固定しながら、4、5、または 7 が単独または組み合わせて発生します。
M69頭や目は他の人を見る対称的な AU 14 または AU 4、5、7 が単独または組み合わせで出現する直前、または直後に、会話中の他の人を見るための目の動き、または頭と目の動きが起こります。

可視性コード

AU番号FACS名
70眉毛と額が見えない
71目は見えない
72下面は見えない
73顔全体が見えない
74スコア付け不可

粗暴行動コード

これらのコードは、スコア付けされる顔の動作に関連する可能性のある全体的な動作に関する情報を記録するために予約されています。

AU番号FACS名筋肉の基礎
29顎突き上げ
30顎を横向きにする
31顎をくいしばる人咬筋
32[唇]を噛む
33【頬】一撃
34[頬]ふっくら
35[ほっぺ]吸う
36[舌]の膨らみ
37リップワイプ
38鼻孔拡張器鼻筋(鼻翼部)
39鼻孔圧縮器鼻筋横部)と中隔鼻圧筋
40スニフ
41まぶたの垂れ下がり上眼瞼挙筋(弛緩)
42スリット眼輪筋
43目を閉じて上眼瞼挙筋の弛緩
44斜視上皺筋 と眼輪筋
45瞬き上眼瞼挙筋の弛緩。眼輪筋眼瞼部) の収縮
46ウィンク眼輪筋
50スピーチ
80飲み込む
81噛む
82肩をすくめる
84頭を前後に振る
85頭を上下にうなずく
91フラッシュ
92部分的なフラッシュ
97*震える
98*素早く上下を見る

参照

参考文献

  1. ^ Hjortsjö CH (1969).人間の顔と模倣言語.無料ダウンロード:Carl-Herman Hjortsjö『人間の顔と模倣言語』 2022年8月6日アーカイブ、Wayback Machineにて
  2. ^ Ekman P, Friesen W (1978).顔動作コーディングシステム:顔の動きの測定技術. パロアルト: コンサルティング心理学出版社.
  3. ^ Ekman P, Friesen WV, Hager JC (2002).顔動作コーディングシステム:CD-ROMマニュアル. ソルトレイクシティ:人間の顔.
  4. ^松本大輔、ウィリンガム・B. (2009). 「視覚障害者の自発的な感情表現」パーソナリティ・社会心理学ジャーナル、96(1), 1-10
  5. ^ Freitas-Magalhães (2012). 「Microexpression and macroexpression」. Ramachandran VS (ed.). Encyclopedia of Human Behavior . Vol. 2. Oxford: Elsevier/Academic Press. pp.  173– 183. ISBN 978-0-12-375000-6
  6. ^ Del Giudice M, Colle L (2007年5月). 「喜びの笑顔の認識における子どもと大人の違い」.発達心理学. 43 (3): 796– 803. doi : 10.1037/0012-1649.43.3.796 . PMID 17484588 . 
  7. ^ Rosenberg EL. 「ある教育専門家の例とウェブサイト」 2009年2月6日時点のオリジナルよりアーカイブ2009年2月4日閲覧。
  8. ^ 「顔動作コーディングシステム」ポール・エクマン・グループ。 2019年10月23日閲覧
  9. ^顔動作コーディングシステム. 2007年7月21日閲覧。
  10. ^ Song, Juan; Liu, Zhilei (2023年3月10日). 「領域と関係の学習による自己教師型顔動作単位検出」. arXiv : 2303.05708 [ cs.CV ].
  11. ^オスター、ハリエット (2006). 『Baby FACS:乳幼児の顔動作コーディングシステム』ニューヨーク:未発表モノグラフおよびコーディングマニュアル. ニューヨーク大学.
  12. ^ Reed LI, Sayette MA, Cohn JF (2007年11月). 「うつ病がコメディへの反応に与える影響:動的顔面コーディング分析」. Journal of Abnormal Psychology . 116 (4): 804–9 . CiteSeerX 10.1.1.307.6950 . doi : 10.1037/0021-843X.116.4.804 . PMID 18020726 .  
  13. ^ Lints-Martindale AC, Hadjistavropoulos T, Barber B, Gibson SJ (2007). 「アルツハイマー病の有無にかかわらず高齢者における疼痛変動の指標としての顔面動作コーディングシステムの心理物理学的研究」 . Pain Medicine . 8 (8): 678–89 . doi : 10.1111/j.1526-4637.2007.00358.x . PMID 18028046 . 
  14. ^ Parr LA, Waller BM, Vick SJ, Bard KA (2007年2月). 「筋肉動きを用いたチンパンジーの表情の分類」 . Emotion . 7 (1): 172– 81. doi : 10.1037/1528-3542.7.1.172 . PMC 2826116. PMID 17352572 .  
  15. ^ Parr LA, Waller BM, Burrows AM, Gothard KM, Vick SJ (2010年12月). 「短報:MaqFACS:アカゲザルの筋肉に基づく顔面運動コーディングシステム」 . American Journal of Physical Anthropology . 143 (4): 625–30 . Bibcode : 2010AJPA..143..625P . doi : 10.1002/ ajpa.21401 . PMC 2988871. PMID 20872742 .  
  16. ^ Waller BM, Lembeck M, Kuchenbuch P, Burrows AM, Liebal K (2012). 「GibbonFACS:ヒロバティド類の筋肉に基づく顔面運動コーディングシステム」. International Journal of Primatology . 33 (4): 809– 821. doi : 10.1007/s10764-012-9611-6 . S2CID 18321096 . 
  17. ^ Caeiro CC, Waller BM, Zimmermann E, Burrows AM, Davila-Ross M (2012). 「OrangFACS:オランウータン( Pongo属)の筋肉ベースの顔面運動コーディングシステム」 (PDF) . International Journal of Primatology . 34 : 115–129 . doi : 10.1007/s10764-012-9652-x . S2CID 17612028 . 
  18. ^ Waller BM, Peirce K, Caeiro CC, Scheider L, Burrows AM, McCune S, Kaminski J (2013). 「小児形態学的表情は犬選択的優位性を与える」 . PLOS ONE . 8 (12) e82686. Bibcode : 2013PLoSO...882686W . doi : 10.1371/journal.pone.0082686 . PMC 3873274. PMID 24386109 .  
  19. ^ Wathan J, Burrows AM, Waller BM, McComb K (2015-08-05). 「EquiFACS:馬の顔面動作コーディングシステム」 . PLOS ONE . 10 (8) e0131738. Bibcode : 2015PLoSO..1031738W . doi : 10.1371/journal.pone.0131738 . PMC 4526551. PMID 26244573 .  
  20. ^ Caeiro CC, Burrows AM, Waller BM (2017-04-01). 「CatFACSの開発と応用:猫を飼い始めた人は猫の表情に影響を受けるのか?」(PDF) .応用動物行動科学. 189 : 66– 78. doi : 10.1016/j.applanim.2017.01.005 . ISSN 0168-1591 . 2018年7月21日時点のオリジナル(PDF)からアーカイブ。 2019年11月7日閲覧 
  21. ^ "ホーム" . animalfacs.com . 2019年10月23日閲覧
  22. ^ Vick SJ, Waller BM, Parr LA, Smith Pasqualini MC, Bard KA (2007年3月). 「顔動作コーディングシステム(FACS)を用いたヒトとチンパンジーの顔面形態と動作の種間比較」 . Journal of Nonverbal Behavior . 31 (1): 1– 20. doi : 10.1007/s10919-006-0017- z . PMC 3008553. PMID 21188285 .  
  23. ^ Friesen W, Ekman P (1983), EMFACS-7: 感情的顔面動作符号化システム. 未発表原稿, 第2巻, カリフォルニア大学サンフランシスコ校, p. 1
  24. ^ 「顔動作コーディングシステム感情解釈辞書(FACSAID)」2011年5月20日時点のオリジナルよりアーカイブ2011年2月23日閲覧。
  25. ^ Walsh, Joseph (2016年12月16日). 「ローグ・ワン:CGIによるピーター・カッシングの復活はスリリングだが、果たして正しいのか?」 . The Guardian . ISSN 0261-3077 . 2023年10月23日閲覧 
  26. ^ Gilbert, Michaël; Demarchi, Samuel; Urdapilleta, Isabel (2021年10月). 「FACSHuman:3D表情モデリングによる実験用マテリアル作成ソフトウェア」 .行動研究方法. 53 (5): 2252– 2272. doi : 10.3758/s13428-021-01559-9 . ISSN 1554-3528 . PMID 33825127 .  
  27. ^ 「MayaでFACSフェイシャルブレンドシェイプを作成する方法を学ぶ | CG Channel」2023年10月23日閲覧。
  28. ^ Gudi, Amogh; Tasli, H. Emrah; Den Uyl, Tim M.; Maroulis, Andreas (2015). 「ディープラーニングに基づくFACSアクションユニットの発生と強度推定」. 2015 第11回IEEE国際会議およびワークショップ 自動顔・ジェスチャー認識 (FG) . pp.  1– 5. doi : 10.1109/FG.2015.7284873 . ISBN 978-1-4799-6026-2. S2CID  6283665 .