研究の問い / 技術の機能 Question
自然に発生する微表情は持続時間が短く収集が難しいため、研究に必要なデータセットが世界的に不足しています。既存の顔画像を参照してオリジナル顔画像を収集し、モーフィング合成で200種類以上の微表情パターンを人工生成することで、微表情研究の基盤データセット構築に取り組みました。データが存在しないなら、作ることから始めるアプローチです。
微表情データセット構築とは
微表情データセット構築とは、平均顔とモーフィング技術を組み合わせ、個人差を均質化しながら微細な表情変化を体系的に収録した人工顔画像データを生成する技術です。高強度感情が中心の既存データベースの課題を補完します。
プロジェクト概要 Project Overview
平均顔とモーフィング技術を用いて、微細な顔表情に特化した人工顔画像データセットを構築した事例です。既存の高強度感情中心のデータベースとは異なり、微表情を体系的に扱える基盤整備を目的としてオルチェが担当しました。
-
目的
-
微表情に特化した均質化顔画像データセットの構築
-
参照データ
-
JAFEEのアジア人顔画像(18種類の表情)
-
被験者
-
6名(表情模倣・顔画像収集)
-
生成パターン
-
平均顔50種×モーフィング200パターン
背景・課題 Background
多くの既存顔表情データベースは高強度の感情表現に重点を置いており、微細な表情変化は十分にカバーされていませんでした。また個人差の影響を受けやすく、機械学習用データとして均質化が難しいという課題もありました。
-
01
既存データベースは高強度感情が中心で、微細な表情変化を体系的に扱える基盤が欠けていました。
-
02
個人差による均質性の問題
実際の顔画像は個人差が大きく、機械学習用データとして均質化することが困難でした。
-
03
研究再現性の課題
データの標準化が不十分なため、異なる研究間での比較や再現が難しい状況でした。
アプローチ Approach
JAFEEのアジア人顔画像を参照し、18種類の表情を模倣するよう6名の被験者からオリジナル顔画像を収集しました。これらを組み合わせ、平均顔とモーフィング技術を用いて人工的に多様な微表情パターンを生成しています。
-
平均顔生成 Average Face Generation
- オリジナル顔画像を組み合わせて平均顔を生成
- 50種類の平均顔パターンを作成
個人差を均質化した基準顔を生成し、表情変化の制御精度を高めます。
approach-average-face.png -
モーフィング生成 Morphing Generation
- 平均顔を基準に200種類の表情パターンを生成
- a) 無表情から全顔への補間モーフィング(平均顔あたり30パターン)
- b) 異なる表情間で目・口を変更(平均顔あたり30パターン)
2タイプの生成手法により、微表情の多様なパターンを体系的にカバーします。
approach-morphing-generation.png
得られた知見・成果 Results
本プロジェクトにより、微表情に特化した平均顔データセット・均質化された顔特徴上での表情変化データ・機械学習に適した大量の人工表情データを整備しました。微細な感情変化を構造化して扱えるデータ基盤を構築しています。
-
01
微表情専用データセットを構築
50平均顔×200パターンの人工微表情データを整備し、研究・機械学習に活用できる基盤を完成させました。
-
02
個人差を均質化した基準顔を実現
平均顔を基準とすることで、個人差の影響を排除した均質な表情データを生成できるようにしました。
-
03
文化差に依存しない感情研究を支援
アジア人顔画像を参照した基盤として、文化的偏りを考慮した感情研究への応用が可能になりました。
位置付け・展望 Position & Outlook
見出しサンプル
本データセットは、高精度感情分析・機械学習モデルの訓練・文化差に依存しない感情研究など多分野で再利用可能です。オルチェが整備した微表情特化データ基盤は、感情認識・心理学・医療・HCI分野への展開可能性を持ちます。
- 高精度感情分析・微表情認識モデルの訓練
- 文化差に依存しない感情研究・精神的状態の理解
- HCI(ヒューマン・コンピュータ・インタラクション)研究
見出しサンプル
表情は連続的に変化する現象であるため、静止画の分類だけでは十分に扱えません。本研究では、顔の表情を滑らかに変形するモーフィングアルゴリズムを構築し、表情の境界や中間状態を研究データとして生成できる環境を整えました。微妙な変化を扱える道具があって、はじめて微妙な心理を論じることができます。
表情は、人の気持ちを静かに映します。オルチェは、その動きをやさしく読み解く技術を磨いています。