多様な情報から人の感情、態度、個性を推定 マルチモーダル社会的信号処理技術

再開催を依頼する / 関連するセミナー・出版物を探す
オンライン 開催

本セミナーでは、コミュニケーション中に人が表出する言語・非言語マルチモーダル情報 (言語・音声・視線・姿勢・ジェスチャ・生体情報など) を統合的に処理することによって、その人の行動や感情、態度、個性といった内面状態を推定する技術に関して解説いたします。
また、会話ロボット・インタラクティブシステムへの応用に関する最新の研究動向を紹介いたします。

日時

開催予定

プログラム

マルチモーダル情報から人の内面状態を推定する社会的信号処理技術は会話ロボットを初めとする人工知能システムのための、インターフェイスを構築する上で重要であり、ユーザの態度推定に基づいて適応的に振る舞うロボットなど、人に寄り添う人工知能の実現に欠かせない。  本講義では、コミュニケーション中に人が表出する言語・非言語マルチモーダル情報 (言語・音声・視線・姿勢・ジェスチャ・生体情報など) を統合的に処理することによって、その人の行動や感情、態度、個性といった内面状態を推定する技術に関して解説を行う。また会話ロボット・インタラクティブシステムへの応用に関する最新の研究動向を紹介する。

  1. マルチモーダル社会的信号処理の導入
  2. マルチモーダル社会的信号処理のための理論
    1. 社会言語学の知見
    2. 社会心理学の知見
  3. 社会的信号処理に用いるマルチモーダル情報処理のための基礎
    1. 音声情報処理
    2. 画像情報処理
    3. 言語情報処理
    4. 生体情報,その他のセンサ情報処理
  4. 社会的信号処理のためのAI技術
    1. 機械学習
      1. 分類・回帰学習
      2. 時系列データの学習
      3. マルチモーダル情報の統合手法
      4. マルチモーダル機械学習
    2. データマイニング
      1. 時系列データからのパターン発見
      2. 時系列パターンのクラスタリング
  5. 社会的信号処理モデルの構築方法
    1. データコーパスの収集
    2. 心理学の知見を利用した正解ラベルデータの作成方法
    3. 入力モダリティの選定
    4. マルチモーダル特徴量の抽出
    5. マルチモーダル情報の機械学習・評価
  6. 社会的信号処理の応用実例
    1. マルチメディアコンテンツ解析
    2. 会話理解
    3. コミュニケーション・プレゼンテーション能力の推定
    4. 行動情報に基づくストレス推定
    5. 行動データに基づく認知症傾向の推定
  7. 社会的信号処理の知能ロボットへの応用
    1. マルチモーダル会話ロボット
    2. ユーザの内的状態推定に基づくロボットの会話戦略
    3. ユーザの面接対話スキル判定機能を備えた就職面接訓練エージェントシステム
  8. 社会的信号処理・マルチモーダル情報処理の課題

受講料

複数名受講割引

アカデミー割引

教員、学生および医療従事者はアカデミー割引価格にて受講いただけます。

ライブ配信セミナーについて