研究紹介

対話エージェントによる自動コミュニケーション訓練

自閉症の方は、コンピュータなどシステム化されたものへの興味や理解が高くなる 傾向があることが知られています。複雑なコミュニケーションのスキルを、コンピュータとの対話を通して、ステップに分けて個 人に適応 して訓練することは、自閉症の方にとって予測しやすく不安がなく、情報技術を利用する大きな利点となると思っています。
対話エージェントを利用し、コミュニケーションスキルの自動評価、ソーシャルスキルトレーニン グ(SST)など認知行動療法の自動化を試みています。

[ブ ログ] [Youtube] [自 動SST]

関係する論文:

  • Hiroki Tanaka, Sakriani Sakti, Graham Neubig, Tomoki Toda, Hideki Negoro, Hidemi Iwasaka, Satoshi Nakamura, Automated Social Skills Trainer, International Conference on Intelligent User Interfaces (IUI), Mar. 2015.
  • Hiroki Tanaka, Hideki Negoro, Hidemi Iwasaka, Satoshi Nakamura, Embodied Conversational Agents for Multimodal Automated Social Skills Training in People with Autism Spectrum Disorders, Plos One, Aug. 2017.
  • Hiroki Tanaka, Hideki Negoro, Hidemi Iwasaka, Satoshi Nakamura, Listening Skills Assessment through Computer Agents, ACM International Conference on Multimodal Interaction (ICMI), Oct. 2018.

機械学習による精神状態の評価

人対人、人対シス テムにおける、対話中の多元的特徴から、ニューラルネットワーク、テンソル因子分解などを利用し、精神疾患、感情、うつ傾向、違 和感 などを検知し、その特性を評価する技術について研究をしています。
 

関係する論文:

  • Hiroki Tanaka, Nick Campbell, Classification of Social Laughter in Natural Conversational Speech, Computer Speech & Language, vol.28(1), pp.314-325, 2014.
  • Hiroki Tanaka, Hiroyoshi Adachi, Norimichi Ukita, Manabu Ikeda, Hiroaki Kazui, Takashi Kudo, and Satoshi Nakamura, Detecting Dementia through Interactive Computer Avatars, IEEE Journal of Translational Engineering in Health and Medicine, vol.5(1), pp.1-11, Dec. 2017.
  • Hiroki Tanaka, Hiroki Watanabe, Hayato Maki, Sakriani Sakti, Satoshi Nakamura, Single-trial Detection of Semantic Anomalies from EEG during Listening to Spoken Sentences,  International Conference of the IEEE Engineering in Medicine and Biology Society (EMBC), pp. 977-980, July 2018.

他者の言語・非言語情報の読み取り訓練

人間の状況に合わ せた言語・非言語情報の変化について、読み取ることの訓練を目指したアプリを開発しました。
 

関係する論文:

  • Hiroki Tanaka, Sakriani Sakti, Graham Neubig, Tomoki Toda, Satoshi Nakamura, NOCOA: A Computer-Based Training Tool for Social and Communication Skills That Exploits Non-verbal Behaviors, The Journal of Information and Systems in Education, vol.12(1), pp.19-26, 2014.
  • Hiroki Tanaka, Sakriani Sakti, Graham Neubig, Tomoki Toda, Satoshi Nakamura, NOCOA+: Multimodal Computer-Based Training for Social and Communication Skills, IEICE transactions on Information and Systems, vol.E98-D(8), pp.1536-1544, 2015.