基本情報

学部兼担

• 工学部

学位

• 2018年09月25日

  博士（情報学）(京都大学)
• 2015年03月23日

  修士（情報学）(京都大学)
• 2013年03月18日

  学士（工学）（大学評価・学位授与機構）

経歴

• 自 2019年04月, 至 現在

  京都大学, 大学院情報学研究科, 助教
• 自 2018年10月, 至 2019年03月

  京都大学, 大学院情報学研究科, 特定助教
• 自 2018年04月, 至 2018年09月

  京都大学, 大学院情報学研究科, 教務補佐員
• 自 2015年04月, 至 2018年03月

  日本学術振興会, 特別研究員 (DC1)

プロフィール

• プロフィール

  京都大学 大学院情報学研究科 助教．
  音声対話システム，会話ロボット，マルチモーダル信号処理に関する研究に従事．
  博士（情報学）．

ID,URL

• J-Global ID

  201801006826732810

• 研究者番号

  10838684

• 外部リンク

  http://www.sap.ist.i.kyoto-u.ac.jp/members/inoue/

researchmap URL

• https://researchmap.jp/kojiinoue

研究

研究テーマ・研究概要

• 研究テーマ

  音声対話システム、会話ロボット、音声言語処理、マルチモーダル信号処理

• 研究概要

  人間らしい自然な会話を指向した音声対話システムの研究を進めています。具体的には、アンドロイド（人間酷似型ロボット）のための音声対話システムを研究開発しています。人間のように、しなやかで深い会話を行う会話ロボットを実現することが究極の目標です。扱う情報は、音声をベースとしていますが、マルチモーダルな情報も扱っています。

研究キーワード

• 音声信号処理
• マルチモーダル
• 音声対話システム
• 対話

研究分野

• 情報通信, 知覚情報処理, パターン認識
• 情報通信, 知覚情報処理, 音声情報処理

論文

• ヒューマノイドロボットがもたらす精神科医療の未来 精神科デイケアにおける傾聴ロボットによる対話実験

  河原 達也; 井上 昂治; 越智 景子

  精神神経学雑誌, 2022年04月

  
• Dialogue Behavior Control Model for Expressing a Character of Humanoid Robots

  Kenta Yamamoto; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  2018 Asia-Pacific Signal and Information Processing Association Annual Summit and Conference, APSIPA ASC 2018 - Proceedings, 2019年03月04日

  
• Character expression for spoken dialogue systems with semi-supervised learning using Variational Auto-Encoder

  Kenta Yamamoto; Koji Inoue; Tatsuya Kawahara

  Computer Speech & Language, 2023年04月, 査読有り

  
• Backchannel Generation Model for a Third Party Listener Agent

  Divesh Lala; Koji Inoue; Tatsuya Kawahara; Kei Sawada

  International Conference on Human-Agent Interaction, 2022年12月05日, 査読有り

  
• 音声対話システムによる雑談対話におけるキャラクタ表現に基づくユーザ適応の検討

  山本 賢太; 井上 昂治; 河原 達也

  人工知能学会研究会資料, 2022年12月

  
• 自律型アンドロイドのキャラクタ表現のための対話の振る舞い制御

  山本賢太; 井上昂治; 中村静; 高梨克也; 河原達也

  情報処理学会全国大会講演論文集, 2017年

  
• 潜在キャラクタモデルによる聞き手のふるまいに基づく対話エンゲージメントの推定

  井上昂治; LALA Divesh; 吉井和佳; 高梨克也; 河原達也

  日本音響学会研究発表会講演論文集(CD-ROM), 2017年

  
• 傾聴対話システムのための言語情報と韻律情報に基づく多様な形態の相槌の生成 (「フィールド研究とインタラクション」および一般)

  山口 貴史; 井上 昂治; 吉野 幸一郎

  言語・音声理解と対話処理研究会, 2016年02月29日

  
• スマートポスターボードにおける視線情報を用いた話者区間検出及び相槌の同定

  井上 昂治; 若林 佑幸; 吉本 廣雅; 高梨 克也; 河原 達也

  第77回全国大会講演論文集, 2015年03月17日

  
• 拡散性雑音環境下における多人数会話のマルチモーダル話者区間検出

  若林佑幸; 中山雅人; 西浦敬信; 山下洋一; 井上昂治; 吉本廣雅; 河原達也

  日本音響学会研究発表会講演論文集(CD-ROM), 2015年

  
• 多人数会話における視線情報を用いた話者区間検出

  井上昂治; 若林佑幸; 吉本廣雅; 河原達也

  研究報告音声言語情報処理（SLP）, 2014年07月17日

  
• 多人数会話における音響情報と視線情報の確率的統合による話者区間検出

  井上 昂治; 若林 佑幸; 吉本 廣雅

  日本音響学会研究発表会講演論文集 日本音響学会 編, 2014年

  
• Development of RobotHub: Integration of External System to Group Conversation System for Older Adults

  Seiki Tokunaga; Kohsuke Fukumori; Kazuhiro Tamura; Koji Inoue; Tatsuya Kawahara; Mihoko Ohtake-Matsuura

  World Conference of Gerontechnology (ISG), 2022年10月, 査読有り

  
• Can a robot laugh with you?: Shared laughter generation for empathetic spoken dialogue

  Koji Inoue; Divesh Lala; Tatsuya Kawahara

  Frontiers in Robotics and AI, 2022年09月15日, 査読有り, 筆頭著者

  
• 傾聴対話におけるユーザ発話に同調する相槌の韻律制御

  越智景子; 井上昂治; Lala Divesh; 河原達也

  日本音響学会2022年秋季研究発表会, 2022年09月

  
• Simultaneous Job Interview System Using Multiple Semi-autonomous Agents

  Haruki Kawai; Yusuke Muraki; Kenta Yamamoto; Divesh Lala; Koji Inoue; Tatsuya Kawahara

  SIGdial Meeting on Discourse and Dialogue (SIGDIAL), 2022年09月, 査読有り

  
• Multimodal Persuasive Dialogue Corpus using Teleoperated Android

  Seiya Kawano; Muteki Arioka; Akishige Yuguchi; Kenta Yamamoto; Koji Inoue; Tatsuya Kawahara; Satoshi Nakamura; Koichiro Yoshino

  INTERSPEECH, 2022年09月, 査読有り

  
• Alzheimer’s Dementia Detection through Spontaneous Dialogue with Proactive Robotic Listeners

  Yuanchao Li; Catherine Lai; Divesh Lala; Koji Inoue; Tatsuya Kawahara

  ACM/IEEE International Conference on Human-Robot Interaction (HRI), 2022年03月, 査読有り

  
• A multi-party attentive listening robot which stimulates involvement from side participants

  Koji Inoue; Hiromi Sakamoto; Kenta Yamamoto; Divesh Lala; Tatsuya Kawahara

  SIGdial Meeting on Discourse and Dialogue (SIGDIAL), 2021年07月, 査読有り, 筆頭著者

  
• Findings from human-android dialogue research with ERICA

  Divesh Lala; Koji Inoue; Kenta Yamamoto; Tatsuya Kawahara

  RobotDial Workshop on Dialogue Models for Human-Robot Interaction (ROBOTDIAL), IJCAI-PRICAI workshop, 2021年01月, 査読有り

  
• 共感を表出する音声対話システムのための共有笑い生成

  井上昂治; Lala Divesh; 河原達也

  人工知能学会研究会資料, 2021年11月, 筆頭著者

  
• 音声対話システムのユーザ適応に向けたパーソナリティの関係性の分析

  山本賢太; 井上昂治; 河原達也

  人工知能学会研究会資料, 2021年11月

  
• 人類の分断を克服し調和を実現するための科学技術に関する調査研究

  佐久間洋司; 井上昂治

  人工知能学会誌, 2021年11月, 最終著者

  
• 複数ロボットによる対話継続効果検証のための商業施設でのフィールド実験

  酒井和紀; 吉川雄一郎; 井上昂治; 河原達也; 石黒浩

  第39回日本ロボット学会学術講演会, 2021年09月

  
• アンドロイドERICAの傾聴対話システム–人間による傾聴との比較評価–

  井上 昂治; ラーラー ディベッシュ; 山本 賢太; 中村 静; 高梨 克也; 河原 達也

  人工知能学会論文誌, 2021年09月01日, 査読有り, 筆頭著者

  
• アンドロイドERICAの音声対話システム～マルチモーダルチューリングテストへの挑戦～

  井上昂治

  電子情報通信学会技術研究報告, 2021年06月18日, 招待有り, 筆頭著者, 最終著者, 責任著者

  
• Semi-autonomous avatar enabling unconstrained parallel conversations --seamless hybrid of WOZ and autonomous dialogue systems--

  Tatsuya Kawahara; Naoyuki Muramatsu; Kenta Yamamoto; Divesh Lala; Koji Inoue

  Advanced Robotics, 2021年05月19日, 査読有り, 最終著者

  
• ヒューマンロボットインタラクションにおける音響特徴に基づく共有笑いの予測

  井上昂治; Lala Divesh; 河原達也

  日本音響学会2021春季研究発表会, 2021年03月, 筆頭著者

  
• ヒューマンロボットインタラクションのための相槌・笑いのリアルタイム検出

  井上昂治; Lala Divesh; 河原達也

  日本音響学会2021春季研究発表会, 2021年03月, 筆頭著者

  
• Intelligent Conversational Android ERICA Applied to Attentive Listening and Job Interview.

  Tatsuya Kawahara; Koji Inoue; Divesh Lala

  CoRR, 2021年

  
• VAEを用いた半教師あり学習による音声対話システムのためのキャラクタ表現

  山本賢太; 井上昂治; 河原達也

  人工知能学会研究会資料, 2020年12月

  
• 多様なふるまいからの好感判定に基づき発話構成要素を選択するお見合い対話システム

  田中滉己; 井上昂治; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2020年12月

  
• アンドロイドERICAの傾聴対話システムにおけるWOZとの比較評価

  井上昂治; Lala Divesh; 山本賢太; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2020年11月, 筆頭著者

  
• Prediction of shared laughter for human-robot dialogue

  Divesh Lala; Koji Inoue; Tatsuya Kawahara

  International Conference on Multimodal Interaction (ICMI), Companion Publication, 2020年10月, 査読有り

  
• Job interviewer android with elaborate follow-up question generation

  Koji Inoue; Kohei Hara; Divesh Lala; Kenta Yamamoto; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  International Conference on Multimodal Interaction (ICMI), 2020年10月, 査読有り, 筆頭著者

  
• Semi-supervised learning for character expression of spoken dialogue systems

  Kenta Yamamoto; Koji Inoue; Tatsuya Kawahara

  INTERSPEECH, 2020年10月, 査読有り

  
• Response generation to out-of-database questions for example-based dialogue systems

  Sota Isonishi; Koji Inoue; Divesh Lala; Katsuya Takanashi; Tatsuya Kawahara

  International Workshop on Spoken Dialogue Systems Technology (IWSDS), 2020年09月, 査読有り

  
• A character expression model affecting spoken dialogue behaviors

  Kenta Yamamoto; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  International Workshop on Spoken Dialogue Systems Technology (IWSDS), 2020年09月, 査読有り

  
• WOZとの比較による自律型アンドロイドERICAの傾聴対話システムの評価

  井上昂治; Lala Divesh; 山本賢太; 中村静; 高梨克也; 河原達也

  日本音響学会2020秋季研究発表会, 2020年09月, 筆頭著者

  
• 掘り下げ質問を行う就職面接対話システムの自律型アンドロイドでの実装と評価

  井上昂治; 原康平; Divesh Lala; 山本賢太; 中村静; 高梨克也; 河原達也

  人工知能学会論文誌, 2020年09月, 査読有り, 筆頭著者

  
• An attentive listening system with android ERICA: Comparison of autonomous and WOZ interactions

  Koji Inoue; Divesh Lala; Kenta Yamamoto; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  SIGdial Meeting on Discourse and Dialogue (SIGDIAL), 2020年07月, 査読有り

  
• アンドロイドを用いた音声対話研究

  井上昂治; 河原達也

  日本音響学会誌, 2020年04月, 招待有り, 筆頭著者

  
• 自律型アンドロイドERICAによる就職面接対話

  井上昂治; 原康平; Lala Divesh; 山本賢太; 中村静; 高梨克也; 河原達也

  日本音響学会2020春季研究発表会, 2020年03月, 筆頭著者

  
• A job interview dialogue system that asks follow-up questions: Implementation and evaluation with an autonomous android

  Koji Inoue; Kohei Hara; Divesh Lala; Kenta Yamamoto; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  Transactions of the Japanese Society for Artificial Intelligence, 2020年

  
• 質問タイプの分類に基づく登録外質問に対する応答生成

  磯西爽太; 井上昂治; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年12月

  
• 自律型アンドロイドERICAによる傾聴対話システムの評価

  井上昂治; Divesh Lala; 山本賢太; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年12月

  
• アンドロイドERICAによる面接対話における掘り下げ質問生成

  原康平; 井上昂治; Divesh Lala; 山本賢太; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年12月

  
• Smooth turn-taking by a robot using an online continuous model to generate turn-taking cues

  Divesh Lala; Koji Inoue; Tatsuya Kawahara

  International Conference on Multimodal Interaction (ICMI), 2019年10月14日, 査読有り

  
• 自律型アンドロイドERICAによる傾聴対話の評価

  井上昂治; Lala Divesh; 山本賢太; 中村静; 高梨克也; 河原達也

  日本音響学会2019秋季研究発表会, 2019年09月

  
• Turn-taking Prediction Based on Detection of Transition Relevance Place

  Kohei Hara; Koji Inoue; Katsuya Takanashi; Tatsuya Kawahara

  INTERSPEECH, 2019年09月, 査読有り

  
• Expressing reactive emotion based on multimodal emotion recognition for natural conversation in human-robot interaction

  Yuanchao Li; Carlos T. Ishi; Koji Inoue; Shizuka Nakamura; Tatsuya Kawahara

  Advanced Robotics, 2019年09月, 査読有り

  
• ヒューマンロボットインタラクションコーパスへの焦点アノテーションの基準と予備的分析

  春日悠生; 井上昂治; 山本賢太; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年08月

  
• Engagement-based adaptive behaviors for laboratory guide in human-robot dialogue

  Koji Inoue; Divesh Lala; Kenta Yamamoto; Katsuya Takanashi; Tatsuya Kawahara

  International Workshop on Spoken Dialogue Systems Technology (IWSDS), 2019年04月, 査読有り

  
• A job interview dialogue system with autonomous android ERICA

  Koji Inoue; Kohei Hara; Divesh Lala; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  International Workshop on Spoken Dialogue Systems Technology (IWSDS), 2019年04月, 査読有り

  
• End-to-end modeling for selection of utterance constructional units via system internal states

  Koki Tanaka; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  International Workshop on Spoken Dialogue Systems Technology (IWSDS), 2019年04月, 査読有り

  
• 対話のふるまい制御によるキャラクタ表現モデルと対話コーパスによる検証

  山本賢太; 井上昂治; 中村静; 高梨克也; 河原達也

  情報処理学会全国大会講演論文集, 2019年03月

  
• 対話相手への好感に基づく発話構成要素の選択とお見合い対話システムへの実装

  田中滉己; 井上昂治; 中村静; 高梨克也; 河原達也

  情報処理学会全国大会講演論文集, 2019年03月

  
• 質問タイプの分類に基づく用例なし質問に対する応答生成

  磯西爽太; 田中滉己; 井上昂治; 高梨克也; 河原達也

  情報処理学会全国大会講演論文集, 2019年03月

  
• 移行適格場の予測に基づくターンテイキング予測

  原康平; 井上昂治; 高梨克也; 河原達也

  情報処理学会全国大会講演論文集, 2019年03月

  
• 移行適格場の情報を考慮したターンテイキング予測

  原康平; 井上昂治; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年03月

  
• 対話のふるまいに基づくキャラクタ表現の対話コーパスにおける分析

  山本賢太; 井上昂治; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2019年03月

  
• A conversational dialogue manager for the humanoid Robot ERICA

  Pierrick Milhorat; Divesh Lala; Koji Inoue; Tianyu Zhao; Masanari Ishida; Katsuya Takanashi; Shizuka Nakamura; Tatsuya Kawahara

  Lecture Notes in Electrical Engineering, 2019年

  
• A Conversational Dialogue Manager for the Humanoid Robot ERICA

  Pierrick Milhorat; Divesh Lala; Koji Inoue; Tianyu Zhao; Masanari Ishida; Katsuya Takanashi; Shizuka Nakamura; Tatsuya Kawahara

  ADVANCED SOCIAL INTERACTION WITH AGENTS, 2019年

  
• 相槌・フィラー予測とのマルチタスク学習によるターンテイキング予測

  原康平; 井上昂治; 高梨克也; 河原達也

  人工知能学会研究会資料, 2018年11月

  
• 初対面対話における好感のモデリングと発話構成要素の選択

  田中滉己; 井上昂治; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2018年11月

  
• 自律型アンドロイドERICAによる傾聴対話

  山本賢太; 井上昂治; Divesh Lala; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2018年11月

  
• 自律型アンドロイドERICAによる就職面接対話

  井上昂治; Divesh Lala; 原康平; 相原邦光; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2018年11月

  
• Dialogue Behavior Control Model for Expressing a Character of Humanoid Robots

  Kenta Yamamoto; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  Proc. APSIPA ASC, 2018年11月, 査読有り

  
• Evaluation of Real-time Deep Learning Turn-taking Models for Multiple Dialogue Scenarios

  Divesh Lala; Koji Inoue; Tatsuya Kawahara

  Proc. International Conference on Multimodal Interaction (ICMI), 2018年10月, 査読有り

  
• Engagement recognition in spoken dialogue via neural network by aggregating different annotators' models

  Koji Inoue; Divesh Lala; Katsuya Takanashi; Tatsuya Kawahara

  Proc. Interspeech, 2018年09月, 査読有り

  
• ロボットとの対話におけるマルチモーダルなるまいに基づくエンゲージメント認識

  井上 昂治

  京都大学, 2018年09月

  
• 人間型ロボットのキャラクタ表現のための対話の振る舞い制御モデル

  山本 賢太; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会論文誌, 2018年09月, 査読有り

  
• Engagement recognition by a latent character model based on multimodal listener behaviors in spoken dialogue

  Koji Inoue; Divesh Lala; Katsuya Takanashi; Tatsuya Kawahara

  APSIPA Transactions on Signal & Information Processing, 2018年09月, 査読有り

  
• Latent Character Model for Engagement Recognition Based on Multimodal Behaviors

  Koji Inoue; Divesh Lala; Katsuya Takanashi; Tatsuya Kawahara

  Proc. International Workshop on Spoken Dialogue Systems (IWSDS), 2018年05月, 査読有り

  
• An end-to-end approach to joint social signal detection and automatic speech recognition

  Hirofumi Inaguma; Masato Mimura; Koji Inoue; Kazuyoshi Yoshii; Tatsuya Kawahara

  Proc. International Conference on Acoustics, Speech, and Signal Processing (IEEE-ICASSP), 2018年04月, 査読有り

  
• Audio-visual conversation analysis by smart posterboard and humanoid robot

  Tatsuya Kawahara; Koji Inoue; Divesh Lala; Katsuya Takanashi

  Proc. International Conference on Acoustics, Speech, and Signal Processing (IEEE-ICASSP), 2018年04月, 査読有り

  
• Generating Fillers based on Dialog Act Pairs for Smooth Turn-Taking by Humanoid Robot

  Ryosuke Nakanishi; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  Proc. International Workshop on Spoken Dialogue Systems (IWSDS), 2018年04月, 査読有り

  
• 自律型アンドロイドERICAにおけるエンゲージメント推定に基づく音声対話システム

  井上昂治; Lala Divesh; 高梨克也; 河原達也

  日本音響学会2018年春季研究発表会, 2018年03月

  
• 共感・発話促進のための多様な聞き手応答を生成する傾聴対話システム

  石田真也; 井上昂治; 高梨克也; 河原達也

  第80回情報処理学会全国大会, 2018年03月

  
• 初対面対話における好感の生成と発話構成要素の予測のモデル

  田中滉己; 井上昂治; 高梨克也; 河原達也

  第80回情報処理学会全国大会, 2018年03月

  
• 自律型アンドロイドのキャラクタ表現のための対話の振る舞い制御モデルの構築と評価

  山本賢太; 井上昂治; 中村静; 高梨克也; 河原達也

  第80回情報処理学会全国大会, 2018年03月

  
• 相槌・フィラー予測とのマルチタスク学習による円滑なターンテイキング

  原康平; 井上昂治; 高梨克也; 河原達也

  第80回情報処理学会全国大会, 2018年03月

  
• Emotion recognition by combining prosody and sentiment analysis for expressing reactive emotion by humanoid robot

  Yuanchao Li; Carlos Toshinori Ishi; Nigel Ward; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  Proceedings - 9th Asia-Pacific Signal and Information Processing Association Annual Summit and Conference, APSIPA ASC 2017, 2018年02月05日

  
• 共感表出と発話促進のための聞き手応答を生成する傾聴対話システム

  井上 昂治石田真也; 井上昂治; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2018年02月

  
• Engagement recognition from listener’s behaviors in spoken dialogue using a latent character model

  Koji Inoue; Divesh Lala; Kazuyoshi Yoshii; Katsuya Takanashi; Tatsuya Kawahara

  Transactions of the Japanese Society for Artificial Intelligence, 2018年, 査読有り

  
• 潜在キャラクタモデルによる聞き手のふるまいに基づく対話エンゲージメントの推定

  井上昂治; Divesh Lala; 吉井和佳; 高梨克也; 河原達也

  人工知能学会論文誌, 2018年01月, 査読有り

  
• 自律型アンドロイドの対話の振る舞い制御モデルによる キャラクタ表現法の検討

  山本賢太; 井上昂治; 中村静; 高梨克也; 河原達也

  人工知能学会研究会資料, 2017年10月

  
• 自律型アンドロイドERICAにおける多様な聞き手応答を用いた傾聴対話

  井上昂治; Divesh Lala; Pierrick Milhorat; 石田真也; 趙天雨; 高梨克也; 河原達也

  人工知能学会研究会資料, 2017年10月

  
• 潜在キャラクタモデルによるリアルタイム対話エンゲージメント推定

  井上 昂治井上昂治; Divesh Lala; Pierrick Milhorat; 高梨克也; 河原達也

  人工知能学会研究会資料, 2017年10月

  
• Attentive listening system with backchanneling, response generation and flexible turn-taking

  Divesh Lala; Pierrick Milhorat; Koji Inoue; Masanari Ishida; Katsuya Takanashi; Tatsuya Kawahara

  SIGDIAL 2017 - 18th Annual Meeting of the Special Interest Group on Discourse and Dialogue, Proceedings of the Conference, 2017年

  
• Attentive listening system with backchanneling, response generation and flexible turn-taking.

  Divesh Lala; Pierrick Milhorat; Koji Inoue; Masanari Ishida; Katsuya Takanashi; Tatsuya Kawahara

  2017年

  
• A Conversational Dialogue Manager for the Humanoid Robot ERICA.

  Pierrick Milhorat; Divesh Lala; Koji Inoue; Tianyu Zhao; Masanari Ishida; Katsuya Takanashi; Shizuka Nakamura; Tatsuya Kawahara

  2017年

  
• Emotion recognition by combining prosody and sentiment analysis for expressing reactive emotion by humanoid robot.

  Yuanchao Li; Carlos Toshinori Ishi; Nigel G. Ward; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  2017年

  
• Emotion Recognition by Combining Prosody and Sentiment Analysis for Expressing Reactive Emotion by Humanoid Robot

  Yuanchao Li; Carlos Toshinori Ishi; Nigel Ward; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  2017 ASIA-PACIFIC SIGNAL AND INFORMATION PROCESSING ASSOCIATION ANNUAL SUMMIT AND CONFERENCE (APSIPA ASC 2017), 2017年

  
• Social signal detection in spontaneous dialogue using bidirectional LSTM-CTC

  Hirofumi Inaguma; Koji Inoue; Masato Mimura; Tatsuya Kawahara

  Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH, 2017年, 査読有り

  
• DAEを用いたリアルタイム遠隔音声認識

  井上 昂治; 三村 正人; 石井 カルロス寿憲; 坂井 信輔; 河原 達也

  日本音響学会研究発表会講演論文集, 2017年

  
• 聞き手の多様なふるまいに基づく対話エンゲージメントの推定

  井上 昂治; Lala Divesh; 高梨 克也; 河原 達也

  日本音響学会研究発表会講演論文集, 2017年

  
• 傾聴対話システムにおける自分語りを含む多様な聞き手応答の生成

  石田 真也; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  情報処理学会全国大会講演論文集, 2017年

  
• ニューラルネットによる音声対話における非言語的振る舞いの検出

  稲熊 寛文; 井上 昂治; 河原 達也

  情報処理学会全国大会講演論文集, 2017年

  
• 自律型アンドロイドによる対話における同調的笑いの生成

  勝見 久央; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  情報処理学会研究報告, 2017年

  
• End-to-Endモデルによる音声対話中のSocial Signalsの検出

  稲熊 寛文; 井上 昂治; 三村 正人; 河原 達也

  日本音響学会研究発表会講演論文集, 2017年

  
• LSTM-CTCによる音声対話におけるSocial Signalsの検出

  稲熊 寛文; 井上 昂治; 三村 正人; 河原 達也

  情報処理学会研究報告, 2017年

  
• 円滑な発話権制御のための談話行為の連鎖に基づく フィラーの生起と形態の予測

  中西 亮輔; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2017年

  
• Emotion Recognition by Combining Prosody with Text Information and Assessment Selection for Human-Robot Interaction

  Yuanchao Li; Inoue Koji; Shizuka Nakamura; Katsuya Takanashi; Toshinori Ishi Carlos; Tatsuya Kawahara

  人工知能学会研究会資料, 2017年

  
• End-to-EndモデルによるSocial Signals検出および音声認識との統合

  稲熊 寛文; 井上 昂治; 三村 正人; 河原 達也

  情報処理学会研究報告, 2017年

  
• Prediction of ice-breaking between participants using prosodic features in the first meeting dialogue

  Hirofumi Inaguma; Koji Inoue; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  2nd Workshop on Advancements in Social Signal Processing for Multimodal Interaction 2016, ASSP4MI 2016 - Held in conjunction with the 18th ACM International Conference on Multimodal Interaction 2016, ICMI 2016, 2016年11月12日, 査読有り

  
• Annotation and analysis of listener's engagement based on multi-modal behaviors

  Koji Inoue; Divesh Lala; Shizuka Nakamura; Katsuya Takanashi; Tatsuya Kawahara

  MA3HMI 2016 - Proceedings of the Workshop on Multimodal Analyses Enabling Artificial Agents in Human-Machine Interaction, 2016年11月12日, 査読有り

  
• 傾聴対話システムのための言語情報と韻律情報に基づく多様な形態の相槌の生成

  山口貴史; 井上昂治; 吉野幸一郎; 高梨克也; Nigel G. Ward; 河原達也

  人工知能学会論文誌, 2016年07月, 査読有り

  
• 視聴覚情報の統合に基づく音源数推定と話者ダイアライゼーション

  若林佑幸; 井上昂治; 中山雅人; 西浦敬信; 山下洋一; 吉本廣雅; 河原達也

  電子情報通信学会論文誌, 2016年03月, 査読有り

  
• 多人数会話における音響・視線情報を統合した話者区間検出

  井上昂治; 若林佑幸; 吉本廣雅; 河原達也

  電子情報通信学会論文誌, 2016年03月, 査読有り

  
• Multi-modal sensing and analysis of poster conversations with smart posterboard

  Tatsuya Kawahara; Takuma Iwatate; Koji Inoue; Soichiro Hayashi; Hiromasa Yoshimoto; Katsuya Takanashi

  APSIPA Transactions on Signal & Information Processing, 2016年03月, 査読有り

  
• Generating a variety of backchannel forms based on linguistic and prosodic features for attentive listening agents

  Takashi Yamaguchi; Koji Inoue; Koichiro Yoshino; Katsuya Takanashi; Nigel G. Ward; Tatsuya Kawahara

  Transactions of the Japanese Society for Artificial Intelligence, 2016年, 査読有り

  
• Prediction and Generation of Backchannel Form for Attentive Listening Systems

  Tatsuya Kawahara; Takashi Yamaguchi; Koji Inoue; Katsuya Takanashi; Nigel Ward

  17TH ANNUAL CONFERENCE OF THE INTERNATIONAL SPEECH COMMUNICATION ASSOCIATION (INTERSPEECH 2016), VOLS 1-5, 2016年, 査読有り

  
• Multimodal Interaction with the Autonomous Android ERICA

  Divesh Lala; Pierrick Milhorat; Koji Inoue; Tianyu Zhao; Tatsuya Kawahara

  ICMI'16: PROCEEDINGS OF THE 18TH ACM INTERNATIONAL CONFERENCE ON MULTIMODAL INTERACTION, 2016年, 査読有り

  
• 自律型アンドロイドERICAのための遠隔音声認識

  井上 昂治; 三村 正人; 石井 カルロス寿憲; 河原 達也

  日本音響学会研究発表会講演論文集, 2016年

  
• 傾聴対話システムのための多様な聞き手応答の生成

  石田 真也; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  情報処理学会全国大会講演論文集, 2016年

  
• 初対面対話における場の和みのマルチモーダルな分析と検出

  稲熊 寛文; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  情報処理学会全国大会講演論文集, 2016年

  
• 自律型アンドロイドによる円滑な発話権制御のための フィラーの生起位置と形態の分析

  中西 亮輔; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2016年

  
• 傾聴対話システムのための発話を促す聞き手応答の生成

  石田 真也; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2016年

  
• 自律型アンドロイドERICAによる社会的役割に則したインタラクション

  井上 昂治; Pierrick Milhorat; Divesh Lala; 趙 天雨; 河原 達也

  人工知能学会研究会資料, 2016年

  
• 階層ベイズモデルを用いた聞き手の多様なふるまいに基づく 対話エンゲージメントの推定

  井上 昂治; Divesh Lala; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2016年

  
• 初対面対話における韻律的特徴に基づくアイスブレーキングの分析と予測

  稲熊 寛文; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2016年

  
• 発話行為の連鎖を考慮したフィラーの生起と形態の分析

  中西 亮輔; 井上 昂治; 中村 静; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2016年

  
• Enhanced speaker diarization with detection of backchannels using eye-gaze information in poster conversations

  Koji Inoue; Yukoh Wakabayashi; Hiromasa Yoshimoto; Katsuya Takanashi; Tatsuya Kawahara

  16TH ANNUAL CONFERENCE OF THE INTERNATIONAL SPEECH COMMUNICATION ASSOCIATION (INTERSPEECH 2015), VOLS 1-5, 2015年, 査読有り

  
• ポスター会話における音響・視線情報の確率的統合による 話者区間及び相槌の検出

  井上 昂治; 若林 佑幸; 吉本 廣雅; 高梨 克也; 河原 達也

  日本音響学会研究発表会講演論文集, 2015年

  
• ポスター会話における音響・視線情報を統合した話者区間及び相槌の検出

  井上 昂治; 若林 佑幸; 吉本 廣雅; 高梨 克也; 河原 達也

  情報処理学会研究報告, 2015年

  
• 傾聴対話における相槌形態と先行発話の統語構造の関係の分析

  山口 貴史; 井上 昂治; 吉野 幸一郎; 高梨 克也; 河原 達也

  人工知能学会研究会資料, 2015年

  
• スマートポスターボードにおける視線情報を用いた話者区間及び相槌の検出

  井上 昂治; 若林 佑幸; 吉本 廣雅; 高梨 克也; 河原 達也

  情報処理学会研究報告, 2015年

  
• 多様な相槌をうつ傾聴対話システムのための相槌形態の予測

  山口 貴史; 井上 昂治; 吉野 幸一郎; 高梨 克也; Nigel Ward; 河原 達也

  人工知能学会研究会資料, 2015年

  
• 自律型アンドロイドEricaのための音声対話システム

  井上 昂治; 河原 達也

  人工知能学会研究会資料, 2015年

  
• スマートポスターボードにおける音響情報と画像情報の統合による話者区間検出

  若林佑幸; 井上昂治; 河原達也; 中井駿介; 宮崎亮一; 猿渡洋

  日本音響学会研究発表会, 2014年03月03日

  
• Speaker Diarization based on Audio-Visual Integration for Smart Posterboard

  Yukoh Wakabayashi; Koji Inoue; Hiromasa Yoshimoto; Tatsuya Kawahara

  2014 ASIA-PACIFIC SIGNAL AND INFORMATION PROCESSING ASSOCIATION ANNUAL SUMMIT AND CONFERENCE (APSIPA), 2014年, 査読有り

  
• Speaker Diarization using Eye-gaze Information in Multi-party Conversations

  Koji Inoue; Yukoh Wakabayashi; Hiromasa Yoshimoto; Tatsuya Kawahara

  15TH ANNUAL CONFERENCE OF THE INTERNATIONAL SPEECH COMMUNICATION ASSOCIATION (INTERSPEECH 2014), VOLS 1-4, 2014年, 査読有り

  
• An inter-prediction method using sparse representation for high efficiency video coding

  Koji Inoue; Kohei Isechi; Hironobu Saito; Yoshimitsu Kuroki

  IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences, 2013年, 査読有り

  
• A Linear Manifold Color Descriptor for Medicine Package Recognition

  Kenjiro Sugimoto; Koji Inoue; Yoshimitsu Kuroki; Sei-ichiro Kamata

  IEICE TRANSACTIONS ON INFORMATION AND SYSTEMS, 2012年05月, 査読有り

  
• Local Intensity Compensation using Sparse Representation

  Koji Inoue; Hironobu Saito; Yoshimitsu Kuroki

  2012 21ST INTERNATIONAL CONFERENCE ON PATTERN RECOGNITION (ICPR 2012), 2012年, 査読有り

  
• Illumination-robust face recognition via sparse representation

  Koji Inoue; Yoshimitsu Kuroki

  2011 IEEE Visual Communications and Image Processing, VCIP 2011, 2011年, 査読有り

  
• Prediction of turn-taking using multitask learning with prediction of backchannels and fillers

  Kohei Hara; Koji Inoue; Katsuya Takanashi; Tatsuya Kawahara

  Proc. Interspeech, 査読有り

  
• 遠隔操作アンドロイドを用いたマルチモーダル説得対話コーパスの収集と分析

  有岡無敵; 山本賢太; 井上昂治; 河原達也; 中村哲; 吉野幸一郎

  言語処理学会第28回年次大会, 2022年03月

  
• 回答評価とキーワード抽出を用いた同時並列就職面接対話システム

  川井悠生; 山本賢太; Lala Divesh; 井上昂治; 河原達也

  情報処理学会 第84回全国大会, 2022年03月

  
• 大規模テキストデータを用いた事前学習による音声対話の相槌予測

  長連成; 井上昂治; 越智景子; 河原達也

  情報処理学会 第84回全国大会, 2022年03月

  
• 半自律並列プレゼン対話システムのための質問分類による介入タイミング制御

  村木優介; 山本賢太; Lala Divesh; 井上昂治; 河原達也

  情報処理学会 第84回全国大会, 2022年03月

  
• 話し手以外のユーザへの参与促進発話を生成する多人数傾聴対話システム

  坂本寛弥; 山本賢太; Lala Divesh; 井上昂治; 河原達也

  情報処理学会 第83回全国大会, 2021年03月

  

MISC

• アーティクル：表紙企画 人工知能歴史絵巻：これまでのAIこれからのAI —第三次AIブームを振り返って—

  榊 剛史; 井上 昂治; 山野 泰子; 岩澤 駿; 杉本 舞; 松原 仁; 谷口 忠大

  人工知能学会誌, 2023年01月

  
• 50年経っても読まれる論文を

  井上昂治

  人工知能学会誌, 2021年05月, 筆頭著者, 責任著者

  

書籍等出版物

• 音声対話システム : 基礎から実装まで

  井上, 昂治; 河原, 達也, 共著

  オーム社, 2022年10月

  京大の蔵書を調べる：

  

受賞

• 2022年02月22日

  内閣府, 第4回 日本オープンイノベーション大賞 文部科学大臣賞

  次世代を担う学生・若手自ら未来社会へのロードマップを描き、研究開発エコシステムを創造する「人工知能研究会 / AIR」
• 2020年06月22日

  人工知能学会, 2019年度 研究会優秀賞
• 2020年05月16日

  日本音響学会, 粟屋潔学術奨励賞
• 2019年06月

  人工知能学会, 2018年度 研究会優秀賞
• 2018年06月

  人工知能学会, 2017年度 研究会優秀賞
• 2017年10月

  人工知能学会 音声・言語理解と対話処理研究会, 第8回対話システムシンポジウム 若手奨励賞
• 2016年09月

  日本音響学会, 学生優秀発表賞
• 2015年03月

  情報処理学会, 第77回全国大会 学生奨励賞
• 2014年12月

  日本音響学会 関西支部, 第17回 若手研究者交流研究発表会 優秀奨励賞
• 2008年08月

  電子情報通信学会 情報・システムソサイエティ, スーパーコンピューティング奨励賞
• 2008年08月

  情報処理学会, 若手奨励賞

外部資金：科学研究費補助金

• 対話理解および発話生成と連動するターンテイキングシステム

  若手研究

  小区分61010:知覚情報処理関連

  京都大学

  井上 昂治

  自 2020年04月01日, 至 2023年03月31日, 交付

  ターンテイキング;音声対話システム;会話ロボット;言語理解;応答生成;対話理解

  https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-20K19821/
• End-to-Endモデルに基づく汎用的な音声理解・対話

  基盤研究(A)

  中区分61:人間情報学およびその関連分野

  京都大学

  河原 達也

  自 2020年04月01日, 至 2024年03月31日, 交付

  音声理解;音声対話;音声認識;End-to-Endモデル

  https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-20H00602/
• 人間との対話継続及び関係構築のための対話知能システム

  新学術領域研究(研究領域提案型)

  複合領域

  京都大学

  河原 達也

  自 2019年06月28日, 至 2024年03月31日, 交付

  対話知能;音声対話;ロボット;マルチモーダル;知能情報学

  https://kaken.nii.ac.jp/grant/KAKENHI-PLANNED-19H05691/

外部資金：その他

• 人類の分断を克服し調和を実現するための科学技術に関する調査研究

  JST ムーンショット型研究開発事業 ミレニア・プログラム 新たな目標検討のためのビジョン策定

  自 2021年01月01日, 至 2021年06月30日

  佐久間 洋司

教育

担当科目

• 自 2022年04月01日, 至 2023年03月31日

  計算機科学実験及演習２

  9022, 後期, 工学部, 2
• 自 2022年04月01日, 至 2023年03月31日

  計算機科学実験及演習４

  9039, 後期, 工学部, 3
• 自 2020年04月, 至 2021年03月

  ILASセミナー：音とAI

  前期, 全学共通科目
• 自 2020年04月, 至 2021年03月

  計算機科学実験及演習４（計算機）

  後期, 工学部
• 自 2021年04月, 至 2022年03月

  計算機科学実験及演習２（計算機）

  後期, 工学部
• 自 2021年04月, 至 2022年03月

  計算機科学実験及演習４（計算機）

  後期, 工学部

大学運営

部局運営(役職等)

• 自 2022年04月01日, 至 2023年03月31日

  システム運用WG委員
• 自 2022年04月01日, 至 2023年03月31日

  情報セキュリティWG委員
• 自 2020年04月01日, 至 2021年03月31日

  広報WG