Degree

  • Ph.D. (Informatics) ( 2022.03   Kyoto University )

  • Master ( 2019.03   Kyoto University )

  • 学士 ( 2017.03   同志社大学 )

Research Areas

  • Informatics / Intelligent informatics  / Speech Recognition, Speech Synthesis

From School

  • Doshisha University   Faculty of Science and Engineering   Graduated

    2013.04 - 2017.03

      More details

    Country:Japan

From Graduate School

  • Kyoto University   Graduate School, Division of Information and Communication   Doctor's Course   Completed

    2019.04 - 2022.03

      More details

    Country:Japan

  • Kyoto University   Graduate School, Division of Information and Communication   Master's Course   Completed

    2017.04 - 2019.03

      More details

    Country:Japan

 

Papers

  • Accent-Preserving Voice Conversion between Native-Nonnative Speakers for Second Language Learning Reviewed

    Iago Lourenço Correa, Sei Ueno, and Akinobu Lee

    Asia Pacific Signal and Information Processing Association (APSIPA)   2023.11

     More details

    Language:English   Publishing type:Research paper (international conference proceedings)  

    Other Link: https://www.apsipa2023.org/tprogram.html

  • 発話交替頻度を導入した実対話音声に対するSpeaker Diarizationのためのデータ生成

    市川 奎吾, 上乃 聖, 李晃伸

    日本音響学会講演論文集   2023.09

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • 異なるスタイルの笑い声生成のための有声音・無声音間隔の制御

    木全 亮太朗, 上乃 聖, 李晃伸

    日本音響学会講演論文集   2023.09

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • 時間軸-周波数軸上の幅を持たせる音声合成を用いた音声認識のデータ拡張

    上乃聖, 李晃伸

    日本音響学会講演論文集   2023.09

     More details

    Authorship:Lead author   Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • CGアバター対話における音声からの頭部動作および表情の自動生成

    藤岡 侑貴, 上乃 聖, 李晃伸

    人工知能学会全国大会   2023.06

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • Continuous Integrate-and-Fire を用いた音声区間検出とターン終了検知のマルチタスク学習

    池口 弘尚, 東 佑樹, 上乃 聖,李 晃伸

    日本音響学会講演論文集   2023.03

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • 複数設定のスペクトログラムを用いた音声合成に基づく音声認識のデータ拡張

    上乃聖, 李晃伸

    日本音響学会講演論文集   2023.03

     More details

    Authorship:Lead author   Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • 連続的な感情表出を用いたカウンセリング対話エージェントの評価

    川又 朱莉, 上乃 聖, 李 晃伸

    HAIシンポジウム   2023.03

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • 多様な笑い声生成のための有声音・無声音間隔の制御

    木全亮太朗, 上乃 聖, 李 晃伸

    情報処理学会全国大会講演論文集   2023.03

     More details

    Language:Japanese   Publishing type:Research paper (conference, symposium, etc.)  

  • Non-autoregressive Error Correction for CTC-based ASR with Phone-conditioned Masked LM Reviewed

    Hayato Futami, Hirofumi Inaguma, Sei Ueno, Masato Mimura, Shinsuke Sakai, Tatsuya Kawahara

    INTERSPEECH   3889 - 3893   2022.09

     More details

    Language:English   Publishing type:Research paper (international conference proceedings)  

display all >>

Presentations

  • Accent-Preserving Voice Conversion between Native-Nonnative Speakers for Second Language Learning International conference

    2023.11 

     More details

    Event date: 2023.10 - 2023.11

    Language:English   Presentation type:Oral presentation (general)  

    Country:Taiwan, Province of China  

  • 時間軸-周波数軸上の幅を持たせる音声合成を用いた音声認識のデータ拡張

    上乃聖

    日本音響学会 研究発表会  2023.09  一般社団法人 日本音響学会

     More details

    Event date: 2023.09

    Language:Japanese   Presentation type:Oral presentation (general)  

    Venue:名古屋工業大学   Country:Japan  

  • 異なるスタイルの笑い声生成のための有声音・無声音間隔の制御

    木全 亮太朗, 上乃 聖, 李晃伸

    日本音響学会 研究発表会  2023.09  一般社団法人 日本音響学会

     More details

    Event date: 2023.09

    Language:Japanese   Presentation type:Oral presentation (general)  

    Venue:名古屋工業大学   Country:Japan  

  • 発話交替頻度を導入した実対話音声に対するSpeaker Diarizationのためのデータ生成

    市川 奎吾, 上乃 聖, 李晃伸

    日本音響学会 研究発表会  2023.09  一般社団法人 日本音響学会

     More details

    Event date: 2023.09

    Language:Japanese   Presentation type:Oral presentation (general)  

    Venue:名古屋工業大学   Country:Japan  

  • CGアバター対話における音声からの頭部動作および表情の自動生成 Invited

    藤岡 侑貴, 上乃 聖, 李晃伸

    第4回SIAI 産学クロススクエア「ミライをつくるAI人材」@Tokyo  2023.09  一般社団法人 人工知能学会

     More details

    Event date: 2023.09

    Language:Japanese   Presentation type:Oral presentation (invited, special)  

    Venue:産総研臨海副都心センター別館11階会議室  

  • Emotional Support ConversationにおけるLLMを用いた悩みの明確化対話戦略

    藤田敦也, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第18回シンポジウム  2023.08  NLP若手の会運営委員会

     More details

    Event date: 2023.08

    Language:Japanese   Presentation type:Poster presentation  

    Venue:浅草橋ヒューリックホール   Country:Japan  

  • 他者情報のやり取りを行う対話エージェントを用いた非同期・間接コミュニケーションシステム

    志満津奈央, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第18回シンポジウム  2023.08 

     More details

    Event date: 2023.08

    Language:Japanese   Presentation type:Poster presentation  

    Country:Japan  

  • CGアバター対話における音声からの頭部動作および表情の自動生成

    藤岡 侑貴, 上乃 聖, 李晃伸

    人工知能学会全国大会  2023.06  一般社団法人 人工知能学会

     More details

    Event date: 2023.06

    Language:Japanese   Presentation type:Poster presentation  

    Venue:熊本城ホール   Country:Japan  

  • Continuous Integrate-and-Fire を用いた音声区間検出とターン終了検知のマルチタスク学習

    池口 弘尚, 東 佑樹, 上乃 聖, 李 晃伸

    日本音響学会 研究発表会  2023.03  一般社団法人 日本音響学会

     More details

    Event date: 2023.03

    Language:Japanese   Presentation type:Oral presentation (general)  

    Venue:オンライン   Country:Japan  

  • 複数設定のスペクトログラムを用いた音声合成に基づく音声認識のデータ拡張

    上乃聖

    日本音響学会 研究発表会  2023.03  一般社団法人 日本音響学会

     More details

    Event date: 2023.03

    Language:Japanese   Presentation type:Oral presentation (general)  

    Venue:オンライン   Country:Japan  

display all >>

Awards

  • 全国大会優秀賞 ポスター発表部門

    2023.07   一般社団法人 人工知能学会   CGアバター対話における音声からの頭部動作および表情の自動生成

    藤岡 侑貴, 上乃 聖, 李晃伸

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

  • 優秀ポスター発表賞

    2023.03   HAIシンポジウム   連続的な感情表出を用いたカウンセリング対話エージェントの評価

    川又 朱莉, 上乃 聖, 李 晃伸

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

  • 山下記念研究賞

    2022   情報処理学会   音声認識のデータ拡張のための合成音声の周波数スペクトログラム強調

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

  • 学生論文賞

    2018.12   情報処理学会   End-to-End 音声合成を用いた単語 単位 End-to-End 音声認識のデータ拡張

    上乃聖, 三村正人, 坂井信輔, 河原達也

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

  • 学生優秀賞受賞

    2018.09   日本音響学会   文字単位のモデルを併用した単語単 位の End-to-End 音声認識

    上乃聖, 稲熊寛文, 三村正人, 河原達也

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

  • 学生ポスター賞

    2018.08   電子情報通信学会   転移学習による注意機構付き単語単位音声認識の適応

    上乃聖, 森谷崇史, 三村正人, 坂井信輔, 篠原雄介, 山口義和, 青野裕司, 河原 達也

     More details

    Award type:Award from Japanese society, conference, symposium, etc.  Country:Japan

Scientific Research Funds Acquisition Results

Other External Funds

  • 多様性を考慮した⾳声合成を⽤いた⾳声認識の効率的なデータ拡張

    2023.04 - 2024.03

    名古屋工業大学  学内研究推進経費 

    上乃聖

      More details

    Authorship:Principal investigator  Grant type:Competitive

    Grant amount:\500000 ( Direct Cost: \500000 )

 

Teaching Experience

  • 実践研究セミナー

    2023.10 - 2024.02 Institution:Nagoya Institute of Technology

     More details

    Level:Undergraduate (specialized)  Country:Japan

  • 電気情報工学基礎実験

    2023.10 - 2024.02 Institution:Nagoya Institute of Technology

     More details

    Level:Undergraduate (specialized)  Country:Japan

  • メディア系演習Ⅱ

    2023.10 - 2024.02 Institution:Nagoya Institute of Technology

     More details

    Level:Undergraduate (specialized)  Country:Japan

  • Media LaboratoryⅠ

    2023.04 - 2023.07 Institution:Nagoya Institute of Technology

     More details

    Level:Undergraduate (specialized)  Country:Japan

 

Committee Memberships

  • 日本音響学会   実行委員  

    2023.09   

      More details

    Committee type:Academic society

Academic Activities

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 1 International contribution

    Role(s): Peer review

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023.07 - 2023.09

     More details

    Type:Peer review 

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 2 International contribution

    Role(s): Peer review

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023.07 - 2023.09

     More details

    Type:Peer review 

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 3 International contribution

    Role(s): Peer review

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023.07 - 2023.09

     More details

    Type:Peer review 

  • APSIPA Transactions on Signal and Information Processing review International contribution

    Role(s): Peer review

    2023.01 - 2023.04

     More details

    Type:Peer review 

  • IEICE Transactions on Information and Systems Review International contribution

    Role(s): Peer review

    IEICE Transactions on Information and Systems  2022.11 - 2022.12

     More details

    Type:Peer review