上乃 聖 (ウエノ セイ)

UENO Sei

写真a

所属学科・専攻等

情報工学科 メディア情報分野
工学専攻 メディア情報プログラム

学位

  • 博士 (情報学) ( 2022年03月   京都大学 )

  • 修士 ( 2019年03月   京都大学 )

  • 学士 ( 2017年03月   同志社大学 )

研究分野

  • 情報通信 / 知能情報学  / 音声認識,音声合成

出身学校

  • 同志社大学   理工学部   情報システムデザイン学科   卒業

    2013年04月 - 2017年03月

      詳細を見る

    国名:日本国

出身大学院

  • 京都大学   情報学研究科   知能情報学専攻   博士課程   修了

    2019年04月 - 2022年03月

      詳細を見る

    国名:日本国

  • 京都大学   情報学研究科   知能情報学専攻   修士課程   修了

    2017年04月 - 2019年03月

      詳細を見る

    国名:日本国

 

論文

  • Data generation for speaker diarization by speaker transition information 査読あり

    Keigo Ichikawa, Sei Ueno, and Akinobu Lee

    Asia Pacific Signal and Information Processing Association (APSIPA)   2024年12月

     詳細を見る

    記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    その他リンク: https://www.apsipa2023.org/tprogram.html

  • 大規模事前学習モデルによる笑い声表現を用いたspeech-laugh音声の生成

    木全亮太朗, 上乃 聖, 李 晃伸

    日本音響学会講演論文集   2024年09月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

  • Refining Synthesized Speech Using Speaker Information and Phone Masking for Data Augmentation of Speech Recognition 査読あり

    Sei Ueno, Akinobu Lee, Tastuya Kawahara

    IEEE/ACM Transactions on Audio, Speech, and Language Processing   32   3924 - 3933   2024年09月

     詳細を見る

    担当区分:筆頭著者, 責任著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1109/TASLP.2024.3451982

    その他リンク: https://repository.kulib.kyoto-u.ac.jp/dspace/handle/2433/289487

  • Multi-setting acoustic feature training for data augmentation of speech recognition 査読あり

    Sei Ueno, Akinobu Lee

    Acoustical Science and Technology   45 ( 4 )   195 - 203   2024年07月

     詳細を見る

    担当区分:筆頭著者, 責任著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: https://doi.org/10.1250/ast.e23.70

    その他リンク: https://www.jstage.jst.go.jp/article/ast/45/4/45_e23.70/_article/-char/ja

  • センチメント分析を用いた感情を重視した物語の階層的要約手法

    酒井 健壱, 上乃 聖, 李 晃伸

    言語処理学会 第30回年次大会 発表論文集   1119 - 1124   2024年03月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

    その他リンク: https://www.anlp.jp/proceedings/annual_meeting/2024/index.html

  • 経験情報収集および伝達を主目的とする雑談対話による関係性維持支援システム

    志満津 奈央, 上乃 聖, 李 晃伸

    言語処理学会 第30回年次大会 発表論文集   1394 - 1399   2024年03月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

    その他リンク: https://www.anlp.jp/proceedings/annual_meeting/2024/index.html

  • 大規模言語モデルを用いたEmotional Support Conversation システムの構築とその評価

    藤田 敦也, 上乃 聖, 李 晃伸

    言語処理学会 第30回年次大会 発表論文集   1378 - 1383   2024年03月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

    その他リンク: https://www.anlp.jp/proceedings/annual_meeting/2024/index.html

  • Synthesis of non-native voice with native-like accent using voice conversion

    Iago Lourenço Correa, Sei Ueno, and Akinobu Lee

    2024年03月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(研究会,シンポジウム資料等)  

    その他リンク: https://acoustics.jp/annualmeeting/program/

  • LLM によるテキスト生成を用いた音声合成による音声認識のドメイン適応

    上乃 聖, 李 晃伸

    日本音響学会講演論文集   2024年03月

     詳細を見る

    担当区分:筆頭著者, 責任著者   記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

  • Cocktail Machine Speech Chain: 重複あり音声を用いた音声認識・音声合成モデルの統一的学習

    松永 裕太, 高道 慎之介, 上乃 聖, 猿渡 洋

    日本音響学会講演論文集   2024年03月

     詳細を見る

    記述言語:日本語   掲載種別:研究論文(その他学術会議資料等)  

全件表示 >>

講演・口頭発表等

  • Data generation for speaker diarization by speaker transition information 国際会議

    2024年12月 

     詳細を見る

    開催年月日: 2024年12月

    記述言語:英語   会議種別:口頭発表(一般)  

    開催地:Galaxy International Convention Center, Macau. China   国名:マカオ(澳門)特別行政区  

  • 音声情報処理における機械学習 招待あり

    上乃聖

    マイクロエレクトロニクスシンポジウム  2024年09月  一般社団法人 エレクトロニクス実装学会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:口頭発表(招待・特別)  

    開催地:大同大学   国名:日本国  

  • 大規模事前学習モデルによる笑い声表現を用いたspeech-laugh音声の生成

    木全 亮太朗, 上乃 聖, 李晃伸

    日本音響学会 研究発表会  2024年09月  一般社団法人 日本音響学会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:関西大学   国名:日本国  

  • 動機づけ面接におけるクライエントの発話分類に基づく応答生成

    金子優, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第19回シンポジウム  2024年09月  NLP若手の会運営委員会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:梅田スカイビル   国名:日本国  

  • マルチエージェント協働による TRPG ゲームマスターの実現

    箕成侑音, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第19回シンポジウム  2024年09月  NLP若手の会運営委員会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:梅田スカイビル   国名:日本国  

  • 大規模言語モデルを用いた効果的な物語のあらすじ生成手法の検討

    酒井健壱, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第19回シンポジウム  2024年09月  NLP若手の会運営委員会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:梅田スカイビル   国名:日本国  

  • 大規模言語モデルによる感情極性に着目した小説からの人物関係抽出

    齋藤大輔, 上乃聖, 李晃伸

    NLP若手の会 (YANS) 第19回シンポジウム  2024年09月  NLP若手の会運営委員会

     詳細を見る

    開催年月日: 2024年09月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:梅田スカイビル   国名:日本国  

  • 研究紹介

    上乃聖

    2024年07月  慶応義塾大学 杉浦研究室

     詳細を見る

    開催年月日: 2024年07月

    記述言語:日本語   会議種別:公開講演,セミナー,チュートリアル,講習,講義等  

    開催地:慶応義塾大学 杉浦研究室   国名:日本国  

  • 音声合成を用いた音声認識のための効率的なデータ拡張法 招待あり

    上乃聖

    日本音響学会 東海支部 講演会  2024年04月  日本音響学会 東海支部

     詳細を見る

    開催年月日: 2024年04月

    記述言語:日本語   会議種別:口頭発表(招待・特別)  

    開催地:ウインク愛知   国名:日本国  

  • センチメント分析を用いた感情を重視した物語の階層的要約手法

    酒井健壱, 上乃聖, 李晃伸

    言語処理学会  2024年03月  言語処理学会

     詳細を見る

    開催年月日: 2024年03月

    記述言語:日本語   会議種別:口頭発表(一般)  

    開催地:神戸国際会議場   国名:日本国  

全件表示 >>

受賞

  • 委員特別賞

    2024年03月   言語処理学会   大規模言語モデルを用いたEmotional Support Conversation システムの構築とその評価

    藤田敦也, 上乃聖, 李晃伸

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 全国大会優秀賞 ポスター発表部門

    2023年07月   一般社団法人 人工知能学会   CGアバター対話における音声からの頭部動作および表情の自動生成

    藤岡 侑貴, 上乃 聖, 李晃伸

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 優秀ポスター発表賞

    2023年03月   HAIシンポジウム   連続的な感情表出を用いたカウンセリング対話エージェントの評価

    川又 朱莉, 上乃 聖, 李 晃伸

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 山下記念研究賞

    2022年   情報処理学会   音声認識のデータ拡張のための合成音声の周波数スペクトログラム強調

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 学生論文賞

    2018年12月   情報処理学会   End-to-End 音声合成を用いた単語 単位 End-to-End 音声認識のデータ拡張

    上乃聖, 三村正人, 坂井信輔, 河原達也

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 学生優秀賞受賞

    2018年09月   日本音響学会   文字単位のモデルを併用した単語単 位の End-to-End 音声認識

    上乃聖, 稲熊寛文, 三村正人, 河原達也

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

  • 学生ポスター賞

    2018年08月   電子情報通信学会   転移学習による注意機構付き単語単位音声認識の適応

    上乃聖, 森谷崇史, 三村正人, 坂井信輔, 篠原雄介, 山口義和, 青野裕司, 河原 達也

     詳細を見る

    受賞区分:国内学会・会議・シンポジウム等の賞  受賞国:日本国

科研費(文科省・学振)獲得実績

  • AIによる対話技術を活用した模擬患者アバターでの仮想空間医療面接教育基盤の創生

    研究課題/領域番号:24H00170  2024年04月 - 2029年03月

    日本学術振興会  基盤研究(A)  基盤研究(A)

    石原 慎, 岡崎 史子, 蓮沼 直子, 高橋 誠, 橋本 佳, 廣井 直樹, 寺澤 晃彦, 小松 弘幸, 山内 かづ代, 三好 智子, 伊藤 俊之, 伊藤 彰一, 藤田 博一, 田口 亮, 大久保 由美子, 李 晃伸, 荒川 敏, 栩野 吉弘, 岸 美紀子, 上乃 聖, 鋪野 紀好

     詳細を見る

    担当区分:研究分担者  資金種別:競争的資金

    配分額:48360000円 ( 直接経費:37200000円 、 間接経費:11160000円 )

  • 光弾性法と超音波ドップラ法の複合計測が拓く血液-血管応力集中部の可視化技術の創成

    研究課題/領域番号:23H01343  2023年04月 - 2026年03月

    日本学術振興会  基盤研究(B)  基盤研究(B)

    武藤 真和, 小林 和也, 上乃 聖, 玉野 真司, 中村 匡徳

     詳細を見る

    担当区分:研究分担者  資金種別:競争的資金

    配分額:19370000円 ( 直接経費:14900000円 、 間接経費:4470000円 )

  • 音声認識のデータ拡張のための音声合成との密統合

    研究課題/領域番号:23K16944  2023年04月 - 2026年03月

    日本学術振興会  若手研究  若手研究

    上乃聖

     詳細を見る

    担当区分:研究代表者 

    配分額:4550000円 ( 直接経費:3500000円 、 間接経費:1050000円 )

その他競争的資金獲得実績

  • 多様性を考慮した⾳声合成を⽤いた⾳声認識の効率的なデータ拡張

    2023年04月 - 2024年03月

    名古屋工業大学  学内研究推進経費 

    上乃聖

     詳細を見る

    担当区分:研究代表者  資金種別:競争的資金

    配分額:500000円 ( 直接経費:500000円 )

共同研究実施実績

  • 音声対話におけるタスク完了率の最適化

    2022年04月 - 2025年03月

    株式会社 AI Shift  国内共同研究 

    李晃伸,上乃聖

     詳細を見る

    担当区分:研究分担者  資金種別:産学連携による資金

 

担当経験のある授業科目(学外)

  • メディア系演習Ⅱ

    2024年10月 - 2025年02月 機関名:名古屋工業大学

     詳細を見る

    科目区分:学部専門科目  国名:日本国

  • メディア系演習Ⅰ

    2024年04月 - 2024年07月 機関名:名古屋工業大学

     詳細を見る

    科目区分:学部専門科目  国名:日本国

  • メディア系演習Ⅱ

    2023年10月 - 2024年02月 機関名:名古屋工業大学

     詳細を見る

    科目区分:学部専門科目  国名:日本国

  • 実践研究セミナー

    2023年10月 - 2024年02月 機関名:名古屋工業大学

     詳細を見る

    科目区分:学部専門科目  国名:日本国

  • 電気情報工学基礎実験

    2023年10月 - 2024年02月 機関名:名古屋工業大学

     詳細を見る

    科目区分:学部専門科目  国名:日本国

全件表示 >>

教育活動に関する受賞

  • 挑戦的研究賞

    2024年08月   音響学会 東海支部

    受賞者:木全 亮太朗, 上乃 聖, 李晃伸

     詳細を見る

    大規模事前学習モデルによる笑い声表現を用いたspeech-laugh音声の生成

  • 総合2位

    2024年08月   音響学会 東海支部

    受賞者:川又 朱莉, 上乃 聖, 李晃伸

     詳細を見る

    CG特有の身体・感情表現を用いたCG対話エージェントのインタラクションデザイン

  • 委員特別賞

    2024年03月   言語処理学会

    受賞者:藤田敦也, 上乃聖, 李晃伸

     詳細を見る

    【将来性】の観点での評価

  • 全国大会優秀賞 ポスター発表部門

    2023年07月   一般社団法人 人工知能学会

    受賞者:藤岡 侑貴, 上乃 聖, 李晃伸

  • 優秀ポスター発表賞

    2023年03月   HAIシンポジウム

    受賞者:川又 朱莉, 上乃 聖, 李 晃伸

その他教育活動及び特記事項

  • 実践研究セミナーに関する音声合成の教材開発

    2023年10月 - 2024年03月

  • 実践研究セミナーに関する音声認識の教材開発

    2022年10月 - 2023年03月

 

委員歴

  • 日本音響学会 東海支部   庶務幹事  

    2024年04月 - 2027年03月   

      詳細を見る

    団体区分:学協会

  • 日本音響学会   実行委員  

    2023年09月   

      詳細を見る

    団体区分:学協会

学術貢献活動

  • 2024 Acoustical Science and Technology Review 3件 国際学術貢献

    役割:査読

    一般社団法人 日本音響学会  2024年09月 - 2024年10月

     詳細を見る

    種別:査読等 

  • 2024 IEICE Transactions on Information and Systems Review 2件 国際学術貢献

    役割:査読

    IEICE Transactions on Information and Systems  2024年08月 - 現在

     詳細を見る

    種別:査読等 

  • 2024 IEEE Automatic Speech Recognition and Understanding Workshop review 3件 国際学術貢献

    役割:査読

    2024 IEEE Automatic Speech Recognition and Understanding Workshop  2024年07月 - 2024年08月

     詳細を見る

    種別:査読等 

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 1 国際学術貢献

    役割:査読

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023年07月 - 2023年09月

     詳細を見る

    種別:査読等 

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 3 国際学術貢献

    役割:査読

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023年07月 - 2023年09月

     詳細を見る

    種別:査読等 

  • 2023 IEEE Automatic Speech Recognition and Understanding Workshop review 2 国際学術貢献

    役割:査読

    2023 IEEE Automatic Speech Recognition and Understanding Workshop  2023年07月 - 2023年09月

     詳細を見る

    種別:査読等 

  • APSIPA Transactions on Signal and Information Processing review 国際学術貢献

    役割:査読

    2023年01月 - 2023年04月

     詳細を見る

    種別:査読等 

  • IEICE Transactions on Information and Systems Review 国際学術貢献

    役割:査読

    IEICE Transactions on Information and Systems  2022年11月 - 2022年12月

     詳細を見る

    種別:査読等