Degree
-
Ph.D. (Informatics) ( 2022.03 Kyoto University )
-
Master ( 2019.03 Kyoto University )
-
学士 ( 2017.03 同志社大学 )
Research Areas
-
Informatics / Intelligent informatics / Speech Recognition, Speech Synthesis
From School
-
Doshisha University Faculty of Science and Engineering Graduated
2013.04 - 2017.03
Country：Japan
From Graduate School
-
Kyoto University Graduate School, Division of Information and Communication Doctor's Course Completed
2019.04 - 2022.03
Country：Japan
-
Kyoto University Graduate School, Division of Information and Communication Master's Course Completed
2017.04 - 2019.03
Country：Japan
Papers
-
Data generation for speaker diarization by speaker transition information Reviewed
Keigo Ichikawa, Sei Ueno, and Akinobu Lee
Asia Pacific Signal and Information Processing Association (APSIPA) 2024.12
Language：English Publishing type：Research paper (international conference proceedings)
Other Link： https://www.apsipa2023.org/tprogram.html
-
大規模事前学習モデルによる笑い声表現を用いたspeech-laugh音声の生成
木全亮太朗, 上乃 聖, 李 晃伸
日本音響学会講演論文集 2024.09
Language：Japanese Publishing type：Research paper (other academic)
-
Refining Synthesized Speech Using Speaker Information and Phone Masking for Data Augmentation of Speech Recognition Reviewed
Sei Ueno, Akinobu Lee, Tastuya Kawahara
IEEE/ACM Transactions on Audio, Speech, and Language Processing 32 3924 - 3933 2024.09
Authorship：Lead author, Corresponding author Language：English Publishing type：Research paper (scientific journal)
DOI： 10.1109/TASLP.2024.3451982
Other Link： https://repository.kulib.kyoto-u.ac.jp/dspace/handle/2433/289487
-
Multi-setting acoustic feature training for data augmentation of speech recognition Reviewed
Sei Ueno, Akinobu Lee
Acoustical Science and Technology 45 ( 4 ) 195 - 203 2024.07
Authorship：Lead author, Corresponding author Language：English Publishing type：Research paper (scientific journal)
DOI： https://doi.org/10.1250/ast.e23.70
Other Link： https://www.jstage.jst.go.jp/article/ast/45/4/45_e23.70/_article/-char/ja
-
センチメント分析を用いた感情を重視した物語の階層的要約手法
酒井 健壱, 上乃 聖, 李 晃伸
言語処理学会 第30回年次大会 発表論文集 1119 - 1124 2024.03
Language：Japanese Publishing type：Research paper (other academic)
Other Link： https://www.anlp.jp/proceedings/annual_meeting/2024/index.html
-
経験情報収集および伝達を主目的とする雑談対話による関係性維持支援システム
志満津 奈央, 上乃 聖, 李 晃伸
言語処理学会 第30回年次大会 発表論文集 1394 - 1399 2024.03
Language：Japanese Publishing type：Research paper (other academic)
Other Link： https://www.anlp.jp/proceedings/annual_meeting/2024/index.html
-
大規模言語モデルを用いたEmotional Support Conversation システムの構築とその評価
藤田 敦也, 上乃 聖, 李 晃伸
言語処理学会 第30回年次大会 発表論文集 1378 - 1383 2024.03
Language：Japanese Publishing type：Research paper (other academic)
Other Link： https://www.anlp.jp/proceedings/annual_meeting/2024/index.html
-
Synthesis of non-native voice with native-like accent using voice conversion
Iago Lourenço Correa, Sei Ueno, and Akinobu Lee
2024.03
Language：Japanese Publishing type：Research paper (conference, symposium, etc.)
Other Link： https://acoustics.jp/annualmeeting/program/
-
LLM によるテキスト生成を用いた音声合成による音声認識のドメイン適応
上乃 聖, 李 晃伸
日本音響学会講演論文集 2024.03
Authorship：Lead author, Corresponding author Language：Japanese Publishing type：Research paper (other academic)
-
Cocktail Machine Speech Chain: 重複あり音声を用いた音声認識・音声合成モデルの統一的学習
松永 裕太, 高道 慎之介, 上乃 聖, 猿渡 洋
日本音響学会講演論文集 2024.03
Language：Japanese Publishing type：Research paper (other academic)
Presentations
-
Data generation for speaker diarization by speaker transition information International conference
2024.12
Event date： 2024.12
Language：English Presentation type：Oral presentation (general)
Venue：Galaxy International Convention Center, Macau. China Country：Macao
-
音声情報処理における機械学習 Invited
上乃聖
マイクロエレクトロニクスシンポジウム 2024.09 一般社団法人 エレクトロニクス実装学会
Event date： 2024.09
Language：Japanese Presentation type：Oral presentation (invited, special)
Venue：大同大学 Country：Japan
-
大規模事前学習モデルによる笑い声表現を用いたspeech-laugh音声の生成
木全 亮太朗, 上乃 聖, 李晃伸
日本音響学会 研究発表会 2024.09 一般社団法人 日本音響学会
Event date： 2024.09
Language：Japanese Presentation type：Poster presentation
Venue：関西大学 Country：Japan
-
金子優, 上乃聖, 李晃伸
NLP若手の会 (YANS) 第19回シンポジウム 2024.09 NLP若手の会運営委員会
Event date： 2024.09
Language：Japanese Presentation type：Poster presentation
Venue：梅田スカイビル Country：Japan
-
マルチエージェント協働による TRPG ゲームマスターの実現
箕成侑音, 上乃聖, 李晃伸
NLP若手の会 (YANS) 第19回シンポジウム 2024.09 NLP若手の会運営委員会
Event date： 2024.09
Language：Japanese Presentation type：Poster presentation
Venue：梅田スカイビル Country：Japan
-
大規模言語モデルを用いた効果的な物語のあらすじ生成手法の検討
酒井健壱, 上乃聖, 李晃伸
NLP若手の会 (YANS) 第19回シンポジウム 2024.09 NLP若手の会運営委員会
Event date： 2024.09
Language：Japanese Presentation type：Poster presentation
Venue：梅田スカイビル Country：Japan
-
大規模言語モデルによる感情極性に着目した小説からの人物関係抽出
齋藤大輔, 上乃聖, 李晃伸
NLP若手の会 (YANS) 第19回シンポジウム 2024.09 NLP若手の会運営委員会
Event date： 2024.09
Language：Japanese Presentation type：Poster presentation
Venue：梅田スカイビル Country：Japan
-
研究紹介
上乃聖
2024.07 慶応義塾大学 杉浦研究室
Event date： 2024.07
Language：Japanese Presentation type：Public lecture, seminar, tutorial, course, or other speech
Venue：慶応義塾大学 杉浦研究室 Country：Japan
-
音声合成を用いた音声認識のための効率的なデータ拡張法 Invited
上乃聖
日本音響学会 東海支部 講演会 2024.04 日本音響学会 東海支部
Event date： 2024.04
Language：Japanese Presentation type：Oral presentation (invited, special)
Venue：ウインク愛知 Country：Japan
-
酒井健壱, 上乃聖, 李晃伸
言語処理学会 2024.03 言語処理学会
Event date： 2024.03
Language：Japanese Presentation type：Oral presentation (general)
Venue：神戸国際会議場 Country：Japan
Awards
-
2024.03 言語処理学会 大規模言語モデルを用いたEmotional Support Conversation システムの構築とその評価
藤田敦也, 上乃聖, 李晃伸
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
2023.07 一般社団法人 人工知能学会 CGアバター対話における音声からの頭部動作および表情の自動生成
藤岡 侑貴, 上乃 聖, 李晃伸
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
2023.03 HAIシンポジウム 連続的な感情表出を用いたカウンセリング対話エージェントの評価
川又 朱莉, 上乃 聖, 李 晃伸
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
2022 情報処理学会 音声認識のデータ拡張のための合成音声の周波数スペクトログラム強調
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
学生論文賞
2018.12 情報処理学会 End-to-End 音声合成を用いた単語 単位 End-to-End 音声認識のデータ拡張
上乃聖, 三村正人, 坂井信輔, 河原達也
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
学生優秀賞受賞
2018.09 日本音響学会 文字単位のモデルを併用した単語単 位の End-to-End 音声認識
上乃聖, 稲熊寛文, 三村正人, 河原達也
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
-
学生ポスター賞
2018.08 電子情報通信学会 転移学習による注意機構付き単語単位音声認識の適応
上乃聖, 森谷崇史, 三村正人, 坂井信輔, 篠原雄介, 山口義和, 青野裕司, 河原 達也
Award type：Award from Japanese society, conference, symposium, etc. Country：Japan
Scientific Research Funds Acquisition Results
-
AIによる対話技術を活用した模擬患者アバターでの仮想空間医療面接教育基盤の創生
Grant number：24H00170 2024.04 - 2029.03
日本学術振興会 基盤研究(A) 基盤研究(A)
石原 慎, 岡崎 史子, 蓮沼 直子, 高橋 誠, 橋本 佳, 廣井 直樹, 寺澤 晃彦, 小松 弘幸, 山内 かづ代, 三好 智子, 伊藤 俊之, 伊藤 彰一, 藤田 博一, 田口 亮, 大久保 由美子, 李 晃伸, 荒川 敏, 栩野 吉弘, 岸 美紀子, 上乃 聖, 鋪野 紀好
Authorship：Coinvestigator(s) Grant type：Competitive
Grant amount：\48360000 （ Direct Cost: \37200000 、 Indirect Cost：\11160000 ）
-
光弾性法と超音波ドップラ法の複合計測が拓く血液-血管応力集中部の可視化技術の創成
Grant number：23H01343 2023.04 - 2026.03
日本学術振興会 基盤研究(B) 基盤研究(B)
武藤 真和, 小林 和也, 上乃 聖, 玉野 真司, 中村 匡徳
Authorship：Coinvestigator(s) Grant type：Competitive
Grant amount：\19370000 （ Direct Cost: \14900000 、 Indirect Cost：\4470000 ）
-
Grant number：23K16944 2023.04 - 2026.03
日本学術振興会 若手研究 若手研究
上乃聖
Authorship：Principal investigator
Grant amount：\4550000 （ Direct Cost: \3500000 、 Indirect Cost：\1050000 ）
Other External Funds
-
多様性を考慮した⾳声合成を⽤いた⾳声認識の効率的なデータ拡張
2023.04 - 2024.03
名古屋工業大学 学内研究推進経費
上乃聖
Authorship：Principal investigator Grant type：Competitive
Grant amount：\500000 （ Direct Cost: \500000 ）
Past of Cooperative Research
-
音声対話におけるタスク完了率の最適化
2022.04 - 2025.03
株式会社 AI Shift Collaboration in Japan
李晃伸，上乃聖
Authorship：Coinvestigator(s) Grant type：Collaborative (industry/university)
Teaching Experience
-
メディア系演習Ⅱ
2024.10 - 2025.02 Institution：Nagoya Institute of Technology
Level：Undergraduate (specialized) Country：Japan
-
Media LaboratoryⅠ
2024.04 - 2024.07 Institution：Nagoya Institute of Technology
Level：Undergraduate (specialized) Country：Japan
-
メディア系演習Ⅱ
2023.10 - 2024.02 Institution：Nagoya Institute of Technology
Level：Undergraduate (specialized) Country：Japan
-
実践研究セミナー
2023.10 - 2024.02 Institution：Nagoya Institute of Technology
Level：Undergraduate (specialized) Country：Japan
-
電気情報工学基礎実験
2023.10 - 2024.02 Institution：Nagoya Institute of Technology
Level：Undergraduate (specialized) Country：Japan
Committee Memberships
-
日本音響学会 東海支部 庶務幹事
2024.04 - 2027.03
Committee type：Academic society
-
日本音響学会 実行委員
2023.09
Committee type：Academic society
Academic Activities
-
2024 Acoustical Science and Technology Review 3件 International contribution
Role(s)： Peer review
一般社団法人 日本音響学会 2024.09 - 2024.10
Type：Peer review
-
2024 IEICE Transactions on Information and Systems Review 2件 International contribution
Role(s)： Peer review
IEICE Transactions on Information and Systems 2024.08
Type：Peer review
-
2024 IEEE Automatic Speech Recognition and Understanding Workshop review 3件 International contribution
Role(s)： Peer review
2024 IEEE Automatic Speech Recognition and Understanding Workshop 2024.07 - 2024.08
Type：Peer review
-
2023 IEEE Automatic Speech Recognition and Understanding Workshop review 1 International contribution
Role(s)： Peer review
2023 IEEE Automatic Speech Recognition and Understanding Workshop 2023.07 - 2023.09
Type：Peer review
-
2023 IEEE Automatic Speech Recognition and Understanding Workshop review 3 International contribution
Role(s)： Peer review
2023 IEEE Automatic Speech Recognition and Understanding Workshop 2023.07 - 2023.09
Type：Peer review
-
2023 IEEE Automatic Speech Recognition and Understanding Workshop review 2 International contribution
Role(s)： Peer review
2023 IEEE Automatic Speech Recognition and Understanding Workshop 2023.07 - 2023.09
Type：Peer review
-
APSIPA Transactions on Signal and Information Processing review International contribution
Role(s)： Peer review
2023.01 - 2023.04
Type：Peer review
-
IEICE Transactions on Information and Systems Review International contribution
Role(s)： Peer review
IEICE Transactions on Information and Systems 2022.11 - 2022.12
Type：Peer review