教育活動
授業担当
- 2024年, 学部専門, １ターム, データサイエンスセミナーI
- 2024年, 学部専門, ２ターム, データサイエンスセミナーII
- 2024年, 学部専門, セメスター（後期）, 卒業論文
YU YIYI YU
Last Updated :2024/05/08
- 所属・職名
- 大学院先進理工系科学研究科 准教授
- ホームページ
- メールアドレス
- yiyu
hiroshima-u.ac.jp
- 自己紹介
- マルチモーダル相関学習とコンテンツ生成に関する研究を行っています。これは、モダリティ（音声、テキスト、画像、動画など）を跨いだ研究分野です。例えば、i)音声データとそれに対応する動画データを用いて、その相互関係を学習させ、音声から動画、動画から音声の検索ができます。ii) メロディーから歌詞、歌詞からメロディーを生成できます。iii) ユーザーが話す問い合わせに対して、関連する画像や動画を表示したり、テキストで返答したりすることができます。iv) 映像を分析して、映っている物や動作を識別し、同時に音声やテキストの説明も理解することができます。
