刘瑞
办公地点：计算机学院503
E-mail:liurui_imu@163.com
教育经历：
（1）2019-08至2020-08，新加坡国立大学，国家留学基金委联合培养博士研究生
导师：Prof.Haizhou Li,（IEEE Fellow，新加坡工程院院士，长江学者特聘）
（2）2014-09至2020-08，内蒙古大学，博士研究生
导师：高光来教授
（3）2010-09至2014-06，太原理工大学，本科生
科研与学术工作经历：
（1）2022-01至今，内蒙古大学，计算机学院，研究员、博士生导师
（2）2024-12至今，内蒙古大学，计算机学院，教授、博士生导师
（3）2020-08至2022-01，新加坡国立大学，博士后研究员
导师：Prof.Haizhou Li,（IEEE Fellow，新加坡工程院院士，长江学者特聘)
一、个人简介:
教授，骏马计划B1岗研究员，博士生导师。2024 年入选第十届中国科协青年人才托举工程（依托中国人工智能学会），2025 年获批内蒙古自治区杰出青年基金项目。CCF 高级会员、第七届中国青年科技工作者协会会员。内蒙古自治区“草原英才”，内蒙古自治区本级引进高层次人才，内蒙古青年科学家创新联盟成员，呼和浩特市第二批企业科技特派员。国家自然科学基金评审专家、国家留学基金委评审专家。主持国自然面上、国自然青年、内蒙古自治区杰出青年基金项目、内蒙古自治区重点研发和成果转化计划项目、内蒙古自治区草原英才等多项国家/省部级项目。
主要研究方向为多语种（中蒙俄英等）人机语音交互（涉及语音信息处理、自然语言处理、多模态人机对话以及基于深度学习、大语言模型的多模态（语音、文本、图像等）信息处理等），紧密围绕内蒙古自治区战略需求“建设我国向北开放重要桥头堡”、“积极参与共建中蒙俄经济走廊”开展工作。相关成果以第一或通讯作者发表于IEEE-TASLP、IEEE-TAFFC、Neural Networks、Information Fusion和 ACL 、ACMMM、AAAI、ICASSP、 INTERSPEECH等CCF-A/CAAI-A类学术会议或中科院一区 Top 期刊等。
二、科研成果：（完整列表见Google Scholar）
2025
Yifan Hu, Rui Liu*, Yi Ren, Xiang Yin, Haizhou Li. “Chain-Talker: Chain Understanding and Rendering for Empathetic Conversational Speech Synthesis.” ACL’2025 (2025)(自然语言处理领域顶级会议，中国计算机学会推荐A类会议， 唯一通讯作者)
Rui Liu, Jinhua Zhang, Haizhou Li. “Hierarchical Multi-Source Cues Fusion for Mono-to-Binaural based Audio Deepfake Detection.” Information Fusion. (2025)(人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8, 唯一第一作者)
Rui Liu, Hongyu Yuan, Guanglai Gao, Haizhou Li. “Listening and Seeing Again: Generative Error Correction for Audio-Visual Speech Recognition.” Information Fusion. (2025) (人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8, 唯一第一作者)
Rui Liu, Zhenqi Jia, Feilong Bao*, Haizhou Li. “Retrieval-Augmented Dialogue Knowledge Aggregation for Expressive Conversational Speech Synthesis.” Information Fusion. (2025)(人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8, 唯一第一作者)
Rui Liu, Kailin Liang, De Hu, Tao Li, Dongchao Yang, Haizhou Li. “Noise Robust Cross-Speaker Emotion Transfer in TTS through Knowledge Distillation and Orthogonal Constraint. ” IEEE Transactions on Audio, Speech, and Language Processing (IEEE -TASLP). (2025)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
Rui Liu, Shuwei He, Yifan Hu, Haizhou Li. “Multi-modal and Multi-scale Spatial Environment Understanding for Immersive Visual Text-to-Speech, ” AAAI’2025 (2025) (人工智能领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
2024
Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Generative Expressive Conversational Speech Synthesis.” ACM MM’2024. (2024)(多模态信息处理领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Emotion Rendering for Conversational Speech Synthesis with Heterogeneous Graph-Based Context Modeling.” AAAI'2024. (2024)(人工智能领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
Rui Liu, Jinhua Zhang and Guanglai Gao. “Multi-Space Channel Representation Learning for Mono-to-Binaural Conversion based Audio Deepfake Detection.” Information Fusion. (2024)(人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8, 唯一第一作者)
Rui Liu, Haolin Zuo, Zheng Lian, Bjorn W. Schuller and Haizhou Li. “Contrastive Learning based Modality-Invariant Feature Acquisition for Robust Multimodal Emotion Recognition with Missing Modalities.” IEEE Transactions on Affective Computing (IEEE-TAFFC). (2024) (情感计算领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
Qiyuan Sun, Haolin Zuo, Rui Liu, and Haizhou Li. Connecting Cross-Modal Representations for Compact and Robust Multimodal Sentiment Analysis With Sentiment Word Substitution Error. IEEE Transactions on Affective Computing (IEEE-TAFFC). (2024) (情感计算领域顶级期刊，中国人工智能学会推荐A类期刊，唯一通讯作者) (第一作者为22 级本科生)
Rui Liu, Berrak Sisman, Guanglai Gao and Haizhou Li. “Controllable Accented Text-to-Speech Synthesis with Fine and Coarse-Grained Intensity Rendering.” IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
Rui Liu, Yifan Hu, Haolin Zuo, Zhaojie Luo, Longbiao Wang and Guanglai Gao. “Text-to-Speech for Low-Resource Agglutinative Language with Morphology-Aware Language Model Pre-training.” IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024) (语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
2023 及之前（部分）
Haolin Zuo, Rui Liu*, Jinming Zhao, Guanglai Gao, Haizhou Li. “Exploiting Modality-invariant Feature For Robust Multimodal Eemotion Recognition With Missing Modalities.” ICASSP’2023（2023）(语音语言领域顶级会议，唯一通讯作者)
Zhaojie Luo, Shoufeng Lin, Rui Liu, Jun Baba, Yuichiro Yoshikawa, Ishiguro Hiroshi. “Decoupling Speaker-Independent Emotions for Voice Conversion Via Source-Filter Networks.” IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一通讯作者)
Rui Liu, Berrak Sisman, Guanglai Gao, Haizhou Li. “Decoding Knowledge Transfer for Neural Text-to-Speech Training.” IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022) (语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
三、主持项目：
-科研项目
2025年, 内蒙古自治区重点研发和成果转化计划项目，100 万
2025年, 内蒙古自治区杰出青年（杰青）基金项目 ，50 万
2024年, 中国科协青年人才托举（青托）工程， 30 万
2024年, 国家自然科学基金面上项目 ，50 万
2024年, 教育部供需对接就业育人项目
2022年, 国家自然科学基金青年科学基金项目，30 万
2023年, 广东省数字孪生人重点实验室（华南理工大学）开放课题
2023年, 内蒙古自治区“草原英才”工程项目
2022年, 内蒙古自治区本级引进高层次人才科研支持
2023年, 自治区留学人员创新创业启动支持计划
2023年, 王宽诚教育基金会资助项目
2022年, 内蒙古大学骏马计划高层次人才引进项目
-教研项目
·2024“中国国际大学生创新大赛2024”项目挖掘与培育课题（实践教学课题）（校级教学改革项目）
四、学术服务:
-学术兼职：
·中国计算机学会语音对话与听觉专委会执行委员兼秘书组成员，2022-至今
·中国计算机学会人机交互专委会执行委员，2024-至今
·中国计算机学会多媒体专委会执行委员，2024-至今
·中国人工智能学会青年工作委员会委员，2023-至今
·中国人工智能学会元宇宙技术委员会执行委员，2024-至今
·中国人工智能学会多语种智能信息处理委员会委员，2024-至今
·中国中文信息学会民族语言文字信息专业委员会执行委员，2022-至今
·中国图象图形学学会多媒体专委会执行委员，2024-至今
-会议服务：
Program Chair (程序委员会主席):
·IEEE-IALP 2024, Hohhot, China
Session Chair (分会主席):
·IEEE-ICASSP 2023, Greek
·IEEE-ISCSLP2024, Beijing, China
Industrial Liaison Chair (工业联络主席):
·NCMMSC2022, Hefei, China
·NCMMSC2023, Suzhou, China
Local Arrangement Co-chair (本地组织主席):
·O-COCOSDA 2021, Singapore
·IWSDS 2021, Singapore
·SIGDIAL 2021, Singapore
-期刊编辑：
Editorial Board（编委）：
Associate Editor（副编辑）:
Guest Editor（客座编辑）:
五、所获奖励：
·2024年12月,第十二届中国技术市场协会金桥奖，项目二等奖
·2024年9月,中国国际大学生创新大赛（2024）内蒙古赛区选拔赛优秀创新创业导师奖
·2024年5月,首届内蒙古大学研究生教学成果奖，一等奖
·2024年1月,第四届内蒙古大学教师教学创新大赛，二等奖
·2023年6月,教育部高等学校科学研究优秀成果奖（科学技术）—科学技术进步二等奖
·2023年4月, 2022年ACM China新星奖（呼和浩特分会）
·2021年12月, 2020年内蒙古自治区优秀博士学位论文
·2021年12月, IALP2021最佳论文奖（Best Paper Award）
·2021年7月, 2020年ACM China优秀博士论文奖（呼和浩特分会）
·2020年9月,内蒙古大学优秀博士学位论文
·2020年2月, ICASSP IEEE SPS Travel Grant
·2019年8月,中国国家留学基金委奖学金
·2018年10月,博士研究生国家奖学金（top 2% students）,中华人民共和国教育部
·2018年10月,内蒙古自治区学业奖学金
·2017年10月,博士研究生国家奖学金（top 2% students）,中华人民共和国教育部
·2017年10月,内蒙古自治区学业奖学金
·2016年10月,内蒙古自治区学业奖学金
六、教学成果：
-比赛指导
2024年 中国国际大学生创新大赛（2024）全国总决赛 “青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》，国家级金奖。（负责人: 欧日乐克；指导教师：秦志宏、斯劳格劳、魏来宏、刘瑞、石磊、额尔敦哈达）
2024年 中国国际大学生创新大赛（2024）内蒙古赛区选拔赛 “青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》，自治区金奖。（负责人: 欧日乐克；指导教师：秦志宏，斯劳格劳，刘瑞，石磊）
2023年 中国国际大学生创新大赛（2023）《鉴伪存真-多语种多模态可信AI鉴定助手》，国家级铜奖。（负责人: 胡一帆；指导教师：刘瑞，秦志宏，石磊）
- 项目/论文指导
2024年《基于主动健康大模型的多语种心理咨询机器人》，国家级大学生创新创业训练计划项目。（负责人: 刘国伟；指导教师：刘瑞）
2024年《基于大语言模型的拟人化口语对话生成》，内蒙古大学2024年研究生科研创新项目（重点项目）。（负责人: 胡一帆；指导教师：刘瑞）
2024年 本科毕业设计《基于深度学习的对话场景语音合成》, 特优毕业论文。（学生：贾铭轩；指导教师：刘瑞）
2023年 本科毕业设计《基于深度学习的对话语音情感强度预测研究》, 特优毕业论文。（学生：王丹祺；指导教师：刘瑞）
七、研究生团队：
- 2022级
左昊麟（博士）: ICASSP2024 1篇、 IEEE-TAFFC（2023/2024） 2 篇，入选2025 年腾讯犀牛鸟精英人才计划，入选 2025 年国家留学基金委（CSC） 联合培养博士研究生项目
张锦华（学硕）：InterSpeech2023 1篇，Information Fusion（2024/2025） 2 篇，2024 年国家奖学金
刘彬（学硕）：NCMMSC2024 1 篇
刘欢（学硕）：CCL2024 1 篇，2024 年国家奖学金
席嘉甜（专硕）：InterSpeech2024 1篇，2024 年国家奖学金
马泽宁（专硕）：InterSpeech2024 1篇
梁凯麟（专硕）：IEEE-TASLP（2025） 1篇
- 2023级
胡一帆（博士）：ACMMM2024 1 篇，IEEE/ACM-TASLP（2024）1篇，AAAI2024 1 篇， ACL2025 1 篇，入选2024年度（首批）中国科协青年人才托举工程博士生专项计划（依托中国计算机学会），入选2025 年腾讯犀牛鸟精英人才计划
麻宇轩（博士）：TBD
高溥（学硕）：INTERSPEECH2025 1 篇
赵源（学硕）：ICASSP2025 1 篇
王召阳（专硕）：TBD
鲜鹄鸿（专硕）：TBD
何树伟（专硕）：AAAI2025 1篇，ICASSP2025 1 篇
戈绍丽（专硕）：TBD
贾真琦（专硕）：ICASSP2025 1 篇，Information Fusion（2025） 1 篇
袁宏宇（专硕）：Information Fusion（2025） 1 篇
- 2024级
招生信息：
[1]S2LAB (语音理解与生成研究组)
[2]推免生考研生招生【长期有效】
欢迎计算机、软件工程、数学等专业学生报考硕士、博士生，优秀者可推荐至新加坡国立大学（NUS）、香港中文大学（深圳）等多个合作单位访问学习或联合培养；
欢迎本科生参与课题组科研训练、论文发表和项目申报等，具有ACM、数学建模、国创等经验者优先。
欢迎优秀博士生申请博士后！！！
