刘瑞
办公地点：计算机学院503
E-mail:liurui_imu@163.com
教育经历：
（1）2019-08至2020-08，新加坡国立大学，国家留学基金委联合培养博士研究生
导师：Prof.Haizhou Li,（IEEE Fellow，新加坡工程院院士，海外高层次人才）
（2）2014-09至2020-08，内蒙古大学，博士研究生
导师：高光来教授
（3）2010-09至2014-06，太原理工大学，本科生
科研与学术工作经历：
（1）2022-01至今，内蒙古大学，计算机学院，研究员、博士生导师
（2）2024-12至今，内蒙古大学，计算机学院，教授、博士生导师
（3）2020-08至2022-01，新加坡国立大学，博士后研究员
导师：Prof.Haizhou Li,（IEEE Fellow，新加坡工程院院士，海外高层次人才)
一、个人简介:
教授，骏马计划B1岗研究员，博士生导师。2024年入选第十届中国科协青年人才托举工程（依托中国人工智能学会）。国家留学基金委评审专家，内蒙古自治区“草原英才”，内蒙古自治区本级引进高层次人才，内蒙古青年科学家创新联盟成员，呼和浩特市第二批企业科技特派员。主持国自然面上、国自然青年、内蒙古自治区草原英才等多项国家/省部级项目。主要研究方向为多语种（中蒙俄英等）人机语音交互（涉及语音信息处理、自然语言处理、多模态人机对话以及基于深度学习、大语言模型的多模态（语音、文本、图像等）信息处理等），紧密围绕内蒙古自治区战略需求“建设我国向北开放重要桥头堡”、“积极参与共建中蒙俄经济走廊”开展工作。
相关成果以第一或通讯作者发表于IEEE-TASLP、IEEE-TAFFC、Neural Networks、Information Fusion和ACMMM、AAAI、ICASSP、InterSpeech等CCF-A/CAAI-A类学术会议或中科院一区Top期刊等。曾获得教育部高等学校科学研究优秀成果奖（科学技术）—科学技术进步二等奖（6/10）、第十二届中国技术市场协会金桥奖二等奖（9/10）、亚洲语言处理国际会议IEEE-IALP2021最佳论文奖、内蒙古自治区优秀博士学位论文、ACM China新星奖（呼和浩特分会）、ACM China优博奖（呼和浩特分会）等奖励。指导学生团队获得中国国际大学生创新大赛（2023）国家级铜奖和中国国际大学生创新大赛（2024）国家级金奖。发起并组织了IEEE-ICASSP2025（语音领域顶级会议）情感意图联合理解挑战赛、IJCAI2024（CCF-A类会议）和ACMMM2024（CCF-A类会议）情感识别挑战赛、IEEE-ISCSLP2024（国际语音领域重要会议）语音合成挑战赛、NCMMSC2022（国内语音领域重要会议）蒙古语语音合成竞赛等。
二、科研成果：（完整列表见Google Scholar）
·Rui Liu, Zhenqi Jia, Feilong Bao*, Haizhou Li. “Retrieval-Augmented Dialogue Knowledge Aggregation for Expressive Conversational Speech Synthesis.”Information Fusion.(2025)(人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8,唯一第一作者)
·Rui Liu, Kailin Liang, De Hu, Tao Li, Dongchao Yang, Haizhou Li. “Noise Robust Cross-Speaker Emotion Transfer in TTS through Knowledge Distillation and Orthogonal Constraint. ”IEEE Transactions on Audio, Speech, and Language Processing (IEEE -TASLP).(2025)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
·Rui Liu, Shuwei He, Yifan Hu, Haizhou Li. “Multi-modal and Multi-scale Spatial Environment Understanding for Immersive Visual Text-to-Speech, ”AAAI’2025(2025)(人工智能领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
·Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Generative Expressive Conversational Speech Synthesis.”ACM MM’2024.(2024)(多模态信息处理领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
·Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Emotion Rendering for Conversational Speech Synthesis with Heterogeneous Graph-Based Context Modeling.”AAAI'2024. (2024)(人工智能领域顶级会议，中国计算机学会/中国人工智能学会推荐A类会议，唯一第一作者)
·Rui Liu, Jinhua Zhang and Guanglai Gao. “Multi-Space Channel Representation Learning for Mono-to-Binaural Conversion based Audio Deepfake Detection.”Information Fusion. (2024)(人工智能领域顶级期刊，中国人工智能学会推荐A类期刊，中科院一区Top期刊，IF=14.8,唯一第一作者)
·Rui Liu, Haolin Zuo, Zheng Lian, Bjorn W. Schuller and Haizhou Li. “Contrastive Learning based Modality-Invariant Feature Acquisition for Robust Multimodal Emotion Recognition with Missing Modalities.”IEEE Transactions on Affective Computing (IEEE-TAFFC). (2024)(情感计算领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
·Qiyuan Sun, Haolin Zuo,Rui Liu, and Haizhou Li. Connecting Cross-Modal Representations for Compact and Robust Multimodal Sentiment Analysis With Sentiment Word Substitution Error. IEEE Transactions on Affective Computing (IEEE-TAFFC).(2024)(情感计算领域顶级期刊，中国人工智能学会推荐A类期刊，唯一通讯作者) (第一作者为22级本科生)
·Rui Liu, Berrak Sisman, Guanglai Gao and Haizhou Li. “Controllable Accented Text-to-Speech Synthesis with Fine and Coarse-Grained Intensity Rendering.”IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
·Rui Liu, Yifan Hu, Haolin Zuo, Zhaojie Luo, Longbiao Wang and Guanglai Gao. “Text-to-Speech for Low-Resource Agglutinative Language with Morphology-Aware Language Model Pre-training.”IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024)语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
·Zhaojie Luo, Shoufeng Lin,Rui Liu, Jun Baba, Yuichiro Yoshikawa, Ishiguro Hiroshi. “Decoupling Speaker-Independent Emotions for Voice Conversion Via Source-Filter Networks.”IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一通讯作者)
·Rui Liu, Berrak Sisman, Guanglai Gao, Haizhou Li. “Decoding Knowledge Transfer for Neural Text-to-Speech Training.”IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022)(语音语言领域顶级期刊，中国人工智能学会推荐A类期刊，唯一第一作者)
三、主持项目：
-科研项目
·2024年,国家自然科学基金面上项目（项目号62476146）《面向共情人机交互的对话语音合成大模型上下文感知方法研究》2025.1-2028.12,
·2024年,教育部供需对接就业育人项目（项目号2024010242973）
·2022年,国家自然科学基金青年科学基金项目（项目号62206136）《对话场景下语音合成深度情感建模研究》2023.1-2025.12,
·2023年,广东省数字孪生人重点实验室（华南理工大学）开放课题, 2023.6.1-2024.5.30
·2023年,内蒙古自治区“草原英才”工程项目
·2022年,内蒙古自治区本级引进高层次人才科研支持,2023.7-2026.7
·2023年,自治区留学人员创新创业启动支持计划
·2023年,王宽诚教育基金会资助项目
·2022年,内蒙古大学骏马计划高层次人才引进项目
-教研项目
·2024“中国国际大学生创新大赛2024”项目挖掘与培育课题（实践教学课题）（校级教学改革项目）
四、学术服务:
-学术兼职：
·中国计算机学会语音对话与听觉专委会执行委员兼秘书组成员，2022-至今
·中国计算机学会人机交互专委会执行委员，2024-至今
·中国计算机学会多媒体专委会执行委员，2024-至今
·中国人工智能学会青年工作委员会委员，2023-至今
·中国人工智能学会元宇宙技术委员会执行委员，2024-至今
·中国人工智能学会多语种智能信息处理委员会委员，2024-至今
·中国中文信息学会民族语言文字信息专业委员会执行委员，2022-至今
·中国图象图形学学会多媒体专委会执行委员，2024-至今
-会议服务：
Program Chair (程序委员会主席):
·IEEE-IALP 2024, Hohhot, China
Session Chair (分会主席):
·IEEE-ICASSP 2023, Greek
·IEEE-ISCSLP2024, Beijing, China
Industrial Liaison Chair (工业联络主席):
·NCMMSC2022, Hefei, China
·NCMMSC2023, Suzhou, China
Local Arrangement Co-chair (本地组织主席):
·O-COCOSDA 2021, Singapore
·IWSDS 2021, Singapore
·SIGDIAL 2021, Singapore
-期刊编辑：
Associate Editor（编委）:
·IEEE Transactions on Affective Computing（IEEE-TAFFC）
·ACM Transactions on Asian and Low-Resource Language Information Processing（TALLIP）
Guest Editor（客座编辑）:
·IEEE Transactions on Consumer Electronics
五、所获奖励：
·2024年12月,第十二届中国技术市场协会金桥奖，项目二等奖（9/10）
·2024年9月,中国国际大学生创新大赛（2024）内蒙古赛区选拔赛优秀创新创业导师奖
·2024年5月,首届内蒙古大学研究生教学成果奖，一等奖
·2024年1月,第四届内蒙古大学教师教学创新大赛，二等奖
·2023年6月,教育部高等学校科学研究优秀成果奖（科学技术）—科学技术进步二等奖（6/10）
·2023年4月, 2022年ACM China新星奖（呼和浩特分会）
·2021年12月, 2020年内蒙古自治区优秀博士学位论文（2/12）
·2021年12月, IALP2021最佳论文奖（Best Paper Award）
·2021年7月, 2020年ACM China优秀博士论文奖（呼和浩特分会）
·2020年9月,内蒙古大学优秀博士学位论文
·2020年2月, ICASSP IEEE SPS Travel Grant
·2019年8月,中国国家留学基金委奖学金
·2018年10月,博士研究生国家奖学金（top 2% students）,中华人民共和国教育部
·2018年10月,内蒙古自治区学业奖学金
·2017年10月,博士研究生国家奖学金（top 2% students）,中华人民共和国教育部
·2017年10月,内蒙古自治区学业奖学金
·2016年10月,内蒙古自治区学业奖学金
六、教学成果：
-比赛指导
·2024年中国国际大学生创新大赛（2024）全国总决赛“青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》，国家级金奖。（负责人:欧日乐克；指导教师：秦志宏，斯劳格劳，刘瑞，石磊）
·2024年中国国际大学生创新大赛（2024）内蒙古赛区选拔赛“青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》，自治区金奖。（负责人:欧日乐克；指导教师：秦志宏，斯劳格劳，刘瑞，石磊）
·2023年中国国际大学生创新大赛（2023）《鉴伪存真-多语种多模态可信AI鉴定助手》，国家级铜奖。（负责人:胡一帆；指导教师：刘瑞，秦志宏，石磊）
·2023年大学生数字技能应用大赛“互联网+”技能应用赛，国家级三等奖。（负责人:贾真琦；指导教师：刘瑞）
·2023年大学生数字技能应用大赛“互联网+”技能应用赛，省级三等奖。（负责人:赵源；指导教师：刘瑞）
·2023年大学生数字技能应用大赛“互联网+”技能应用赛，省级一等奖。（负责人:何树伟；指导教师：刘瑞）
-项目/论文指导
·2024年《基于主动健康大模型的多语种心理咨询机器人》，国家级大学生创新创业训练计划项目。（负责人:刘国伟；指导教师：刘瑞）
·2024年《基于大语言模型的拟人化口语对话生成》，内蒙古大学2024年研究生科研创新项目（重点项目）。（负责人:胡一帆；指导教师：刘瑞）
·2023年本科毕业设计《基于深度学习的对话语音情感强度预测研究》, 特优毕业论文。（学生：王丹祺；指导教师：刘瑞）
七、研究生团队：
- 2022级
·左昊麟（博士）: ICASSP2024 1篇、IEEE-TAFFC（2023/2024）2篇
·张锦华（学硕）：InterSpeech2023 1篇，Information Fusion（2024/2025）2篇，2024年国家奖学金
·刘彬（学硕）：NCMMSC2024 1篇
·刘欢（学硕）：CCL2024 1篇，2024年国家奖学金
·席嘉甜（专硕）：InterSpeech2024 1篇，2024年国家奖学金
·马泽宁（专硕）：InterSpeech2024 1篇
·梁凯麟（专硕）：IEEE-TASLP（2025）1篇
- 2023级
·胡一帆（博士）：ACMMM2024 1篇，IEEE/ACM-TASLP（2024）1篇，AAAI2024 1篇，入选2024年度（首批）中国科协青年人才托举工程博士生专项计划（依托中国计算机学会）
·麻宇轩（博士）：TBD
·高溥（学硕）：TBD
·赵源（学硕）：ICASSP2025 1篇
·王召阳（专硕）：TBD
·鲜鹄鸿（专硕）：TBD
·何树伟（专硕）：AAAI20251篇，ICASSP2025 1篇
·戈绍丽（专硕）：TBD
·贾真琦（专硕）：ICASSP2025 1篇，Information Fusion（2025）1篇
·袁宏宇（专硕）：Information Fusion（2025）1篇
- 2024级
·张锦华（博士）：InterSpeech2023 1篇，Information Fusion（2024/2025）2篇，2024年国家奖学金
·程文凯（学硕）：TBD
·刘桧耀（学硕）：TBD
·董瑞霖（学硕）：TBD
·马涛（专硕）：TBD
·赵英杰（专硕）：TBD
·娄艺（专硕）：TBD
招生信息：
[1]S2LAB (语音理解与生成研究组)
[2]推免生考研生招生【长期有效】
欢迎计算机、软件工程、数学等专业学生报考硕士、博士生，优秀者可推荐至新加坡国立大学（NUS）、香港中文大学（深圳）等多个合作单位访问学习或联合培养；
欢迎本科生参与课题组科研训练、论文发表和项目申报等，具有ACM、数学建模、国创等经验者优先。
欢迎优秀博士生申请博士后！！！
