当前位置: 首页 师资团队 正高级 正文
刘瑞 研究员

发布日期:2022-01-28来源:

刘瑞

办公地点:计算机学院503

E-mail:liurui_imu@163.com


教育经历:

(1)2019-08至2020-08,新加坡国立大学,国家留学基金委联合培养博士研究生

导师:Prof.Haizhou Li,(IEEE Fellow,新加坡工程院院士,海外高层次人才)

(2)2014-09至2020-08,内蒙古大学,博士研究生

导师:高光来教授

(3)2010-09至2014-06,太原理工大学,本科生

科研与学术工作经历:

(1)2022-01至今,内蒙古大学,计算机学院,研究员、博士生导师

(2)2024-12至今,内蒙古大学,计算机学院,教授、博士生导师

(3)2020-08至2022-01,新加坡国立大学,博士后研究员

导师:Prof.Haizhou Li,(IEEE Fellow,新加坡工程院院士,海外高层次人才)

一、个人简介:

教授,骏马计划B1岗研究员,博士生导师。2024年入选第十届中国科协青年人才托举工程(依托中国人工智能学会)。国家留学基金委评审专家,内蒙古自治区“草原英才”,内蒙古自治区本级引进高层次人才,内蒙古青年科学家创新联盟成员,呼和浩特市第二批企业科技特派员。主持国自然面上、国自然青年、内蒙古自治区草原英才等多项国家/省部级项目。主要研究方向为多语种(中蒙俄英等)人机语音交互涉及语音信息处理、自然语言处理、多模态人机对话以及基于深度学习、大语言模型的多模态(语音、文本、图像等)信息处理等紧密围绕内蒙古自治区战略需求“建设我国向北开放重要桥头堡”、“积极参与共建中蒙俄经济走廊”开展工作。

相关成果以第一或通讯作者发表于IEEE-TASLP、IEEE-TAFFC、Neural Networks、Information Fusion和ACMMM、AAAI、ICASSP、InterSpeech等CCF-A/CAAI-A类学术会议或中科院一区Top期刊等。曾获得教育部高等学校科学研究优秀成果奖(科学技术)—科学技术进步二等奖(6/10)、第十二届中国技术市场协会金桥奖二等奖(9/10)、亚洲语言处理国际会议IEEE-IALP2021最佳论文奖、内蒙古自治区优秀博士学位论文、ACM China新星奖(呼和浩特分会)、ACM China优博奖(呼和浩特分会)等奖励。指导学生团队获得中国国际大学生创新大赛(2023)国家级铜奖和中国国际大学生创新大赛(2024)国家级金奖。发起并组织了IEEE-ICASSP2025(语音领域顶级会议)情感意图联合理解挑战赛、IJCAI2024(CCF-A类会议)和ACMMM2024(CCF-A类会议)情感识别挑战赛、IEEE-ISCSLP2024(国际语音领域重要会议)语音合成挑战赛、NCMMSC2022(国内语音领域重要会议)蒙古语语音合成竞赛等。

、科研成果:(完整列表见Google Scholar

·Rui Liu, Zhenqi Jia, Feilong Bao*, Haizhou Li. “Retrieval-Augmented Dialogue Knowledge Aggregation for Expressive Conversational Speech Synthesis.Information Fusion.(2025)(人工智能领域顶级期刊,中国人工智能学会推荐A类期刊,中科院一区Top期刊,IF=14.8,唯一第一作者)

·Rui Liu, Kailin Liang, De Hu, Tao Li, Dongchao Yang, Haizhou Li. “Noise Robust Cross-Speaker Emotion Transfer in TTS through Knowledge Distillation and Orthogonal Constraint. ”IEEE Transactions on Audio, Speech, and Language Processing (IEEE -TASLP).(2025)(语音语言领域顶级期刊,中国人工智能学会推荐A类期刊,唯一第一作者)

·Rui Liu, Shuwei He, Yifan Hu, Haizhou Li. “Multi-modal and Multi-scale Spatial Environment Understanding for Immersive Visual Text-to-Speech, ”AAAI’2025(2025)(人工智能领域顶级会议,中国计算机学会/中国人工智能学会推荐A类会议,唯一第一作者)

·Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Generative Expressive Conversational Speech Synthesis.”ACM MM’2024.(2024)(多模态信息处理领域顶级会议,中国计算机学会/中国人工智能学会推荐A类会议,唯一第一作者)

·Rui Liu, Yifan Hu, Yi Ren, Xiang Yin, Haizhou Li. “Emotion Rendering for Conversational Speech Synthesis with Heterogeneous Graph-Based Context Modeling.”AAAI'2024. (2024)(人工智能领域顶级会议,中国计算机学会/中国人工智能学会推荐A类会议,唯一第一作者)

·Rui Liu, Jinhua Zhang and Guanglai Gao. “Multi-Space Channel Representation Learning for Mono-to-Binaural Conversion based Audio Deepfake Detection.”Information Fusion. (2024)(人工智能领域顶级期刊,中国人工智能学会推荐A类期刊,中科院一区Top期刊,IF=14.8,唯一第一作者)

·Rui Liu, Haolin Zuo, Zheng Lian, Bjorn W. Schuller and Haizhou Li. “Contrastive Learning based Modality-Invariant Feature Acquisition for Robust Multimodal Emotion Recognition with Missing Modalities.”IEEE Transactions on Affective Computing (IEEE-TAFFC). (2024)(情感计算领域顶级期刊,中国人工智能学会推荐A类期刊,唯一第一作者)

·Qiyuan Sun, Haolin Zuo,Rui Liu, and Haizhou Li. Connecting Cross-Modal Representations for Compact and Robust Multimodal Sentiment Analysis With Sentiment Word Substitution Error. IEEE Transactions on Affective Computing (IEEE-TAFFC).(2024)(情感计算领域顶级期刊,中国人工智能学会推荐A类期刊,唯一通讯作者) (第一作者22级本科生)

·Rui Liu, Berrak Sisman, Guanglai Gao and Haizhou Li. “Controllable Accented Text-to-Speech Synthesis with Fine and Coarse-Grained Intensity Rendering.”IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024)(语音语言领域顶级期刊,中国人工智能学会推荐A类期刊,唯一第一作者)

·Rui Liu, Yifan Hu, Haolin Zuo, Zhaojie Luo, Longbiao Wang and Guanglai Gao. “Text-to-Speech for Low-Resource Agglutinative Language with Morphology-Aware Language Model Pre-training.”IEEE/ACM Transactions on Audio, Speech, and Language Processing. (2024)语音语言领域顶级期刊,中国人工智能学会推荐A类期刊,唯一第一作者)

·Zhaojie Luo, Shoufeng Lin,Rui Liu, Jun Baba, Yuichiro Yoshikawa, Ishiguro Hiroshi. “Decoupling Speaker-Independent Emotions for Voice Conversion Via Source-Filter Networks.”IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022)(语音语言领域顶级期刊,中国人工智能学会推荐A类期刊,唯一通讯作者)

·Rui Liu, Berrak Sisman, Guanglai Gao, Haizhou Li. “Decoding Knowledge Transfer for Neural Text-to-Speech Training.”IEEE/ACM Transactions on Audio, Speech and Language Processing. (2022)(语音语言领域顶级期刊,中国人工智能学会推荐A类期刊,唯一第一作者)

三、主持项目:

-科研项目

·2024年,国家自然科学基金面上项目(项目号62476146)《面向共情人机交互的对话语音合成大模型上下文感知方法研究》2025.1-2028.12,

·2024年,教育部供需对接就业育人项目(项目号2024010242973)

·2022年,国家自然科学基金青年科学基金项目(项目号62206136)《对话场景下语音合成深度情感建模研究》2023.1-2025.12,

·2023年,广东省数字孪生人重点实验室(华南理工大学)开放课题, 2023.6.1-2024.5.30

·2023年,内蒙古自治区“草原英才”工程项目

·2022年,内蒙古自治区本级引进高层次人才科研支持,2023.7-2026.7

·2023年,自治区留学人员创新创业启动支持计划

·2023年,王宽诚教育基金会资助项目

·2022年,内蒙古大学骏马计划高层次人才引进项目

-教研项目

·2024“中国国际大学生创新大赛2024”项目挖掘与培育课题(实践教学课题)(校级教学改革项目)

四、学术服务:

-学术兼职:

·中国计算机学会语音对话与听觉专委会执行委员兼秘书组成员,2022-至今

·中国计算机学会人机交互专委会执行委员,2024-至今

·中国计算机学会多媒体专委会执行委员,2024-至今

·中国人工智能学会青年工作委员会委员,2023-至今

·中国人工智能学会元宇宙技术委员会执行委员,2024-至今

·中国人工智能学会多语种智能信息处理委员会委员,2024-至今

·中国中文信息学会民族语言文字信息专业委员会执行委员,2022-至今

·中国图象图形学学会多媒体专委会执行委员,2024-至今

-会议服务

Program Chair (程序委员会主席):

·IEEE-IALP 2024, Hohhot, China

Session Chair (分会主席):

·IEEE-ICASSP 2023, Greek

·IEEE-ISCSLP2024, Beijing, China

Industrial Liaison Chair (工业联络主席):

·NCMMSC2022, Hefei, China

·NCMMSC2023, Suzhou, China

Local Arrangement Co-chair (本地组织主席):

·O-COCOSDA 2021, Singapore

·IWSDS 2021, Singapore

·SIGDIAL 2021, Singapore

-期刊编辑:

Associate Editor(编委):

·IEEE Transactions on Affective Computing(IEEE-TAFFC)

·ACM Transactions on Asian and Low-Resource Language Information Processing(TALLIP)

Guest Editor(客座编辑):

·IEEE Transactions on Consumer Electronics

五、所获奖励:

·2024年12月,第十二届中国技术市场协会金桥奖,项目二等奖(9/10)

·2024年9月,中国国际大学生创新大赛(2024)内蒙古赛区选拔赛优秀创新创业导师奖

·2024年5月,首届内蒙古大学研究生教学成果奖,一等奖

·2024年1月,第四届内蒙古大学教师教学创新大赛,二等奖

·2023年6月,教育部高等学校科学研究优秀成果奖(科学技术)—科学技术进步二等奖(6/10)

·2023年4月, 2022年ACM China新星奖(呼和浩特分会)

·2021年12月, 2020年内蒙古自治区优秀博士学位论文(2/12)

·2021年12月, IALP2021最佳论文奖(Best Paper Award)

·2021年7月, 2020年ACM China优秀博士论文奖(呼和浩特分会)

·2020年9月,内蒙古大学优秀博士学位论文

·2020年2月, ICASSP IEEE SPS Travel Grant

·2019年8月,中国国家留学基金委奖学金

·2018年10月,博士研究生国家奖学金(top 2% students),中华人民共和国教育部

·2018年10月,内蒙古自治区学业奖学金

·2017年10月,博士研究生国家奖学金(top 2% students),中华人民共和国教育部

·2017年10月,内蒙古自治区学业奖学金

·2016年10月,内蒙古自治区学业奖学金

六、教学成果:

-比赛指导

·2024年中国国际大学生创新大赛(2024)全国总决赛“青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》,国家级金奖。(负责人:欧日乐克;指导教师:秦志宏,斯劳格劳,刘瑞,石磊)

·2024年中国国际大学生创新大赛(2024)内蒙古赛区选拔赛“青年红色筑梦之旅”赛道《阿尔泰电子-复杂文字古籍文献数字化一站式解决方案》,自治区金奖。(负责人:欧日乐克;指导教师:秦志宏,斯劳格劳,刘瑞,石磊)

·2023年中国国际大学生创新大赛(2023)《鉴伪存真-多语种多模态可信AI鉴定助手》,国家级铜奖。(负责人:胡一帆;指导教师:刘瑞,秦志宏,石磊)

·2023年大学生数字技能应用大赛“互联网+”技能应用赛,国家级三等奖。(负责人:贾真琦;指导教师:刘瑞

·2023年大学生数字技能应用大赛“互联网+”技能应用赛,省级三等奖。(负责人:赵源;指导教师:刘瑞

·2023年大学生数字技能应用大赛“互联网+”技能应用赛,省级一等奖。(负责人:何树伟;指导教师:刘瑞)

-项目/论文指导

·2024年《基于主动健康大模型的多语种心理咨询机器人》,国家级大学生创新创业训练计划项目。(负责人:刘国伟;指导教师:刘瑞

·2024年《基于大语言模型的拟人化口语对话生成》,内蒙古大学2024年研究生科研创新项目(重点项目)。(负责人:胡一帆;指导教师:刘瑞

·2023年本科毕业设计《基于深度学习的对话语音情感强度预测研究》, 特优毕业论文。(学生:王丹祺;指导教师:刘瑞

七、研究生团队:

- 2022

·左昊麟(博士): ICASSP2024 1篇、IEEE-TAFFC(2023/2024)2篇

·张锦华(学硕):InterSpeech2023 1篇,Information Fusion(2024/2025)2篇,2024年国家奖学金

·刘彬(学硕):NCMMSC2024 1篇

·刘欢(学硕):CCL2024 1篇,2024年国家奖学金

·席嘉甜(专硕):InterSpeech2024 1篇,2024年国家奖学金

·马泽宁(专硕):InterSpeech2024 1篇

·梁凯麟(专硕):IEEE-TASLP(2025)1篇

- 2023

·胡一帆(博士):ACMMM2024 1篇,IEEE/ACM-TASLP(2024)1篇,AAAI2024 1篇,入选2024年度(首批)中国科协青年人才托举工程博士生专项计划(依托中国计算机学会)

·麻宇轩(博士):TBD

·高溥(学硕):TBD

·赵源(学硕):ICASSP2025 1篇

·王召阳(专硕):TBD

·鲜鹄鸿(专硕):TBD

·何树伟(专硕):AAAI20251篇,ICASSP2025 1篇

·戈绍丽(专硕):TBD

·贾真琦(专硕):ICASSP2025 1篇,Information Fusion(2025)1篇

·袁宏宇(专硕):Information Fusion(2025)1篇

- 2024

·张锦华(博士):InterSpeech2023 1篇,Information Fusion(2024/2025)2篇,2024年国家奖学金

·程文凯(学硕):TBD

·刘桧耀(学硕):TBD

·董瑞霖(学硕):TBD

·马涛(专硕):TBD

·赵英杰(专硕):TBD

·娄艺(专硕):TBD


招生信息:

[1]S2LAB (语音理解与生成研究组)

[2]推免生考研生招生【长期有效】


欢迎计算机、软件工程、数学等专业学生报考硕士、博士生,优秀者可推荐至新加坡国立大学(NUS)、香港中文大学(深圳)等多个合作单位访问学习或联合培养;

欢迎本科生参与课题组科研训练、论文发表和项目申报等,具有ACM、数学建模、国创等经验者优先。


欢迎优秀博士生申请博士后!!!

团队主页:

https://ttslr.github.io/

微信公众号



A qr code with a white square and a blue square with text Description automatically generated

(团队主页二维码)

(微信公众号二维码)

上一篇:高光来 教授

下一篇:王俊义教授

地址:内蒙古呼和浩特市大学西路235号内蒙古大学计算机学院

版权所有 © 内蒙古大学计算机学院

官方微信