孟雷

个人简介 团队简介 工作经历
主讲课程 学术职务 学术活动 获奖与荣誉 论著 专利 项目


招生信息


      MMRC团队现诚聘优秀人才


  • 博士后:长期招聘博士后,提供科研经费,薪资待遇优厚


  • 博士研究生:23级名额已满


  • 硕士研究生(软件工程专业):专硕2人


  • 硕士研究生(人工智能专业):学硕1人


  • 有意者请通过邮箱(lmeng@sdu.edu.cn)与孟老师联系,期待你的加入!



新闻


  • 2023312日,MMR团队成员刘天涵、齐壮论文“Cross-Training with Prototypical Distillation for Improving the Generalization of Federated Learning”被国际会议ICME 2023接收。。



  • 2022年12月20日,MMRC团队成员李象贤的论文"Cross-modal Learning Using Privileged Information for Long-tailed Image Classification"被Computational Visual Media (CVM) 2023录用,并推荐至CVMJ期刊。



  • 2022年8月22日,MMRC团队成员王雨晴论文"MetaCausal Feature Learning for Out-of-Distribution Generalization"被ECCV Workshops 2022录用。



  • 2022年8月8日,MMRC团队5篇论文被第二届人工智能会议(CICAI 2022)录用:


齐壮论文"Clustering-based curriculum construction forsample-balanced Federated learning"


刘进兴论文"Prompt Learning with Cross-Modal Feature Alignment for Visual Domain Adaptation"


孙玮琳论文"Sequential Fusion of Multi-view Video Frames for 3D Scene Generation"


吴杭论文"VAFA: a Visually-Aware Food Analysis System for Socially-Engaged Diet Management"


王雨晴论文"Causal lnference with Sample Balancing for Out-Of-Distribution Detection in Visual Classification"


  • 2022年7月29日,MMRC实验室与浪潮软件科技有限公司签署战略合作协议,就孟雷教授负责的“面向社会治理的数字孪生体系架构设计与关键技术研究”工作,进行战略合作。



  • 2022年5月7日,MMRC团队成员吴杭论文"A Visually-Aware Food Analysis System for Diet Management"被ICME 2022录用。


  • 2022年4月8日,孟雷教授获得山东省优秀青年科学基金(海外)项目资助。


  • 2022年4月6日,MMRC团队成员李靖宇论文"Unsupervised Contrastive Masking for Visual Haze Classification"被ACM ICMR 2022录用。


  • 2022年3月20日,MMRC团队在“悟道之巅”AI创新应用大赛决赛中获得优胜奖与最佳人气奖。


  • 2022年3月10日,MMRC团队博士马浩凯被2022年度腾讯犀牛鸟精英人才培养计划微信项目部录取。


  • 2021年12月13日,MMRC实验室入选济南市“新高校20条”引进创新团队扶持项目。



  • 2021年10月 MMRC团队成员李象贤、马浩凯论文被ACM MM 2021 workshop录用。


  • 2021年10月 孟雷教授获2021年度ACM济南分会新星奖。


  • 2021年6月 MMRC团队参加第十届全国社会媒体处理大会 (SMP2021),分别在SMP基于美团外卖图谱的菜品推荐和SMP基于美团外卖图谱的商家推荐两个类别比赛中分获第9名和第20名。


  • 2021年4月 MMRC团队参加ACM MM 2021 Watch and Buy: Multimodal Product Identification Challenge(阿里云天池淘宝直播商品识别大赛),进入决赛并获得第七名。


  • 2021年1月 MMRC团队参加第一届“计图”人工智能算法挑战赛-狗细分类组,获得第九名(triple-z 优胜奖)



个人简介


孟雷,齐鲁青年学者特聘教授、博导,2020年起就职于山东大学软件学院。2010年于山东大学获得工学学士学位,2015年于新加坡南洋理工大学(NTU)计算机科学与工程学院获得博士学位,导师Ah-Hwee Tan教授。2015年就职于Joint NTU-UBC Research Center of Excellence in Active Living for the Elderly (LILY),任Research Fellow,合作导师为南洋理工大学苗春燕教授和英属哥伦比亚大学Cyril Leung教授。2018年就职于NUS-Tsinghua-Southampton Centre for Extreme Search (NExT++),任Senior Research Fellow,合作导师为新加坡国立大学Tat-Seng Chua教授。


围绕互联网大数据驱动下的多媒体计算和数据挖掘等科学问题,长期从事多媒体知识挖掘与内容表征的机器学习理论与技术研究。组建多媒体挖掘推理与生成(MMRC)实验室,入选济南市“新高校20条”引进创新团队计划。面向健康大数据分析开展智慧家庭关键技术研究,自主构建千万级饮食健康大数据,研制适老化搜索引擎、非打扰风险研判、健康饮食管理等应用系统并得到推广应用;面向国家市域社会治理现代化战略需求,聚焦多尺度社会治理场景的数字化感知和智能化决策问题,在多媒体理解、跨模态推理、数字孪生等方向开展先导性创新研究。主要课题研究包括(1)基于自适应谐振原理(ART)的自组织聚类算法;(2)跨模态增强的视觉表征算法;(3)面向不平衡数据的深度学习方法;(4)结合跨模态推理的因果特征学习方法;(5)基于视频数据的3D场景生成方法。此外,孟雷教授还致力于多媒体计算理论与技术研究,(1) 面向城市大数据分析参与主体多、信息内容杂、媒体形式繁、数据价值密度低等问题,首先研究了面向细粒度多模态数据表示的知识关联挖掘方法;(2) 面向高维视觉数据的语义表示问题,进一步提出了跨模态视觉表征增强的神经网络架构;(3) 为解决垂直领域大规模训练集缺乏的问题,提出了多源协同的跨域表征泛化算法,解决了视觉数据语义表征学习和跨域协同训练等痛点问题,形成了“跨媒体协同的内容表征与理解”研究特色。


在Springer出版英文专著一部“Adaptive Resonance Theory in Social Media Data Clustering”,在TKDE、MM 等顶级期刊及会议发表学术论文50 余篇,Google Scholar 统计引用600 余次、单篇最高105 次、h 指数13、i10 指数16,授权国际、国家发明专利4 项。获山东省人工智能优秀青年奖,入选中国工程院举办的“第七届中美工程前沿研讨会”中方参会代表,获“中国工程院中国工程前沿杰出青年学者”荣誉,入选国家科技专家库、中国工程院 CAFOE专家库、山东省技术研发专家库及全国研究生教育评估监测专家库,山东省泰山学者青年专家,主持山东省优秀青年科学基金项目(海外),作为课题负责人承担“面向社会治理复杂系统的体系设计方法与应用研究”国家重点研发计划等项目。与腾讯、浪潮等企业合作研制了社会治理数字孪生、视觉感知饮食健康管理、适老化智慧家庭等平台系统并获得应用推广,取得了良好的经济社会效益。担任中科院一区期刊《Applied Soft Computing》副主编、青年计算机科技论坛(CCF YOCSEF)济南分论坛2023 届主席、山东省人工智能学会理事。担任国际学术会议CCCN'22 的大会主席、ECCSIT'22 的程序主席、ISCT'22的研讨会主席,多次担任CCF A 类学术会议AAAI、IJCAI、MM 的(高级)程序委员会委员。


团队简介 

多媒体挖掘、推理与生成(MMRC)实验室依托教育部数字媒体技术工程研究中心,围绕国家市域社会治理现代化战略需求,聚焦多尺度社会治理场景的数字化感知和智能化决策问题,在多媒体理解、跨模态推理、三维场景生成、数字孪生等方向开展先导性创新研究。现有成员13人,包括教授2人、副教授/研究员4人、工程师2人、博士研究生3人、硕士研究生10人。自团队创建先后主持国家重点研发计划2项、国家自然科学基金项目2项,山东省自然科学基金重点项目1项。

MMRC团队人员



教育背景

  • 2010830 – 2015211,博士, 计算机科学与工程专业,南洋理工大学,新加坡。

  • 200697 – 2010630日,本科, 计算机科学与技术专业,山东大学,中国。



工作经历


  • 2021年1月1日至今: 人工智能方向科研负责人, 山东省工业技术研究院,中国。


  • 2020年10月13日至今:教授, 山东大学,中国。


  • 2018年12月3日至2020年9月23日:高级研究员, 新加坡国立大学—清华—南安普顿下一代搜索技术联合研究中心(NExT++),新加坡国立大学,新加坡。


  • 2018年5月——2018年7月: 访问学者, UBTECH悉尼人工智能中心,悉尼大学,悉尼,澳大利亚。


  • 2015年1月15日—2018年12月1日: 研究员, 百合卓越联合研究中心(LILY),南洋理工大学,新加坡。


  • 2014年8月–2015年1月: 助理研究员, 新加坡国立大学—清华下一代搜索技术联合研究中心(NExT),新加坡国立大学,新加坡。 



主讲课程


  • 主讲教师–多媒体计算 (sd03032560), 第一学期, 2021/2022, 软件学院,山东大学,中国。


  • 主讲教师 – 机器学习课程设计 (sd03031560), 第二学期, 2020/2021, 软件学院,山东大学,中国。



学术职务


 学术协会任职


  • 数字媒体技术教育部工程研究中心 学术带头人,2020-至今


  • 《Applied Soft Computing》期刊(影响因子:8.263)副主编(Associate Editor),2021-至今


  • 济南市“新高校20条”引进创新团队负责人,2022-至今


  • 山东省人工智能学会 理事,2022-至今


  • 中国计算机学会多媒体专委会 执行委员,2022-至今


  • 中国计算机学会青年计算机科技论坛(CCF YOCSEF)济南分论坛 候任主席,2023-至今


 会议委员会会员


  • 高级/程序委员会委员 – AAAI International Conference on Artificial Intelligence (AAAI), 2021-2022.


  • 程序委员会委员 – International Joint Conference on Artificial Intelligence (IJCAI), 2021-2022.


  • 技术程序委员会委员 – ACM Multimedia Conference (MM), 2020-2021.


  • 技术程序委员会委员– IEEE International Conference on Computer and Communications (ICCC), 2018-2022.




学术活动


会议报告


  • 第七届中美工程前沿研讨会(中国工程院举办),2022 ,特邀报告


  • International Conference on Signal Processing and Computer Science,2022,大会报告


  • International Conference on Big Data Analysis and Computer Science,2022,大会报告


  • 山东人工智能大会,2022,特邀报告


  • 视觉与学习青年学者研讨会(VALSE),2021,分会场报告


重要职务


  • International Conference on Cloud Computing and Computer Network,2022,大会主席


  • Eurasian Conference on Computer Science and Information Technology,2022,程序主席


  • International Conference on Information Systems and Computing Technology,2022,研讨会主席


  • AAAI International Conference on Artificial Intelligence(CCF A类),2022,高级程序委员会成员


  • International Joint Conference on Artificial Intelligence(CCF A类),2022,程序委员会成员



获奖与荣誉


  • 山东大学齐鲁青年学者(第一层次),2020


  • ACM济南分会新星奖,2021


  • 中国工程院中国工程前沿杰出青年学者,2021


  • 山东省优秀青年科学基金项目(海外),2022


  • 山东省泰山学者青年专家,2022



论著


专著


  • Lei Meng, Ah-Hwee Tan, and Donald C. Wunsch II, “Adaptive Resonance Theory in Social Media Data Clustering – Roles, Methodologies, and Applications,” Advanced Information and Knowledge Processing Series, SpringerNature, May 29, 2019. ISBN:978-3-030-02985-2.



代表性期刊论文 (*通讯作者;#共同一作)



  1. Pei Dong, Lei Wu*, Lei Meng*, Xiangxu Meng, “HR-PrGAN: High-Resolution Story Visualization with Progressive Generative Adversarial Networks,” Information Sciences, 614:548-562,2022.(PDF文件


  2. Wenya Guo, Ying Zhang*, Xiangrui Cai, Lei Meng, Jufeng Yang, Xiaojie Yuan, “LD-MAN: Layout-Driven Multimodal Attention Network for Online News Sentiment Recognition,” IEEE Transactions on Multimedia, 23:1785-1798, 2020.(PDF文件


  3. Lei Meng*, Ah-Hwee Tan, Chunyan Miao, “Salience-Aware Adaptive Resonance Theory for Large-Scale Sparse Data Clustering,” Neural Networks, vol. 120, pp. 143-157, Sept. 21, 2019.(PDF文件


  4. Ah-Hwee Tan*, Budhitama Subagdja, Di Wang, Lei Meng, “Self-Organizing Neural Networks for Universal Learning and Multimodal Memory Encoding,” Neural Networks, vol. 120, pp. 58-73, Sept. 2, 2019.(PDF文件


  5. Lei Meng*, Chunyan Miao, and Cyril Leung, “Towards Online and Personalized Daily Activity Recognition, Habit Modeling, and Anomaly Detection for the Solitary Elderly Through Unobtrusive Sensing,” Multimedia Tools and Applications, vol. 76, no. 8, pp. 10779-10799, 2017.(PDF文件


  6. Lei Meng, Ah-Hwee Tan and Donald C. Wunsch II, “Adaptive Scaling of Cluster Boundaries for Large-Scale Social Media Data Clustering,” IEEE Transactions on Neural Networks and Learning Systems (TNNLS), vol. 27, no. 12, pp. 2656-2669, Dec. 1, 2016.(PDF文件


  7. Lei Meng, Ah-Hwee Tan and Dong Xu, Semi-Supervised Heterogeneous Fusion for Multimedia Data Co-clustering, IEEE Transactions on Knowledge and Data Engineering (TKDE), vol. 26, no. 9, pp. 2293-2306, 2014.(PDF文件



代表性会议论文


  1. Yuqing Wang, Xiangxian Li, Zhuang Qi, Jingyu Li, Xuelong Li, Xiangxu Meng, Lei Meng*, “MetaCausal Feature Learning for Out-of-Distribution Generalization”,European Conference on Computer Vision, pp. 530-545, Tel Aviv, Israel, October 23–27, 2022.(PDF文件)


  2. Jinxing Liu , Junjin Xiao , Haokai Ma , Xiangxian Li , Zhuang Qi , Xiangxu Meng , and Lei Meng* , “Prompt Learning with Cross-Modal Feature Alignment for Visual Domain Adaptation”,CAAI International Conference on Artificial Intelligence(CAAI) ,pp 416-428, Beijing, China, August 27–28, 2022.(PDF文件)


  3. Zhuang Qi,Yuqing Wang, Zitan Chen, Ran Wang, Xiangxu Meng, and Lei Meng*, " Clustering-based curriculum construction forsample-balanced Federated learning," CAAI International Conference on Artificial Intelligence(CAAI) ,pp 155-166, Beijing, China, August 27–28, 2022.(PDF文件)


  4. Hang Wu, Xi Chen, Xuelong Li, Haokai Ma, Yuze Zheng, Xiangxian Li, Xiangxu Meng, Lei Meng*. “VAFA: a Visually-Aware Food Analysis System for Socially-Engaged Diet Management”, CAAI International Conference on Artificial Intelligence(CAAI) ,pp 554-558, Beijing, China, August 27–28, 2022.(PDF文件)


  5. Yuqing Wang, Xiangxian Li, Haokai Ma, Zhuang Qi, Xiangxu Meng, Lei Meng*, “Causal lnference with Sample Balancing for Out-Of-Distribution Detection in Visual Classification”, CAAI International Conference on Artificial Intelligence(CAAI) ,pp 572-583, Beijing, China, August 27–28, 2022.PDF文件


  6. Weilin Sun, Xiangxian Li, Manyi Li, Yuqing Wang, Yuze Zheng, Xiangxu Meng, and Lei Meng*,“Sequential Fusion of Multi-view Video Frames for 3D Scene Generation,”  CAAI International Conference on Artificial Intelligence(CAAI) ,pp 597-608, Beijing, China, August 27–28, 2022.PDF文件


  7. Hang Wu, Xi Chen, Xuelong Li, Haokai Ma, Yuze Zheng, Xiangxian Li, Xiangxu Meng, Lei Meng*, “A Visually-Aware Food Analysis System for Diet Management,” IEEE International Conference on Multimedia & Expo (ICME’22), Taipei, Taiwan, 2022-7-18至2022-7-22.(PDF文件


  8. Jingyu Li, Haokai Ma, Xiangxian Li, Zhuang Qi, Lei Meng*, Xiangxu Meng, “Unsupervised Contrastive Masking for Visual Haze Classification,” ACM International Conference on Multimedia Retrieval (ICMR’22),pp 426-434,Newark NJ USA June 27-30, 2022(PDF文件)


  9. Pei Dong, Lei Wu*, Xiangxu Meng, Lei Meng, “Disentangled Representations and Hierarchical Refinement of Multi-Granularity Features for Text-to-Image Synthesis,” ACM International Conference on Multimedia Retrieval (ICMR’22),pp 268-276,Newark NJ USA June 27-30, 2022.(PDF文件)


  10. Xiang Li, Lei Wu, Xu Chen, Lei Meng*, Xiangxu Meng, “DSE-NET: Artistic Font Image Synthesis Via Disentangled Style Encoding,” IEEE International Conference on Multimedia & Expo (ICME’22), Taipei, Taiwan, 2022-7-18至2022-7-22.(PDF文件)


  11. Xiangxian Li, Haokai Ma, Lei Meng*, Xiangxu Meng, “Comparative Study of Adversarial Training Methods for Long-tailed Classification,” International Workshop on Adversarial Learning for Multimedia (ADVM ’21), Chengdu, China, 2021-10-20至2021-10-24.(PDF文件


  12. Haokai Ma, Xiangxian Li, Lei Meng*, Xiangxu Meng, “Comparative Study of Adversarial Training Methods for Cold-Start Recommendation,” International Workshop on Adversarial Learning for Multimedia (ADVM ’21), Chengdu, China, 2021-10-20至2021-10-24.(PDF文件


  13. Xu Chen, Lei Wu*, Minggang He, Lei Meng*, Xiangxu Meng, “MLFont: Few-Shot Chinese Font Generation via Deep Meta-Learning,” ACM International Conference on Multimedia Retrieval(ICMR), Taipei, Taiwan, 2021-11-16至2021-11-19.(PDF文件


  14. Lei Meng, Fuli Feng, Xiangnan He, Xiaoyan Gao, Tat-Seng Chua, “Heterogeneous Fusion of Semantic and Collaborative Information for Visually-Aware Food Recommendation,” ACM International Conference on Multimedia (MM), pp. 3460-3468, Oct. 15, 2020.PDF文件


  15. Lei Wu, Xi Chen, Lei Meng*, Xiangxu Meng, “Multitask Adversarial Learning for Chinese Font Style Transfer,” International Joint Conference on Neural Networks (IJCNN), accepted, 2020.(PDF文件


  16. Chuang Lin#, Sicheng Zhao#, Lei Meng*, Tat-Seng Chua, “Multi-Source Domain Adaptation for Visual Sentiment Classification,” AAAI Conference on Artificial Intelligence (AAAI), vol. 34, no. 3, pp. 2661-2668, Feb. 12, 2020.(PDF文件


  17. Lei Meng, Long Chen, Xun Yang, Dacheng Tao, Hanwang Zhang, Chunyan Miao, Tat-Seng Chua, “Learning Using Privileged Information for Food Recognition,” ACM International Conference on Multimedia (MM), pp. 557-565, 2019.(PDF文件


  18. Lei Meng, Ah-Hwee Tan, Cyril Leung, Liqiang Nie, Tat-Seng Chua, and Chunyan Miao, “Online Multimodal Co-indexing and Retrieval of Weakly Labeled Web Image Collections,” ACM International Conference on Multimedia Retrieval (ICMR), pp. 219-226, 2015.(PDF文件


  19. Lei Meng and Ah-Hwee Tan, “Community Discovery in Social Networks via Heterogeneous Link Association and Fusion,” SIAM International Conference on Data Mining (SDM), pp. 803-811, 2014.(PDF文件


  20. Lei Meng, Ah-Hwee Tan and Donald C. Wunsch II, “Vigilance Adaptation in Adaptive Resonance Theory,” International Joint Conference on Neural Networks, pp. 1-7, 2013.(PDF文件


  21. Lei Meng and Ah-Hwee Tan, “Semi-supervised Hierarchical Clustering for Personalized Web Image Organization,” International Joint Conference on Neural Networks, pp. 252-258, 2012.(PDF文件



专利


  • 马浩凯,谢若冰,孟雷,陈鑫,张旭,林乐宇,“信息推荐方法、装置、电子设备、存储介质及程序产品” 申请号:202211652477.9, 2022.12.21.


  • 孟雷,李象贤,郑裕泽,马浩凯,齐壮,孟祥旭,“基于跨模态语义表征学习和融合的图像分类方法及系统” 申请号: 202210558899.3, 2022.5.21.


  • 孟雷,马浩凯,齐壮,李象贤,郑裕泽,孟祥旭,“基于跨模态语义推理和融合的视觉感知推荐方法及系统” 申请号: 202210558907.4, 2022.5.21.


  • 武蕾,高琳,孟雷,孟祥旭,“基于深度学习的从布局到场景图像的自动生成方法及系统” 申请号: 202210372997.8, 2022.4.11.


  • 武蕾,陈旭,孟雷,孟祥旭,“一种基于深度元学习的汉字字库生成方法及系统” 申请号: 202110297468.1, 2021.3.19.


  • 武蕾,董沛,孟雷,孟祥旭,“基于深度学习的剧本到故事板序列自动生成方法及系统” 申请号: 202110297471.3, 2021.3.19.


  • 武蕾,孟雷,孟祥旭,陈曦,“基于多任务对抗学习网络的汉字风格迁移方法及系统”专利号:ZL 2020 1 0333081.2,专利申请日:2020年4月24日,授权公告日:2022年4月1日,授权公告号:CN 11153246 B.


  • Lei Meng, Zhaoyan Ming, Tat-Seng Chua, “Food Recognition Enhanced Using Privileged Information” ILO Ref: 2019-243-01, SG Non-Provisional Application No. 10201907991T, Singapore, 29 Aug. 2019.


  • Lei Meng, Fuli Feng, Xiangnan He, Tat-Seng Chua, “A Visually-aware Food Recommender based on Dual-gating Multi-task Learning” ILO Ref: 2020-286-01, SG Non-Provisional Application No. 10202009048R, Singapore, 15 Sep. 2020.


    [回到首页]



项目


  • 2022年4月 –2025年3月 :

    项目: “跨模态增强的多媒体计算”,山东省优秀青年科学基金项目(海外)资助计划,山东省科技厅 (时间: 2022.04–2025.03,资金总额: 60万元)。

    职责: 团队负责人。


  • 2022年1月 –2024年12月 :

    项目: “面向社会治理的数字孪生体系架构设计与关键技术研究”,济南市科技局“新高校20条”资助项目引进创新团队计划,(时间: 2022.1–2024.12,资金总额: 80万人民币)。

    职责: 团队负责人。


  • 2022年1月 –2023年12月 :

    项目: “多媒体计算理论与实践”, 山东大学精品教材建设项目,(时间: 2022.01–2023.12,资金总额: 4万元)。

    职责: 项目负责人。


  • 2021年12月 –2024年9月 :

    项目: “面向社会治理复杂系统的体系设计方法与应用研究”, 国家重点研发计划“社会治理与智慧社会科技支撑”重点专项,(时间: 2021.12–2024.9,资金总额: 380万人民币)。

    职责: 课题负责人。


  • 2021年10月 –2022年12月 :

    项目: “基于跨模态内容对齐的多模态视频分类”, CCF-腾讯犀牛鸟创意基金,(时间: 2021.10–2022.12,资金总额: 5万人民币)。

    职责: 项目负责人。


  • 2021年1月 –2021年12月 :

    项目: “特权信息赋能的深度学习及其可解释性研究”,山东省软件工程重点实验室科技创新基地专项拨款管理,(时间: 2021.1–2021.12,资金总额: 20万人民币)。

    职责: 项目负责人。


  • 2021年1月 –2023年12月 :

    项目: “面向医养健康的个性化饮食推荐方法研究”,国家自然科学基金委员会 (NSFC) 拨款管理,(时间: 2021.1–2023.12, 资金总额: 30万人民币)。

    职责: 项目负责人。


  • [回到页首]


地址:山东省济南市舜华路1500号  山东大学软件园校区

邮编:250101