余天予

余天予

清华大学博士生

清华大学

简介

我是清华大学计算机技术专业的博士研究生,师从刘知远教授。本科毕业于北京航空航天大学软件工程专业,师从刘偲教授与葛宁教授;硕士阶段在清华大学计算机技术专业就读,导师为郑海涛教授。目前的研究方向主要围绕高效多模态大模型以及大模型后训练。作为 MiniCPM-V/o 系列多模态模型的核心贡献者,我主要负责该系列模型的后训练工作。

部分论文

Deep Pre-Alignment for VLMs
通过模块化视觉编码器替换实现更深层的多模态预对齐。
MiniCPM-o 4.5: Towards Real-Time Full-Duplex Omni-Modal Interaction
基于统一流式框架实现实时全双工全模态交互。
MiniCPM-V 4.5: Cooking Efficient MLLMs via Architecture, Data, and Training Recipe
覆盖架构、数据与训练策略的高效多模态大模型构建方案。
Efficient GPT-4V Level Multimodal Large Language Model for Deployment on Edge Devices
面向端侧部署的高效 GPT-4V 级多模态大模型。
RLAIF-V: Open-Source AI Feedback Leads to Super GPT-4V Trustworthiness
用于可信多模态对齐的开源反馈数据。
RLHF-V: Towards Trustworthy MLLMs via Behavior Alignment from Fine-grained Correctional Human Feedback
用细粒度纠错式人类反馈减少多模态大模型幻觉。
Cross-Modal Omni Interaction Modeling for Phrase Grounding
用于短语定位的跨模态交互建模。

荣誉奖项

2024 英特尔中国学术成就奖
2021 北京市优秀毕业生
2020 北京航空航天大学“沈元奖章”提名奖(本科生最高荣誉,10/3800+)
2019 本科生国家奖学金(前 1%)
2018 本科生国家奖学金(前 1%)