雷竞技-研究曾超越谷歌团队!26岁“轮椅博士生”:我只想努力做好自己—新闻—科学网

本年26岁的邵镇炜,体重唯一25千克。他从小得了“进行性脊肌萎缩”,双手几近只有年夜拇指和食指能动,毕生与轮椅为伴。

邵镇炜

?

邵镇炜并没有就此向命运屈就。2021年9月,他以计较机手艺与科学专业第一位的成就取得推免资历,保送至杭州电子科技年夜学(以下简称杭电)攻读博士研究生,研究标的目的为多模态数据处置和人工智能手艺;2023年6月,他的研究功效颁发在计较机视觉范畴国际顶级学术会议CVPR 2023,被认为是国内多模态年夜模子范畴最早入局者之一。

“本年年头做了一个轻量级多模态年夜模子的系列,相干论文还在审稿阶段。”近日,邵镇炜在接管《中国科学报》采访时暗示,“我比来在摸索多模态年夜模子的高效计较相干的手艺。现在年夜模子的手艺迭代很是快,我得抓紧时候做出新的功效才可能收成新的成就。”

曾“超出”谷歌旗下的多模态年夜模子Flamingo

2022年,邵镇炜最先研究多模态年夜模子。那时,年夜模子研究还没有此刻这么火热,和多模态信息(文本、图片多种情势的组合数据)理解相干的年夜模子研究则更少。邵镇炜地点课题组那时就预感了多模态年夜模子手艺的前景,并展开了相干摸索。

邵镇炜说:“我们走的是模子轻量化线路。不但可以下降计较本钱,还能让年夜模子的利用场景加倍丰硕。但轻量化其实不是一件轻易的事。由于要缩小参数目,极可能会致使模子能力也就是智能程度的降落。”

为领会决手艺上的难点,邵镇炜常常在电脑前一坐就是十多个小时,啃论文、查资料,测验考试分歧的手艺方案。在常人看来简单的敲击键盘动作,对邵镇炜来讲其实不轻松。他只有年夜拇指和食指相对矫捷,而且每打几十个字,就要停下来歇息一会儿。虽然如斯,他仍是对峙天天工作十个小时以上。

“那时雷竞技,我已感觉这个课题可能要做不下去了,但邵镇炜说再给他一两周的时候,他想测验考试一个新的方式。成果成功了。”邵镇炜的导师、杭电计较机学院传授余宙告知《中国科学报》,“我们这项研究功效终究在CVPR 2023上颁发,遭到了全球同业的存眷。”

邵镇炜是这篇论文的第一作者,他提出的Prophet方式为GPT等年夜范围说话模子装上“眼睛”。

论文中的方式框架图

?

他注释道:“我们的研究提出了名为Prophet的多模态年夜模子框架。经由过程在年夜型说话模子上游引入一个可进修的、使命相干的视觉问答小模子,来更好地激起年夜模子的潜力。好比可以发给系同一张杯子的图片,然后问系统这个图片里的杯子是甚么材质、甚么品牌,系统城市作出合适常识的回覆。”

那时,在基在常识的视觉问答使命的评测数据集上,邵镇炜提出的Prophet方式的正确率超出了谷歌Deepmind旗下的年夜模子Flamingo,同时该方式所需的计较资本也年夜年夜削减。

公然的视觉问答数据集的评测榜单

?

现在,邵镇炜继续在多模态年夜模子研究范畴深耕,但愿有新的收成。

关上一扇门打开一扇窗

1998年,邵镇炜诞生在杭州市滨江区。

在邵镇炜1岁时,怙恃发现本来可以踮脚抓工具的儿子居然站不稳了。他们带着孩子四周求医,但环境并没有好转。邵镇炜被确诊为“进行性脊肌萎缩症”,肌肉萎缩四肢无力,肢体一级残疾,没有糊口自理能力。

怙恃没有就此抛却对儿子的培育。他们相信,上天在关上一扇门的同时,一定会打开一扇窗。年幼的邵镇炜固然不克不及像同龄孩子那样四周跑跳,可是他对峙和同龄的孩子一路上学接管教育。他发现进修可让本身健忘身体的缺点。

因进修成就优良,邵镇炜被保送进入杭州市长河高级中学读高中,并在高一前的阿谁暑假自学了微积分的相干常识。上中学以来,邵镇炜发现本身很喜好物理。2017年高考,邵镇炜考了644分,以第一位的成就被杭电计较机专业登科。

这里还一个小插曲。因高考几分之差,邵镇炜与浙江年夜学当面错过。但在杭电的肄业进程中,他发现杭电计较机学院或许是最好的放置。黉舍不但给他一间零丁的睡房,还放置在一楼,便利妈妈陪读,并安装了斜坡一向通到他睡房门口。

邵镇炜告知《中国科学报》:“在教导员教员的号令下,杭电的同窗们自觉地为我组建了一支自愿者团队。他们每学期城市提早统计好我的课表,接力协助我上下楼梯,供给力所能和的帮忙。这让我很是打动。”

一路走来,导师余宙是邵镇炜科研路上的主要带路人。

“本科时代,我参不雅了余教员的尝试室,并随着余教员持续上了3年的课程。后来在申请保研的时辰,余教员还保举我去浙江年夜学尝尝,并给了我一颗定心丸——‘假如浙江年夜学进不了,我们尝试室永久接待你’。”邵镇炜说,“假如去浙江年夜学读研,由于科研标的目的分歧,可能我就没有机遇接触前沿的人工智能,也不成能投入年夜模子的研究。现实在我第一次见到余教员的时辰,命运就已作出了放置。”

“我不是中国版霍金”

本科时代,邵镇炜持续6次取得黉舍一等奖学金、两次浙江省当局奖学金、一次国度奖学金,并在各项角逐中屡次获得成就,争夺到保送的机遇。2023年,邵镇炜还担负了杭州第四届亚残运会火把手。

邵镇炜担负火把手

?

在杭电计较机学院,邵镇炜是良多同窗口中的“年夜神”。在进入杭电前,邵镇炜就取得了良多来自社会的存眷和赞成,乃至被冠以“中国版霍金”“少年版霍金”等称号。对此,邵镇炜明白说:“我不是中国版霍金,我只想尽力做好本身。”

在采访中,邵镇炜向《中国科学报》介绍了良多跟计较机、年夜模子相干的常识,并耐烦给记者做了相干的常识科普。他和所有计较机手艺的研究人员一样,但愿本身的研究可以做出更多领先的手艺和功效,但愿这些手艺和功效可以帮忙更多人。

2023年12月,邵镇炜负责的“望问医聊——基在医疗年夜模子的数字家庭大夫”项目,获中国国际年夜学生立异年夜赛(2023)金奖。他从本身提出的Prophet方式动身,但愿可以或许操纵好年夜模子手艺,助力聪明医疗和健康糊口走进千家万户。

邵镇炜(前排中心)与教员同窗们

?

再过两年,邵镇炜将迎来博士卒业找工作。他但愿可以继续留校做喜好的科研,但他也坦言本身距离留校的要求还差距。他需要继续尽力,才更有能力和实力去讲述一个完全的科研故事。

*本文图片均由受访者供给

特殊声明:本文转载仅仅是出在传布信息的需要,其实不意味着代表本网站不雅点或证实其内容的真实性;如其他媒体、网站或小我从本网站转载利用,须保存本网站注明的“来历”,并自大版权等法令责任;作者假如不但愿被转载或联系转载稿费等事宜,请与我们联系。

上一篇:雷竞技-科技进步特等奖!一次充电跑1000km正在实现—新闻—科学网 下一篇:雷竞技-肠道菌群里的核心成员被找到  有望为精准医学带来颠覆性变革—新闻—科学网