网大论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

https://www.chinaedugrp.com/MIT/edm.html
查看: 1744|回复: 2

北大浙大本科生提出AI新算法:ICLR领域主席赞不绝口 [复制链接]

Rank: 9Rank: 9Rank: 9

精华
0
积分
1547
发表于 2019-3-3 13:03:17 |显示全部楼层
本帖最后由 White_black 于 2019-3-3 13:07 编辑

公众号稍微有点夸大,看看就行。。
https://mp.weixin.qq.com/s/KyhR2BKQR3VtzSeIjYkKxw

两位学霸本科生,一位来自北大,一位来自浙大。

他们在实习期间,研究出一种新的AI算法,相关论文已经被人工智能顶级会议ICLR 2019收录,并被领域主席赞不绝口,完全确定建议接收。

在这篇论文中,他们公布了一个名为AdaBound的神经网络优化算法,简单地说,这个算法训练速度比肩Adam,性能媲美SGD。


这个算法适用于CV、NLP领域,可以用来开发解决各种流行任务的深度学习模型。而且AdaBound对超参数不是很敏感,省去了大量调参的时间。

两位本科生作为共同一作的这篇论文,也在Reddit上引发了热赞,作者本人也在这个论坛上展开了在线的答疑交流。

AdaBound已经开源,还放出了Demo。

学霸本科生
这项研究的共同一作,是两位学霸本科生。他们在滴滴实习的时候一起完成了这项研究。

一位名叫骆梁宸,就读于北京大学地球与空间科学学院,今年大四。

另一位名叫熊远昊,就读于浙江大学信电学院,今年也是大四。

骆梁宸


这名学霸今年大四,已经有四篇一作论文被人工智能顶级学术会议收录,其中1篇EMNLP 2018、2篇AAAI 2019,还有我们今天介绍的这篇,发表于ICLR 2019。

他高中毕业于北京师范大学附属实验中学,连续三年获得全国青少年信息学奥林匹克竞赛一等奖。

在2015年到2018年期间,是北大PKU Helper团队的安卓开发工程师和负责人。

2016年春季,担任数据结构与算法课程助教,还带着实验室同学们开发了一个回合制的游戏平台坦克大战。

2016年7月到2017年6月,担任UniBike技术开发VP,负责软件开发。

2017年7月到2018年5月,在微软亚洲研究院实习,做研究助理。在这段研究经历中,发表了两篇被AAAI收录的论文。

2018年7月至今,在滴滴人工智能实验室做研究助理,本篇文章介绍的研究成果,就是这一工作中的成果。

目前,他也在北大语言计算与机器学习组实习,导师为研究员孙栩,也是这篇论文的作者之一。

熊远昊


他现在是浙江大学信电学院信息工程专业的大四学生,同样是学霸级人物,三年综合成绩排名年级第一。

在发表这篇ICLR论文之前,他还以第二作者身份在通信领域的权威期刊上发表过论文1篇。



此外,论文还有一位作者,是南加州大学的副教授Yan Liu。

如果,你对他们的研究感兴趣,请收好下面的传送门:

论文:
ADAPTIVE GRADIENT METHODS WITH DYNAMIC BOUND OF LEARNING RATE
https://openreview.net/pdf?id=Bkg3g2R9FX

论文评审页面:
https://openreview.net/forum?id=Bkg3g2R9FX

GitHub地址:
https://github.com/Luolc/AdaBound

Reddit讨论地址:
https://www.reddit.com/r/Machine ... _trains_as_fast_as/



— 完 —

Rank: 13Rank: 13Rank: 13Rank: 13

精华
0
积分
9812
发表于 2019-3-3 13:11:19 |显示全部楼层

使用道具 举报

Rank: 9Rank: 9Rank: 9

精华
0
积分
1662
发表于 2019-3-3 14:07:42 |显示全部楼层
中国科技是有希望的,人才多啊。。国家会走向强盛尽管扶贫不好办。

使用道具 举报

Rank: 4

精华
0
积分
387
发表于 2019-3-3 19:10:03 |显示全部楼层
bfyh 发表于 2019-3-3 14:07
中国科技是有希望的,人才多啊。。国家会走向强盛尽管扶贫不好办。

14亿中国人咋就出不了一个类似犹太人种的冯.诺依曼那样集理论数学家、应用数学家、应用物理学家、化学家、经济学家于一身的交叉综合学科发展的天才呢?

使用道具 举报

Rank: 11Rank: 11Rank: 11Rank: 11

精华
0
积分
2896
发表于 2019-3-6 07:49:33 来自手机 |显示全部楼层
央视 发表于 2019-3-3 19:10
14亿中国人咋就出不了一个类似犹太人种的冯.诺依曼那样集理论数学家、应用数学家、应用物理学家、化学家 ...

等着吧,会有的。

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

Archiver|手机版|mba报考条件|Conference Centre|netbig.com|大学排名|国际学校|欧洲移民|股票行情|网大论坛 ( 粤ICP备08125616号 )

GMT+8, 2019-10-14 23:33

Powered by Discuz! X2

© 2001-2011 Comsenz Inc.

回顶部