现在AI大热,列几个AI强校。

G
Gaoxin1982
楼主 (北美华人网)
想简单做个coder就无所谓了。
https://csrankings.org/#/fromyear/2020/toyear/2022/index?ai&vision&mlmining&nlp&inforet&us
CMU UIUC Cornell UCLA UMD Stanford UCSD MIchigan Rutgers UCB


B
Beautyfulday


没有GA Tech and UW?
B
Beautyfulday
MIT都那么靠后啊
w
wudadan
回复 1楼Gaoxin1982的帖子
大学里头的AI都是瞎扯 真正的AI需要大量资源、硬件和人力 学校那点儿科研经费根本够不上
G
Gaoxin1982
回复 1楼Gaoxin1982的帖子
大学里头的AI都是瞎扯 真正的AI需要大量资源、硬件和人力 学校那点儿科研经费根本够不上

wudadan 发表于 2023-02-10 13:52

哈哈哈,你强,大学的研究都是瞎扯。简单的说一句,这次的chatGPT主要工作是基于university of Toronto 的research. 感叹一下,瞎喷是一件多么简单的事情啊
w
wudadan
哈哈哈,你强,大学的研究都是瞎扯。简单的说一句,这次的chatGPT主要工作是基于university of Toronto 的research. 感叹一下,瞎喷是一件多么简单的事情啊
Gaoxin1982 发表于 2023-02-10 13:56

你可拉倒吧 UT自己都不好意思这么吹
G
Gaoxin1982
去读Geoffrey Hinton lab一些transformation 的papers 吧,再来发言。
d
dana466
AI 是 computer science 下面的还是 engineering 下面的?
b
babyduck
umass就被华丽丽的忽视啦?
M
MountainDu
你可拉倒吧 UT自己都不好意思这么吹

wudadan 发表于 2023-02-10 14:00

UT is really strong
嘻嘻嘻888888
Mark
p
pevcmao
想简单做个coder就无所谓了。
https://csrankings.org/#/fromyear/2020/toyear/2022/index?ai&vision&mlmining&nlp&inforet&us
CMU UIUC Cornell UCLA UMD Stanford UCSD MIchigan Rutgers UCB



Gaoxin1982 发表于 2023-02-10 13:44

Rutgers这么牛了?
y
yaya12345
想简单做个coder就无所谓了。
https://csrankings.org/#/fromyear/2020/toyear/2022/index?ai&vision&mlmining&nlp&inforet&us
CMU UIUC Cornell UCLA UMD Stanford UCSD MIchigan Rutgers UCB



Gaoxin1982 发表于 2023-02-10 13:44

MIT 居然都排不上号
h
hahanima
为什么老有人说真正的AI需要大量资源?难道重要的想法不能小规模验证吗?就像quicksort算法可以对很大的数据排序,但是设计验证这个算法只需要很少的资源啊!什么都靠堆资源这算哪门子研究呢?
f
fasionfans
Mark…
s
snowdrift
为什么老有人说真正的AI需要大量资源?难道重要的想法不能小规模验证吗?就像quicksort算法可以对很大的数据排序,但是设计验证这个算法只需要很少的资源啊!什么都靠堆资源这算哪门子研究呢?
hahanima 发表于 2023-02-10 16:06

楼上说的资源主要是硬件资源,一个模型几百亿个input,要通过大量计算训练,计算都是在硬件上面做啊
b
badgerbadger
说到AI能没有UMass?
3
3906
回复 1楼Gaoxin1982的帖子
https://www.usnews.com/best-graduate-schools/top-science-schools/computer-science-rankings?_sort=rank-asc
佐治亚理工惊艳了
o
orientexpress
现在人工智能取得的成就离不开下面两大突破: Deep Learning - University of Toronto Reinforcement learning - University of Alberta 突破也不是一夜之间发生的。都是一些学者在人工智能低迷的1,20年里长期坚持的结果
G
Gaoxin1982
UT is really strong
MountainDu 发表于 2023-02-10 14:40

同行握手。openAI的Co-founder and chief scientist 是Hinton的学生,UToronto 毕业的。
g
goodjob
回复 16楼snowdrift的帖子
Deep learning 最新的模型BERT和GPT基本上都是大公司开发的,Large Language Models一般现在也就公司能做好。公司在语料规模、硬件和算法上确实比大学强很多。早期的算法当然大学提出的多,现在的趋势是AI的大模型大多数是公司做的好。斯坦福大学AI教授Christopher Manning 就说过大学现在越来越做不出东西了。
幽幽寸草心
哈哈哈,你强,大学的研究都是瞎扯。简单的说一句,这次的chatGPT主要工作是基于university of Toronto 的research. 感叹一下,瞎喷是一件多么简单的事情啊
Gaoxin1982 发表于 2023-02-10 13:56

华人上的气氛不就是faculty做的东西都是垃圾云云。 但是神奇的是还是拼命往好学校送。 那么了不起还找他们口中的垃圾来学
幽幽寸草心
现在人工智能取得的成就离不开下面两大突破: Deep Learning - University of Toronto Reinforcement learning - University of Alberta 突破也不是一夜之间发生的。都是一些学者在人工智能低迷的1,20年里长期坚持的结果
orientexpress 发表于 2023-02-10 16:51

可惜现在人们都不appreciate那些坚守research岗位1,20年的人了
h
huaren_2018
关键是应用AI的几个人。写AI的几个人
f
facet
MIT都那么靠后啊
Beautyfulday 发表于 2023-02-10 13:50

MIT 可能更 hardware 一点,比如机器人 但是 MIT 以前的 media lab 是真牛,智能体的先驱,不过实验室貌似解散了?
f
facet
为什么老有人说真正的AI需要大量资源?难道重要的想法不能小规模验证吗?就像quicksort算法可以对很大的数据排序,但是设计验证这个算法只需要很少的资源啊!什么都靠堆资源这算哪门子研究呢?
hahanima 发表于 2023-02-10 16:06

ChatGPT 这个量级的模型,训练成本很高,光时间就要一两个月,期间不能停,出了错也得咬着牙训练完,试错成本很高,这期间占用的计算机资源,光是 GPU 就一万多片
G
Gaoxin1982
回复 26楼的帖子
这么说吧,一个好的外科医生必须得有一把好的手术刀,两者是相辅相成的关系。
c
chikorita
回复 16楼snowdrift的帖子
Deep learning 最新的模型BERT和GPT基本上都是大公司开发的,Large Language Models一般现在也就公司能做好。公司在语料规模、硬件和算法上确实比大学强很多。早期的算法当然大学提出的多,现在的趋势是AI的大模型大多数是公司做的好。斯坦福大学AI教授Christopher Manning 就说过大学现在越来越做不出东西了。
goodjob 发表于 2023-02-10 17:53

没必要争这个,楼主列这些学校无非是帮高中生选校,公司雇的还是这些学校毕业的学生,而不是到大街上拉一个自己训练。Bell labs鼎盛时,雇的scientists也都是已经有Phd的。
o
orientexpress
Andrej Karpathy - UofToronto本科,UBC硕士,斯坦福博士,OpenAI的创始员工之一,现在重回OpenAI Deep Mind很多UofAlberta出来的
p
pevcmao
可惜现在人们都不appreciate那些坚守research岗位1,20年的人了
幽幽寸草心 发表于 2023-02-10 18:05

还appreciate?基本尊重都没有 经常有贴说 我原来同学学霸 都快40了才在UC系列tenure。而我,早已年薪超过硅谷贫困线多少多少,之类的
G
Gaoxin1982
回复 29楼orientexpress的帖子
OpenAI cofounder and chief scientist Ilya
https://en.m.wikipedia.org/wiki/Ilya_Sutskever
n
newfrontier


没有GA Tech and UW?
Beautyfulday 发表于 2023-02-10 13:49

MIT不也没有
n
newfrontier
没必要争这个,楼主列这些学校无非是帮高中生选校,公司雇的还是这些学校毕业的学生,而不是到大街上拉一个自己训练。Bell labs鼎盛时,雇的scientists也都是已经有Phd的。
chikorita 发表于 2023-02-10 19:45

高中生选校别用这个,这个排名是按学校文章数量排的,有些学校是有很多人不教课专门发文章的,和学校本科生没什么关系。
s
seven77seven
微软今天刚刚裁了一整个AI部门……
h
hhmouse
你可拉倒吧 UT自己都不好意思这么吹

wudadan 发表于 2023-02-10 14:00

Toronto有个AI的牛人。从CMU去加拿大的。
单身男
回复 1楼Gaoxin1982的帖子
CMU一直AI很牛是肯定的 DARPA15年前搞的自动驾驶比赛,CMU的团队差一点就得冠军了 最后被stanford的sebastian thrun追上,对就是人工智能的神圣Sebastian Thrun
h
hello111
UMD那么牛?
m
markreg
mark AI discussion
G
Gaoxin1982
微软今天刚刚裁了一整个AI部门……
seven77seven 发表于 2023-02-10 23:14

给一个链接好不好?没动AI。
https://www.geekwire.com/2023/microsoft-continues-with-previously-announced-layoffs-as-seattle-area-total-nears-1500-people/
The Surface, HoloLens and Xbox units were among those hit by the latest layoffs, according to a report by Bloomberg News, citing anonymous people familiar with the matter and a memo to employees from Microsoft Gaming CEO Phil Spencer. 
相反大力投入。 https://www.nytimes.com/2023/01/18/business/microsoft-layoffs.html
Microsoft is going forward with several expensive bets, including potentially putting another $10 billion into its investment in OpenAI, which makes the explosively popular ChatGPT artificial intelligence system, and a $69 billion acquisition of the video game maker Activision that is facing challenges globally by antitrust regulators.

D
Dailv22
回复 1楼Gaoxin1982的帖子
m m k k
l
ljj1218
现在模型都超大,硬件和数据要求都很高,学校除非funding很多,已经很难做这些模型了。bert我记得都算很小的模型了,就几年的时间,从百万级的参数到上亿级的参数。
爱是恒久忍耐
https://www.usnews.com/best-graduate-schools/top-science-schools/artificial-intelligence-rankings?_sort=rank-asc
h
huaren2018
MIT 居然都排不上号
yaya12345 发表于 2023-02-10 15:21

一家之言而已,又不是啥权威。
上面有人贴的, MIT 无疑是这一领域 top 之一
b
bud
现在AI/DeepLearning核心是NLP model+training, 这个组合是很昂贵的. 网上有免费pre trained set, 像BERT/GPT等等。 免费的东西可用, 后面更核心是不可能放出来的。 这大规模训练离不开高档GPU 集群, Nvidia 皮夹克老黄和侄女AMD苏大妈偷着乐。老黄来自斯坦福, 苏大妈毕业于MIT. 现在高档GPU受进出口管制。
l
ljj1218
是的,我当学生的时候还用bert免费的模型,靠colab那种免费gpu的跑一下,跑多了就要付费了,这玩意其实都不怎么便宜。和以前那种简单的算法都不一样了,这个真的要有钱才能搞。
s
snaps
想简单做个coder就无所谓了。
https://csrankings.org/#/fromyear/2020/toyear/2022/index?ai&vision&mlmining&nlp&inforet&us
CMU UIUC Cornell UCLA UMD Stanford UCSD MIchigan Rutgers UCB



Gaoxin1982 发表于 2023-02-10 13:44

这种排名受CS Department的人数影响太大。而且有些真的就是论文总数多,但是成为公认重要成果的很少,特别是AI/ML进入deep learning时代后。换句话说,没什么代表作。就不点名哪个学校了。 前面也有人说了,加拿大的几个学校倒是做出了很要重要成果。

G
Gaoxin1982
现在模型都超大,硬件和数据要求都很高,学校除非funding很多,已经很难做这些模型了。bert我记得都算很小的模型了,就几年的时间,从百万级的参数到上亿级的参数。
ljj1218 发表于 2023-02-11 10:53

好学校都是从工业界拿funding 的,公司出的钱,最后模型也是在公司的服务器上跑。比较偏远的或者小学校有可能存在你说的问题。
x
xiaoniu123
回复 1楼Gaoxin1982的帖子
Rutgers 不是很熟悉
f
formemory
哈哈哈,你强,大学的研究都是瞎扯。简单的说一句,这次的chatGPT主要工作是基于university of Toronto 的research. 感叹一下,瞎喷是一件多么简单的事情啊
Gaoxin1982 发表于 2023-02-10 13:56

不是传说是基于狗家发的文章吗?
G
Gaoxin1982
回复 49楼的帖子
同样的idea 前面做了encoder 的变化,后来拓展到decoder.