AWS is down - 内部员工说下什么时候能 fix

H
Helicase
楼主 (北美华人网)
连amazon music 都当了,podcast 听不了了。
C
CleverBeaver
最近怎么了
b
bud
很好。。。。。。
S
Snowpig
这个COE想都不敢想
m
majia666
回复 1楼Helicase的帖子
这个打脸比较厉害。 大家还怎么依靠它?
心想事成2021
迟迟没有接到验证码 是这个原因吗 我都resend 四五回了 还以为手机坏了
s
snowpenguin
我今天发现我家家扫地机器人也是用AWS
b
bud
记得有次AWS网管忘了给linux打补丁(Leap Second ), 整个集群过不去”多一秒钟“这个坎, 最后AWS当机。 不知这次是什么坎。
这个感觉完全不及格啊,cloud不应该会down啊,都有一堆backup的系统。怎么样都应该24/7的正常运行。
小青龙
刚刚alexa不能放音乐,amazon music不能放,apple music要我们再加skill。。。难道跟aws有关?可是echo show又是好的。好吧,现在echo也不行了
H
Helicase
音乐podcast都听不了,这还让人怎么干活
c
claireliu
还真是,试了一下"alexa, play little apple",确实不行🙂
我没法upload我的workout去strava..
e
ecolock
有人油管上不了吗
l
luckhorse
Strava 估计也用aws
M
MissWW
Netflix是AWS最大的用户,完全是把枪把子递到竞争对手的手里
b
bluefly21
所以千万不要把家弄得太智能,一旦出问题啥都用不了。。。。
c
coretti
Echo audible 還可以啊

吃瓜爷
Alexa, fix AWS, pronto!
b
bluegene123
所以千万不要把家弄得太智能,一旦出问题啥都用不了。。。。
bluefly21 发表于 2021-12-07 14:02

所以门锁我特意装了是手动按密码的。免的没网络,连家都回不了。
w
wannaquit
大家公司都没有影响吗?我们公司几个app down掉了,主要是east-1 region的问题。跟我们对接的aws的人说他们在全力以赴😂
C
CleverBeaver
大家公司都没有影响吗?我们公司几个app down掉了,主要是east-2 region的问题。跟我们对接的aws的人说他们在全力以赴😂
wannaquit 发表于 2021-12-07 14:16

for real?去看看
m
meidong20
一片混乱。昨晚还在failover 练习,今天一大早就来真的🥵
h
huila
我的工作完全没法做了 因为数据库在aws上面。。。
q
qqzj
一堆error notification
c
coretti
难怪最近政府 contract Amazon bid 输 Microsoft
t
tuer
我以为故意不让我退货来着…
C
CleverBeaver
今年holiday销售难道要aws来背锅
C
CleverBeaver
huaren居然不在aws上
笨笨熊
只是new sign in账户不能用,老油条还在苦逼搬砖中
z
zhengxumaomao
Netflix是AWS最大的用户,完全是把枪把子递到竞争对手的手里
MissWW 发表于 2021-12-07 14:00

……竟然还有这种事
t
tracys0801
Amazon music, Ring camera都down了,真是让人生气!
M
MissWW
回复 31楼zhengxumaomao的帖子
幸亏tesla肯定不用AWS
M
MissWW
CNBC: Among the services that reported issues as a result of the outage were Disney's streaming subscription service, Disney+, Netflix, Slack, stock trading app Robinhood and Coinbase, the largest cryptocurrency exchange in the U.S.
a
applesoda205
Slack一天都挺正常的啊
w
wdong
哈哈sagemaker instance还能通过ssh登陆。
l
lvk
数钱数瘫了。
R
Ruth
我们it早上通知了是aws的问题不是我们这边的问题,不过对我基本没影响。
l
lvk
我们it早上通知了是aws的问题不是我们这边的问题,不过对我基本没影响。
Ruth 发表于 2021-12-07 15:56

一大批AWS销售人员在去往你们公司的路上
m
meraviglia
所以千万不要把家弄得太智能,一旦出问题啥都用不了。。。。
bluefly21 发表于 2021-12-07 14:02

还有以后无人驾驶,突然网络断了,server掉线,要发生多少事故。
c
calrose
huaren居然不在aws上
CleverBeaver 发表于 2021-12-07 14:28

aws太贵
不娶何撩
aws 的确是bug很多,我当时从google cloud 和azure 换成aws我还在迟疑,这么buggy 怎么market share 还大。
然后想想是亚麻对程序员的待遇,和大家拿亚麻垫底就明白了
e
edwardPhila
谷歌云重大利好
s
steve888
好像买东西也不利索了,一堆错误。
M
MissWW
先别买东西。网上有人说gift certificate被扣了,但是没收到order confirmation
C
CleverBeaver
大家公司都没有影响吗?我们公司几个app down掉了,主要是east-1 region的问题。跟我们对接的aws的人说他们在全力以赴😂
wannaquit 发表于 2021-12-07 14:16

Hacker news 上有人说 avoid us east 1 at any cost
m
milky_candy625
今天没法工作,好不容易数据来了登不上sagemaker... 公司内大家都干活不了了
m
meidong20
谷歌云重大利好
edwardPhila 发表于 2021-12-07 17:19

Google上次也fail了。这么大的云真不好管。infrastructure engineer不容易
H
Huanmin
先别买东西。网上有人说gift certificate被扣了,但是没收到order confirmation
MissWW 发表于 2021-12-07 17:28

很迟才在账号里面显示,没有EMAIL。
x
xiaoxiongmei
麦当劳app也登陆不了了 估计也是aws的锅
e
ecolock
难怪最近政府 contract Amazon bid 输 Microsoft
coretti 发表于 2021-12-07 14:25

难道微软云没down过
r
ray_golden
大家公司都没有影响吗?我们公司几个app down掉了,主要是east-1 region的问题。跟我们对接的aws的人说他们在全力以赴😂
wannaquit 发表于 2021-12-07 14:16

Us-east-1太老旧了,我们主要放在us-west-2。
m
meraviglia
公司用的是Azure,一切正常。
r
ray_golden
aws 的确是bug很多,我当时从google cloud 和azure 换成aws我还在迟疑,这么buggy 怎么market share 还大。
然后想想是亚麻对程序员的待遇,和大家拿亚麻垫底就明白了
不娶何撩 发表于 2021-12-07 17:18

AWS很多服务越做越复杂,需求弄得越来越shi,api gateway那个烂东东v2很多v1的feature没有了。NLB、ALB做的也是非常牵强,所以安全特征用上竟然要nlb+alb再弄个lambda更新dns,最近才做了service type能自动更新。EKS那边也是一团糟。我看着google cloud反而更简单一些了
d
doubt
难怪今天有些app一直network error,大半天了啊!
d
durkin
怪不得一整天灯都打不开,刚才才修好。
不娶何撩
Us-east-1太老旧了,我们主要放在us-west-2。
ray_golden 发表于 2021-12-07 18:08

East-1 和west-2的ui都不一样。
你还能要求aws啥呢?
我们之前看metric有个地方感觉是个bug,发了service request。 哎那些个人….吐槽无力。
r
ray_golden
East-1 和west-2的ui都不一样。
你还能要求aws啥呢?
我们之前看metric有个地方感觉是个bug,发了service request。 哎那些个人….吐槽无力。
不娶何撩 发表于 2021-12-07 18:32



ui是新旧版本的切换吧
AWS的前端有个bug是动不动就切换到us-east-1,经常进了某个服务发现资源都没了,一看是自动切换到us-east-1了,你们常用us-east-1的可能没这个烦恼
w
warmwinter
Slack一天都挺正常的啊
applesoda205 发表于 2021-12-07 15:36

这损失呢
h
h2o.work
就说一点,Glue 里排序功能形同虚设,搜索功能及其难用,这么久了,这种基本的问题都没修复
m
meidong20
West-2 比east-1 新吗?难怪service processing time比在east快了50%。 不过按理不应该啊。应该只跟EC2 instance type有关。搞不懂
j
jilimy
我说今天我家的Alex一直不work。。。 原来如此
o
oneleaf
Netflix没受影响啊
c
chairsky
AWS很多服务越做越复杂,需求弄得越来越shi,api gateway那个烂东东v2很多v1的feature没有了。NLB、ALB做的也是非常牵强,所以安全特征用上竟然要nlb+alb再弄个lambda更新dns,最近才做了service type能自动更新。EKS那边也是一团糟。我看着google cloud反而更简单一些了
ray_golden 发表于 2021-12-07 18:14

不能同意更多,不光是api gateway,很多服务v2都不做向下兼容v1,doc又写的很差,往往v1的很完整,v2推出几年还未必有详细doc,每次升级到v2都要自己整半天
k
k.hao
还好大部分在东部。 DC area。
i
ivoryzz
回复 8楼bud的帖子
这次是us-east-1 整个地区坏了,因为几个大路由器完蛋了。这几个大路由器在北佛吉尼亚州的一个叫做Ashburn 的地方。工人们赶修了一天,晚上修好了
i
ivoryzz
回复 36楼wdong的帖子
服务还在,你这个是真正的user, 他们大部分是token,
i
ivoryzz
回复 29楼CleverBeaver的帖子
华人太小气了,估计在digital ocean or linode。
g
gemrain
怎么down这么长时间?
a
abcdefg2020
上午亚马逊账户慢的很,卖的东西也很少,买的东西过了很久才显示。学校网课本来打算今天上午考期末考,结果也很慢,到晚上恢复了才考。早上一开始我还以为电脑中毒了。
m
mollyi
现在可以理解那种顶级文明比如亚特兰蒂斯如果招到毁灭性打击,可能什么都留不下来了。连文明的介质都不存在了。能保留下来的只有石刻的记录。
v
vijj
给infrastructure部门多投点钱吧。。。。。
t
ttmom
上午亚马逊账户慢的很,卖的东西也很少,买的东西过了很久才显示。学校网课本来打算今天上午考期末考,结果也很慢,到晚上恢复了才考。早上一开始我还以为电脑中毒了。
abcdefg2020 发表于 2021-12-08 01:41

昨天中午我还不知道amazon down了,定了一次过好一会没收到confirmation,还以为我网络有问题又下了一次,到晚上的时候只显示一个单子也收到email
d
dove_lp
苍天啊 我这东西今天要和老板present就因为他down了 container 挂了 啥都不能present 什么时候能回来啊