【生意多】-免费发布分类信息
当前位置: 首页 » 新闻 » 教程 » 正文

阿里巴巴使用AI分配数据中心资源最多省出一半服务器

放大字体  缩小字体 发布日期:2020-10-28 04:49:19    浏览次数:5
导读

  11月6日,阿里巴巴数据中心AI调度官“达灵”正式上任。在实习期间,达灵打破了人类工程师的多项纪录:将数据中心资源分配率拉升到了90%以上,在部分业务中节省了一半服务器,并且可以2秒钟锁定异常机器,命中率94%。  “伴随双11规模的逐年暴涨,管理、调度上万台服务器这样的工作已经不适合人来做了。” 阿里巴巴资

  11月6日,阿里巴巴数据中心AI调度官“达灵”正式上任。在实习期间,达灵打破了人类工程师的多项纪录:将数据中心资源分配率拉升到了90%以上,在部分业务中节省了一半服务器,并且可以2秒钟锁定异常机器,命中率94%。

  “伴随双11规模的逐年暴涨,管理、调度上万台服务器这样的工作已经不适合人来做了。” 阿里巴巴资深搜索研发专家郑南说,达灵这套算法能够快速给出最优的计算资源部署方案,并且根据访问量不断搬运应用和数据,确保没有一台机器偷懒。

  今年工程师的职责变成如何用数据去喂养“达灵”。郑南说,我们要做的就是提供表格数据大小、应用历史访问量以及目前的部署方案等信息,省下的就是喝着茶看她的表演。“她甚至可以在线上克隆一个真实的服务,自己进行压力测试,以判断方案是否最优。”

  除了对计算资源的不断调度、应用的不断搬运外,达灵还有一个职责是及时发现异常机器,快速隔离。要知道,双11期间一台机器的异常,可能带来百万级用户的下单失败。

  但对工程师来说,从机器出现异常、被发现到处理完成,整个过程有时会长达数分钟。而这已经是人类能做到的极限。达灵能够把时间、负载、服务状态等不确定因素通过数据算法关联,最终快速锁定异常机器。

  日常工作中,达灵每天会采集29亿条机器运营状态,日均隔离异常机器1000次左右,在大促期间调度准确率达到94%,时间只需要2秒钟。

  阿里巴巴iDST团队是达灵的创造者。项目负责人朱胜火博士说,达灵的工作首先是在集群监控数据之上,建立起很多个深度学习、在线学习的模型,由此对集群内每一台机器、每一个应用,当前和未来的状态都了然于胸。在此基础上,达灵通过应用强化学习、组合优化等技术,可以在复杂环境中自行学习判断,作出一系列比如错峰排布、碎片规整等聪明的决策,从而全局最优化集群的资源分配率以及稳定性。

  除了“达灵”以外,机器运营小二、机器导购员、智能客服、AI设计师、机器拣货员、机房巡逻员等一系列新物种已在天猫双11前夕集中上岗。

  近日,深信服云计算正式通过SAP OPC认证,成为SAP官方认证的中国合作伙伴。该项认证表明:对于部署在深信服云平台上的SAP应用系统来说,深信服云计算从基础设施(数据中心、网络

  中国电信京津冀大数据基地是天津市重点项目工程,预计可带动京津冀地区大数据、人工智能等一系列上下游产业链近500亿元的投资。

  上游早点把钱给我们,我们就能挺过去,晚一天,我们就多一天煎熬和风险」,淘宝一男装旗舰店负责人如是说

  在全球范围内,最终用户和组织正在生成和使用前所未有的大量数据。但是,要了解全球范围内数据的增长速度以及对存储、管理和访问所有数据的影响可能具有挑战性。

  Google 公布了 2020 年的扩张计划 ,计划在美国加州、科罗拉多州,乔治亚州等 11 个州的办事处和数据中心投资超过 100 亿美元。

 
(文/小编)
打赏
免责声明
• 
本文为小编原创作品,作者: 小编。欢迎转载,转载请注明原文出处:https://www.31duo.com/news/show-688824.html 。本文仅代表作者个人观点,本站未对其内容进行核实,请读者仅做参考,如若文中涉及有违公德、触犯法律的内容,一经发现,立即删除,作者需自行承担相应责任。涉及到版权或其他问题,请及时联系我们。
 

(c)2016-2019 31DUO.COM All Rights Reserved浙ICP备19001410号-4

浙ICP备19001410号-4