备受关注的2018年未来科学奖和F2科学峰会颁奖仪式在北京举行,这是中国唯一一次高端多领域国际科学会议。80多名世界级科学家来到该网站,分享前沿学术成果,探索跨学科创新,促进科学产业的应用。世界上最聪明的大脑通过最精彩的主旨演讲和最深刻的对话,共同开启了“F2科学高峰时间”。星云团簇的创始人、香港科技大学计算机科学与工程系陈凯教授应邀出席晚宴的特别“青年秀”环节,并发表题为“面向海量数据的大规模分布式高性能机器学习系统”的主旨演讲,与在场嘉宾分享星云团簇在大规模分布式高性能机器学习系统方面的最新研究成果。
以下是陈凯教授的讲话概述:
大家好,我是陈凯,今天的话题是“面向海量数据的大规模分布式高性能机器学习系统”。在大数据和人工智能浪潮的推动下,世界范围内AI的计算能力在过去五年中增长了30万倍。AI的计算能力平均每3.43个月就会翻倍,远远超过摩尔定律每18个月的计算能力。很多人认为“AI计算能力就是AI生产力”。我们要指出的是,目前AI的计算能力还没有真正转化为生产力。
为什么?这可能有很多原因。其中,我们认为一个重要的原因是,在处理海量数据的并行分布式计算系统中,真正的生产力是由单个点的计算能力和多个点之间的通信决定的。这是因为海量数据分布在不同的计算节点上进行并行计算,然后生成中间结果/参数用于不同节点之间的传输同步,然后进行计算、重传和交替。由于传统网络技术的低效率,节点间的数据通信成为瓶颈,大大降低了整个计算集群的真实计算性能(即生产率)。我们的实验表明,在某些情况下,整个集群的计算能力转化为生产力的转化率不到20%。
所以,面对这样的情况,我们开始了一个叫Clustar星云的项目。Clustar项目的主要目标是通过高效创新的网络技术解决通信瓶颈,使AI计算能力充分转化为AI生产力。在这个过程中,我们有很多相关的技术细节,一般来说,包括以下几个方面:
1.首先,我们深入优化传统网络技术,将超级计算高性能网络技术引入商业数据中心或云计算;
2.同时,针对AI应用特有的属性,设计面向AI的传输协议和通信模型;
3.我们深度整合了人工智能网络和人工智能系统。
我们通过高效的网络解决通信瓶颈,让数据在计算节点之间畅通无阻,让集群的AI计算能力真正充分转化为加速AI应用的生产力。我们的实验表明,通过星云的高效网络技术,我们可以将人工智能的计算能力到生产力的转化从不到20%提高到90%,甚至更高。
我们的下一个目标是完成这项研究。星云Clustar的目标很简单,就是通过高性能的网络和系统,将AI的计算能力完全转化为AI的生产力,用于赋能AI应用,所以我们称之为Make AI power fully power AI。在这个项目开始的时候,我们得到了红杉的支持,在接下来的工作中,我们也在寻找更多的合作。谢谢你。
星云Clustar,一家创新的人工智能技术和服务提供商。更多精彩内容,请关注微信微信官方账号:Clustar2018。
1.《CLU 星云Clustar的认知突破:AI算力并不等于AI生产力》援引自互联网,旨在传递更多网络信息知识,仅代表作者本人观点,与本网站无关,侵删请联系页脚下方联系方式。
2.《CLU 星云Clustar的认知突破:AI算力并不等于AI生产力》仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证。
3.文章转载时请保留本站内容来源地址,https://www.lu-xu.com/guonei/1035065.html