AI大数据技术的应用爆炸式增长,云服务的转型也在加快。
4月18号,“火山引擎”在其主办的“原动力大会”上,正式公布了自主研发的 DPU等云计算产品,并正式发布了全新的“机器学习”系统:万卡级大模型训练,微秒级数据时延,使得大模型训练更加稳定和快速。
“国内百分之七十以上的大模型公司,都聚集在了这里。”谭待,火山引擎董事长,曾说过,大模型不会是一家独大的。与其它云计算平台纷纷推出自己的大模型不同的是,“火山引擎”将通过接入多家大模型平台进行深入的合作,为企业及用户带来更加丰富的人工智能应用。
在会议中,火山引擎公布了与字节跳动业务合并的消息。其实在二月份的时候,就已经传出了关于“AI大模型”争夺中国市场的新闻。
ChatGPT是目前最快速发展到数十亿人使用的移动终端。而最近推出的GPT-4大型模式,在很多方面,包括法律,数学,生物学,都有超越了百分之九十以上的成绩。
谭待指出,目前许多投资于大型建模的技术公司,拥有良好的技术队伍,拥有大量的产业经验和创意,但是常常缺少在大型情景下进行实际应用的系统性的能力。“火山引擎”所要完成的任务,是为大型机型用户提供一个安全可靠、价格合理的人工智能架构。
据了解,该系统是在抖音等海量客户群中,历经多年锤炼而成,可实现单任务万卡级的大型分布式平行培训。通过 GPU的弹性运算,可以对所需的资源进行灵活的分配,使得用户在使用的时候能够获得更多的可用时间,从而降低了70%以上的运算费用。
字节跳动公司的副董事长杨震曾表示,商业革新要求不断尝试错误,大胆而灵活地尝试错误,但同时也必须降低代价。采用潮汐法、混流法等多种方法,使火山岩发动机达到了最大程度的使用效率,降低了生产成本。举例来说,在一个视频平台上,一名工程人员在15个月内对一个特定的视频进行了5个小时的培训,而这个培训费用仅为5000元。在网络上风靡的“AI绘画”视频效果,从推出到正式发布,仅用了一星期多一点的时间,就被一位算法专家给搞定了。
MiniMax是世界上为数不多的拥有文字、视觉和语音三种大模型功能的人工智能公司。MiniMax的共同创办人杨斌表示, MiniMax和“火山”发动机共同搭建了一个超大规模的试验场,以达到1000 KG的标准测试;这是一个拥有万卡级算力的超级计算平台,可以支持一天内超过一千万次的数据访问。借助“火山引擎”,迷你麦克斯大型机型商业取得了迅速的突破。
谭待表示,“火山引擎”的大型云计算系统得到了智谱 AI,昆仑万维等许多公司的好评。在中国大型模具行业,超过70%的公司都是“火山引擎”的用户。
向“多重云计算和多重模式”体系结构演化
有人说,大型计算机系统将为云计算提供商提供一次逆袭的机遇。谭待认为,目前大数据模式仍处于起步阶段,面临着数据安全,内容安全,隐私保护,版权保护等诸多问题,亟待解决。然而,随着大规模数据模式的出现,人工智能计算能力的快速提升,其计算能力与普通计算能力之间的差异将不断缩小,给云计算提供了新的机遇,对云计算数据中心、软件和硬件堆栈以及 PaaS系统等都提出了新的要求。
在计算能力方面,谭待给出了一个例子:“大型机种对计算能力的要求很高,而虚拟技术必然会产生大量的消耗,而且随着规模的增大,消耗的计算能力也随之增大。在三年之内,大型计算中心将采用” CPU+ GPU+ DPU“的混合运算架构,其中 CPU承担一般运算, GPU承担人工智能运算, DPU承担资源卸载、加速与隔离等任务,提高资源利用率。
在这次的“推进器”会议中,“火山引擎”推出了全新一代自主研发的 DPU,实现了计算、存储和网络的全面迁移,为企业提供更多的服务。
谭待认为,随着大数据和其他领域的发展,不管是老公司或新公司,对于人工智能计算能力的要求都很高,公司采用多个不同部门的云计算服务将会变成一种趋势。与此同时,每个产业都拥有各自的优质私人数据集,大模式并不会一枝独秀,反而会遍及千行百业,从而构建出多模式的共生乃至协同的生态系统。谭待称:“以后就是多云和多模式了。”
同时,“火山引擎”还趁机发布了一系列的产品,包括:分布式云原生平台、多云安全、多云 CDN、 veStack混合云平台等,这些都可以帮助用户更好地利用多家云服务。
从会议中,记者获悉,火山引擎同时推出了对内对外的产品,在抖音、今日头条等 APP上,都添加了“火山引擎为用户提供计算服务”这一字样。