4月17日,截至收盘,中科曙光、浪潮信息、曙光数创、紫光股份、欧比特、寒武纪等与算力、计算设备概念相关的个股股价上涨。其中,中科曙光涨超4%、浪潮信息涨超2%。
消息面上,国家超算互联网工作启动会举行,会议发起成立了国家超算互联网联合体。据了解,超算互联网是以互联网的思维运营超算中心,并连接产业生态中的算力供给、应用开发、运营服务、用户等各方能力和资源,构建一体化超算算力网络和服务平台。 文/广州日报全媒体记者 文静
AI大模型“能力”与算力密切相关
AI大模型的研发对算力需求很高,在ChatGPT、AI大模型的热度之下,算力成为多家大厂竞争的焦点。记者留意到,阿里巴巴、腾讯、百度、华为等大厂都公布与算力相关的进展与情况。近日,腾讯云公布了新一代HCC高性能计算集群,该集群采用腾讯自研的星星海服务器。腾讯云方面称,实测结果显示,新一代集群算力性能较前代提升3倍。去年10月,腾讯完成首个万亿参数的AI大模型——混元NLP大模型训练。在同等数据集下,将训练时间由50天缩短到11天。如果基于新一代集群,训练时间将进一步缩短至4天。
在早前的阿里云峰会上,阿里巴巴CEO张勇透露了一组数据,过去十年,阿里云的单位算力成本下降了80%、存储成本下降88%。据了解,阿里云将推出一款更接近云计算终极形态的算力产品。
在今年3月百度“文心一言”正式面世前,百度云方面透露,“文心一言”背后的算力基础设施均由百度智算中心支持,后续百度多个智算中心也将为“文心一言”面向产业的规模化落地提供底层支撑。
近年来我国算力产业规模快速增长
工信部数据显示,近年来我国算力产业规模快速增长,年增长率近30%,算力规模排名全球第二。截至去年底,我国算力总规模达到180百亿亿次浮点运算/秒,存力总规模超过1000EB(1万亿GB)。
面对AI大模型时代的来临,在算力上的角力才刚开始。实际上,云计算、人工智能技术的爆发,会将涌现出几何级的算力支撑需求,对算力的数量、质量提出了新要求。行业专家指出,大模型是依赖算法、算力和数据的综合支撑,其产业化面临一系列的挑战,包括模型体积大,训练难度高;算力规模大,性能要求高;数据规模大,数据质量参差不齐。
另一方面,算力的“升级”亦需要庞大费用的投入。华鑫证券研报披露,ChatGPT等AI模型的训练与内容生成与“大算力”的支持密不可分,GPT—3的模型参数量就已达1750亿,训练该模型花费的硬件相关投入超1700万美元。