发布AS3000G7推理加速存储:使用存储来节省计算强
发布时间:2025-08-02 08:46编辑:365bet体育注册浏览(183)
根据媒体报道,在北京举行了2025年(第二次)工业与金融合作会议。在会议上,Insers存储发布了AS3000G7存储产品,旨在解决浪费由重复的KV缓存计算在大型理解模型上浪费计算和延迟的问题,并为财务模型,科学研究和其他领域的大规模实施提供了基本支持。当前,该模型的大规模模型完全取决于昂贵的GPU服务器,其效率的使用直接决定了该模型从“实验室”移至“生产线”的速度。同时,IDC预测,计算能力的智能能力的规模将在未来五年内增加1.7倍,到2027年,急诊工作负载的P比例超过70%,提高GPU使用效率的需求越来越紧迫。启动存储AS3000G7创新剂建议“美国存储的E而不是计算“解决方案。该产品可以存储所有KV缓存和许多旋转结果。其架构是高速网络上AS3000G7的GPU天然内存中的缓存kV缓存。在随后的对话中,系统可以直接拉动缓存,如有必要,如果必要在实际情况下有效地应用大型模型。