智谱AI发布新一代高性能模型GLM-4
2024-01-16 17:52:40
来源:中国证券网
上证报中国证券网讯(记者 邓贞)1月16日,北京智谱华章科技有限公司(下称智谱AI)在“智谱AI首届技术开放日”大会上发布了新一代基座大模型GLM-4。据介绍,相较于前一代模型,GLM-4在整体性能上有了显著提升,不仅支持更长的上下文信息处理,推理速度也更为迅捷,有效降低了推理成本。
据悉,GLM-4能够支持高达128k的上下文窗口长度,单次提示词处理的文本量可达到300页之多。在测试中,GLM-4处理长达128K的文本时,也未出现因长上下文信息失焦而导致的精度下降问题。此外,GLM-4在多模态能力(模型可以生成多种不同形式的数据)方面也有所增强,包括文本生成图像以及多模态理解等功能。
2024年,智谱AI将设立大模型开源基金,以推动大模型的开源开发和生态繁荣。该基金将为大模型开源社区提供一千张计算卡,以助力开源项目的顺利推进,此外还将提供1000万元,用于资助与大模型相关的开源项目。
同时,为了支持全球范围内的大模型创业者,智谱AI还将进一步升级其“Z计划”,联合生态伙伴发起总额达10亿元的大模型创业基金。该基金将专注于支持大模型的原始创新,覆盖大模型算法、底层算子、芯片优化、行业大模型和超级应用等多个方向,以期为创业者提供全方位支持和帮助。