Meta发布最新开源大模型Llama 3 大模型是否开源成行业焦点
长安不良帅
发表于 2024-4-19 18:24:55
189
0
0
据介绍,Llama 3在两个定制的24K GPU集群上基于超过15T的数据进行了训练——这比Llama 2使用的数据集大7倍,多4倍的代码,并且Llama 3支持8K上下文长度,是Llama 2容量的两倍。
对于用户来说,也能够通过Meta自己推出的Meta AI来感受Llama 3。为了方便大家使用,Meta方面表示,Meta AI将集成到Meta旗下各大产品 WhatsApp、Instagram、脸书等顶部的搜索框中,并建立了一个网站meta.ai。
截至当地时间4月18日收盘,Meta股价上涨1.54%,股价报501.800美元/股。
对于大模型开源,目前业界亦有不同观点。百度CEO李彦宏近日公开表示,开源模型会越来越落后。他认为,“大家以前用开源觉得开源便宜,其实在大模型场景下,开源是最贵的。所以开源模型会越来越落后。”
4月16日,Create 2024百度AI开发者大会上,文心大模型4.0的工具版正式发布,李彦宏介绍,开发者通过文心4.0降维裁剪出来的更小尺寸模型,要比直接拿开源模型调出来的模型,同等尺寸下效果明显更好;同等效果下,成本明显更低。
CandyLake.com is an information publishing platform and only provides information storage space services.
Disclaimer: The views expressed in this article are those of the author only, this article does not represent the position of CandyLake.com, and does not constitute advice, please treat with caution.
Disclaimer: The views expressed in this article are those of the author only, this article does not represent the position of CandyLake.com, and does not constitute advice, please treat with caution.