大模型代码 文章 进入大模型代码技术社区

拿大模型代码来训练自用小模型

• 1 前言上一期所刊登的《从CLIP 应用领会隐空间的魅力》一文里，就是一个典型的范例：从Github 网页下载OpenAI 公司的CLIP 源代码(Source code)，然后搭配自己收集的小数据来训练一个给超市商家使用的小模型( 图1)。图1 Github上的免费CLIP源码那么，这大模型与小模型，两者的代码之间，有何不同呢？ 这可能会出乎您的预料，其核心模型的代码，大多是一致的、相容的。常常仅是大模型的参数量很大，而小模型参数量较少而已。于是就能免费拿来大模型的开源代码，把其参数量调小，搭配企业自有
• 关键字： 202312  大模型代码  自用小模型