Foundation Model基座模型

用海量数据(万亿级Token)预训练出来的通用大模型,本身什么具体任务都不会做,但什么都能学。

用海量数据(万亿级Token)预训练出来的通用大模型,本身什么具体任务都不会做,但什么都能学。相当于一个读了全人类书籍的"毛坯学霸",还没被分配具体工作。GPT-4、Claude、Llama、Qwen 都是基座模型。

什么时候会用到

讨论技术选型、自研 vs 调用第三方、模型能力边界时会用。

例句

  • 我们不需要自己训基座模型,直接在 Qwen 的基座上做微调就行,省几个亿。
  • 这个需求基座模型就能搞定,不用上 RAG。

相关词