中国开源生态图谱2022——人工智能领域-26页

为了解决之前AI模型的扩展性和通用性不高,以及依赖人工数据标注和标注数据量的问题,基础模型/大规模预训练模型提出了一种基于自监督学习的“预训练大模型+下游任务微调”的可行方案。这种模型可以在少量标注数据的基础上,通过大量未标注数据中进行大规模训练,从而迅速挖掘大量领域知识。然后经过少量小参数的微调(delta-tuning),快速适配大模型下游任务。

  • 2023-05-12
  • 收藏0
  • 阅读120
  • 下载0
  • 25页
  • pdf
  • 8.09M

评价

评分 :
   *