AI在线 AI在线

大语言模型微调

开源模型逆袭：Databricks TAO 技术微调 Llama 超越 GPT-4o

开源模型逆袭：Databricks TAO 技术微调 Llama 超越 GPT-4o
近日，数据智能公司 Databricks 推出了一种全新的大语言模型微调方法 ——TAO（Test-time Adaptive Optimization），这一技术的出现为开源模型的发展带来了新的希望。 通过运用无标注数据和强化学习，TAO 不仅在降低企业成本方面表现出色，更是在一系列基准测试中取得了令人瞩目的成绩。 根据科技媒体 NeoWin 的报道，TAO 微调后的 Llama3.370B 模型在金融文档问答和 SQL 生成等任务中，展现出了优于传统标注微调方法的性能，甚至逼近了 OpenAI 的顶级闭源模型。
3/27/2025 2:39:00 PM
AI在线
  • 1