长窗口大模型

大模型看书，从来没有这么快过。国内大模型创业公司，正在技能前沿创造新的记录。10 月 30 日，百川智能正式颁布 Baichuan2-192K 长窗口大模型，将大语言模型（LLM）上下文窗口的长度一举晋升到了 192K token。这相当于让大模型一次处理约 35 万个汉字，长度达到了 GPT-4（32K token，约 2.5 万字）的 14 倍，Claude 2.0（100K token，约 …