模型偏好只与大小有关?上交大全面解析人类与32种大模型偏好的定量组分
在目前的模型训练范式中,偏好数据的的获取与使用已经成为了不可或缺的一环。在训练中,偏好数据通常被用作对齐(alignment)时的训练优化目标,如鉴于人类或 AI 反馈的强化学习(RLHF/RLAIF)或者直接偏好优化(DPO),而在模型评价中,由于任务的复杂性且通常没有标准答案,则通常直接以人类标注者或高性能大模型(LLM-as-a-Judge)的偏好标注作为评判标准。尽管上述对偏好数据的应用已…- 2
- 0
讯飞星火V3.5正式发布,鉴于全国产算力平台“飞星一号”训练
1月30日,科大讯飞举行星火认知大模型V3.5升级发布会。科大讯飞董事长刘庆峰、研究院院长刘聪正式发布鉴于首个全国产算力训练的讯飞星火V3.5。2023年10月24日,科大讯飞携手华为,宣布首个支撑万亿参数大模型训练的万卡国产算力平台“飞星一号”正式启用。启用后的90多天里,讯飞星火鉴于“飞星一号”,启动了对标GPT-4的更大参数规模的大模型训练,带来了1月30日这场讯飞星火V3.5升级发布。首个…- 10
- 0
2023年科研畛域「 迷信ChatGPT」有哪些?LLM for Science有哪些探究……
作者 | 凯霞2023 年,人工智能畛域最具影响的莫过于 GPT-4、ChatGPT 了。ChatGPT 凭一己之力掀起了 AI 畛域的热潮,火爆全球,似乎开启了第四次工业革命。ChatGPT 入选《Nature》2023 年度十大人物(Nature’s 10),这是有史以来第一次「计算机程序」——首个非人类实体入选。《Nature》表示这一做法旨在认可模仿人类言语的 AI 系统在迷信发展和进步中…- 2
- 0
GPT-5、AlphaFold新版等AI工具值得期待,Nature宣布2024年值得关心的科学事件
编辑 | X12 月 18 日,《Nature》宣布了 2024 年值得关心的科学事件。值得一提的是,12 月 13 日,《Nature》刚刚宣布了 2023 年度十大人物(Nature’s 10),旨在评选出为科学领域做出重要贡献并引起人们对关键问题关心的个人。其中大型语言模型(LLM)ChatGPT,这是有史以来第一次「计算机程序」入选。毋庸置疑,与 2023 年相呼应,包括 ChatGPT …- 3
- 0
230页长文,涵盖5大迷信规模,微软团队使用GPT-4摸索LLM对迷信发觉的影响
编辑 | 紫罗前不久,微软 DeepSpeed 团队启动了一个名为 DeepSpeed4Science 的新计划,旨在通过 AI 系统优化技术实现迷信发觉。11 月 13 日,微软团队在 arXiv 预印平台发表题为《大型语言模型对迷信发觉的影响:使用 GPT-4 的初步钻研》(「The Impact of Large Language Models on Scientific Discovery…- 5
- 0
GPT-4 Turbo更强更便宜,GPTs、GPT商店最大亮点,这是OpenAI首个开发者日
机器之心报道机器之心编辑部真如 Sam Altman 此前所言,OpenAI 首届开发者大会为人们带来了一些非常棒的新东西。继今年春天宣布 GPT-4 之后,OpenAI 又创造了一个不眠夜。过去一年,ChatGPT 绝对是整个科技领域最热的词汇。OpenAI 也依靠 ChatGPT 取得了惊人的成绩:总结来说,OpenAI 证实 ChatGPT 目前每周有超过 1 亿活跃用户,超过 200 万开…- 3
- 0
千亿规模参数,阿里云通义千问进化到2.0:性能超GPT-3.5,加速追逐GPT-4
10 月 31 日,阿里云正式发布千亿级参数大模型通义千问 2.0。在 10 个权威测评中,通义千问 2.0 综合性能超过 GPT-3.5,正在加速追逐 GPT-4。当天,通义千问 APP 在各大手机利用市场正式上线,所有人都可通过 APP 直接体验最新模型才能。过去 6 个月,通义千问 2.0 在性能上取得巨大飞跃,相比 4 月发布的 1.0 版本,通义千问 2.0 在复杂指令明白、文学创作、通…- 4
- 0
用于化学研讨的 GPT-4:什么可以做,什么不可以做?
编辑 | 紫罗GPT-4 在应对化学挑战方面显露出非凡的才智,但仍然存在明显的弱点。东京工业大学的化学家 Kan Hatakeyama-Sato 表示:「它对化学有着显著的明白,这表明它可以以类似于人类思维过程的方式预计和提出实验结果。」最近,Hatakeyama-Sato 和他的同事在《Science and Technology of Advanced Materials: Methods》杂…- 6
- 0
178页!GPT-4V(ision)调理领域首个全面案例测评:离临床应用与实际决策尚有距离
上海交大&上海AI Lab发布178页GPT-4V调理案例测评,首次全面揭秘GPT-4V调理领域视觉性能。- 4
- 0
产物在始创公司中呈病毒式增长,OpenAI会成为下一个科技巨头?
机器之能报道编辑:吴昕新数据显示 OpenAI 的产物在始创企业中呈病毒式增长。财务和人力资源咨询公司 Kruze Consulting 对 800 多家风险投资支持的始创公司的支出进行了分析,结果发现,使用 OpenAI 产物的公司比例已从去年 11 月 ChatGPT 推出时的 3% 上升至 9 月的 57%。这一点或许并不令人意外。OpenAI 希望自己的技术成为消费者、开发者、行业企业的默…- 5
- 0
iPhone、Mac上都能跑,刷屏的Llama 2究竟功能如何?
昨天凌晨,相信很多人都被 Meta 颁布的 Llama 2 刷了屏。OpenAI 研究科学家 Andrej Karpathy 在推特上表示,「对于人工智能和 LLM 来说,这确实是重要的一天。这是目前能够把权重提供给所有人使用的最为强大的 LLM。」- 6
- 0
一天之内,OpenAI有三件大事发生
自从 ChatGPT 发布以来,OpenAI 几乎成为了全球媒体头条新闻的常客。目前,这家公司的估值接近 300 亿美元,融资总规模达到 113 亿美元,即使在众多明星 AI 初创公司里也属于顶流。- 2
- 0
GPT-4是如何工作的?哈佛教授亲自讲授
这门课程引见了 GPT-4 的基本概念、工作原理和运用前景,展示了其在各种场景下的强盛才能。 课程内容不要求很多专业知识,所以小白照样听得懂,快来看看吧。- 5
- 0
ChatGPT的前世今生:OpenAI的技能「执拗」与「豪赌」
本文全方位地介绍了 ChatGPT 的本领特征、发展历程以及 OpenAI 一路走来所坚守的技能路线,并对 ChatGPT 出现之后 NLP 领域的范式转换举行了展望,即 ChatGPT 开启「文本生成 + 指令」的范式。- 5
- 0
ChatGPT真的是「通才」吗?杨笛一等人给它来了个摸底考试
ChatGPT 真的是「通才」吗?单拎出哪项才能都能完胜其他模型吗?哪些任意是 ChatGPT 擅长的,哪些不是?为了系统地探索这些问题,南洋理工大学博士生 Chengwei Qin、斯坦福大学计算机科学助理教授杨笛一等人进行了大量尝试。- 5
- 0
GPT
❯
个人中心
今日签到
搜索
扫码打开当前页
返回顶部
幸运之星正在降临...
点击领取今天的签到奖励!
恭喜!您今天获得了{{mission.data.mission.credit}}积分
我的优惠劵
- ¥优惠劵使用时效:无法使用使用时效:
之前
使用时效:永久有效优惠劵ID:×
没有优惠劵可用!