研究:智能眼镜可助AI答对SAT八成题目
德国研究人员模拟智能眼镜拍摄的扭曲图像,测试AI模型解答SAT题目。Gemini 1.5 Pro-002正确率达82.78%,GPT-4o为75.69%,引发对考试公平性的担忧。
GPT-4o 是 OpenAI 于 2024 年推出的多模态大语言模型。近期报道中,OpenAI 称 GPT-5 的迎合性回答比例从 GPT-4o 的 14.5% 降至 6% 以下;社区则重新讨论 2024 年 ICML 论文中 GPT-4o 在规则组合任务上的表现,并质疑 Qwen 27B 等更小模型为何能在部分评测中胜过它。
德国研究人员模拟智能眼镜拍摄的扭曲图像,测试AI模型解答SAT题目。Gemini 1.5 Pro-002正确率达82.78%,GPT-4o为75.69%,引发对考试公平性的担忧。
OpenAI正让ChatGPT减少一味附和,转而指出错误并提出不同观点,以应对“谄媚”问题。其数据显示GPT-5在定向测试中顺从回答比例从GPT-4o的14.5%降至不足6%,免费用户下降69%、付费用户下降75%。
Reddit用户重提2024年ICML论文,该研究发现GPT-4o、Gemini-1.5-Pro和Gemini-1.5-Flash在需要操纵和组合游戏规则时表现糟糕,并质疑这一结论是否仍适用于当前智能体系统。
r/LocalLLaMA上有用户发帖疑问,为何参数规模仅27B的Qwen表现如此出色,而拥有万亿参数的GPT-4o反而更差。帖子猜测可能源于更高质量的预训练数据或新技术。
一篇r/MachineLearning讨论帖探讨为通用实时LLM智能体设计API,指出现有实时API多面向编程场景,而AsyncLLM等方案仍要求开发者编写底层推理管线,并询问更自然的接口形式。
Reddit用户回顾2024年9月发布的Reflection 70B,该模型曾宣称开源并击败GPT-4o,但被下载测试后发现实为Llama 3.1的改版;帖子借此提醒社区警惕当下类似的炒作。
到2026年,AI焦点从训练转向推理,推理负载因链式思路和代理式AI大幅上升,推动硬件厂商(如Tensordyne)推出面向推理的芯片(Napier),Nvidia在GTC 2026称这是“推理的拐点”。这意味着数据中心和厂商正为持续、频繁的推理请求调整产品与投资。