慢思考准确率反降30%！普林斯顿揭示思维链某些任务上失效的秘密
慢思考准确率反降30%！普林斯顿揭示思维链某些任务上失效的秘密OpenAI o1彻底带火慢思考和思维链（CoT）方法，但CoT在某些任务上反而会降低模型表现。
来自主题: AI技术研报
4134 点击 2024-11-05 09:33
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
OpenAI o1彻底带火慢思考和思维链（CoT）方法，但CoT在某些任务上反而会降低模型表现。
近期，一家面向消费者的 AI 效率工具 Cove 获得世界顶级投资者 600 万美金种子轮投资，红杉资本及Elad Gil、Lenny Rachitsky、Scott Belsky等知名天使投资人参与了该项目投资。
CoT铸就了o1推理王者。 它开创了一种推理scaling新范式——随着算力增加、更长响应时间，o1性能也随之增长。
姚期智院士领衔，推出大模型新推理框架，CoT“王冠”戴不住了。
LLM说起谎来，如今是愈发炉火纯青了。 最近有用户发现，OpenAI o1在思考过程中明确地表示，自己意识到由于政策原因，不能透露内部的思维链。
多个LLM联合，可以迈向更强大系统！最新研究发现，GPT-4能够提升同伴的性能，能够让数学能力暴涨11.6%。
CoT只对数学、符号推理才起作用，其他的任务几乎没什么卵用！这是来自UT-Austin、霍普金斯、普林斯顿三大机构研究人员联手，分析了100+篇论文14类任务得出的结论。看来，CoT并非是所有大模型标配。
o1大火背后，最关键的技术是CoT。模型通过一步一步推理，恰恰是「慢思考」的核心要义。而这一观点，其实这家国内大厂早就率先实现了。
随OpenAI爆火的CoT，已经引发了大佬间的激战！谷歌DeepMind首席科学家Denny Zhou拿出一篇ICLR 2024论文称：CoT可以让Transformer推理无极限。但随即他就遭到了田渊栋和LeCun等的质疑。最终，CoT会是通往AGI的正确路径吗？
To CoT or not to CoT？