如何解决模型生成幻觉一直是人工智能（AI）领域的一个悬而未解的问题。为了测量语言模型的事实正确性，近期 OpenAI 发布并开源了一个名为 SimpleQA 的评测集。而我们也同样一直在关注模型事实正确性这一领域，目前该领域存在数据过时、评测不准和覆盖不全等问题。例如现在大家广泛使用的知识评测集还是 CommonSenseQA、CMMLU 和 C-Eval 等选择题形式的评测集。
最近忽然很想玩小游戏。 不用多复杂，最基础的扫雷、空当接龙就行。 奈何电脑是os系统，不能一键转换到“摸鱼”小游戏模式，我斗胆问了下大模型，能否一键帮我生成。 别说，还都应了我。
计算机科学、数学、自然科学、医学、语言学、社会科学……OpenAI o1擅长什么？还有哪些不足？
一键获得作业批改“高替”。
至少到现在，MiniMax还未收费。
大模型竞技场规则更新，GPT-4o mini排名立刻雪崩，跌出前10。
信券商，还是信AIGC？
随着大模型研究的深入，如何将其推广到更多的模态上已经成为了学术界和产业界的热点。最近发布的闭源大模型如 GPT-4o、Claude 3.5 等都已经具备了超强的图像理解能力，LLaVA-NeXT、MiniCPM、InternVL 等开源领域模型也展现出了越来越接近闭源的性能。
评估大模型是否诚实的基准来了！
上周，一个名为 “im-also-a-good-gpt2-chatbot” 的神秘模型突然现身大模型竞技场 Chatbot Arena
