刚刚过去的Ignite 2023大会上,纳德拉曾宣布Bing Chat全线更名Copilot,并表示:
Copilot无处不在。
今天,微软再次推出Copilot一系列重磅级更新。
它将集成OpenAI最新模型GPT-4 Turbo、DALL-E 3、以及代码解释器(Code Interpreter)能力,并在未来几周推出。
另外,必应还开始了AI「深度搜索」功能的内测,可以把简单问题瞬间转化为详细的提示,不会prompt也不用怕了。
如此看来,你还有必要买ChatGPT Plus的会员吗?网友做了一张对比图。
早在今年2月,微软首次推出了直接对标ChatGPT的聊天机器人——Bing Chat。
这也就是,AI助手Copilot初次以这样的方式诞生。
自此十个月左右的时间,GPT-4加持全新Copilot正式接入Office全家桶、Windows 11、Edge浏览器,以及Microsoft 365订阅服务。
再到Ignite大会上,Bing Chat全线更名Copilot后,微软宣布每个人都将有一个AI Copilot。
而现在,最令人振奋的是,OpenAI最新的GPT-4 Turbo模型,马上也能在Copilot用上了。
128k超长上下文,意味着Copilot将拥有更强的理解查询能力,处理更复杂、更长的任务。
另外,更新后DALL-E 3模型也将集成到Copilot中,能够创建更高质量、更符合提示的图像。
DALL-E 3模型的改进
所有的Edge用户可以通过Copilot在网页上轻松实现编写。只需选择要更改的文本,然后让Copilot重写即可。
前段时间,已经有网友在Reddit上发布了自己体验这一新功能的效果。
你还可以使用Edge中的Copilot,汇总在YouTube上观看的视频。
多模态搜索(search grounding)能力也将推出。微软将GPT-4的强大视觉能力,与必应图像搜索和网络搜索数据相结合,就可以实现更好的图片搜索。
就比如,以前发送一张图,模型只会给出描述。而search grounding能够给出火箭的型号、发射的具体日期。
多模态搜索
Copilot也将得到code interpreter能力的加持。开发者便可以通过Copilot就能获得更准确的计算、数据分析,甚至是代码。
用户还可以在Copilot上传和下载文件,这样就可以使用自己的数据和代码,以及必应的搜索结果。
微软表示,Copilot将编写代码来回答复杂的自然语言请求,在沙盒环境中运行该代码,并使用结果为用户提供更高质量的回复。
Copilot全新code interpreter功能
Copilot强大的Python环境在Azure Container应用程序之上构建的安全沙箱环境中运行。
它提供了快速、与用户隔离的环境,并且预装了许多流行的数据科学工具和库,如 pandas、numpy、matplotlib、sklearn、flask 等,以解决复杂的问题。
你可以将Copilot从Bing搜索和网络上获得的数据,与上传的文件中的数据结合起来,进而获得深入相关的洞察,以及更好的交互式的输出。
在必应中,微软也将推出全新功能「深度搜索」,完全是不会prompt用户的福音。
「深度搜索」基于必应的网络索引和排名系统之上,并得到了GPT-4的加持。
这样,当你在在查询问题时,「深度搜索」可以对提示进行扩展,进而让搜索引擎能够找到与问题相关的多个主题的答案。
不过,若想使用「深度搜索」这一功能,必须得有耐心。
一次「深度搜索」需要长达30秒的时间,而必应的常规搜索,可以在不到1秒时间内给出结果。
举个栗子,必应能够将「日本积分系统如何运作」这样模糊的提示,转化为更加全面的提示描述:
解释各种会员卡计划在日本的运作方式,包括每种计划的好处、要求和限制。举例说明不同类别(例如便利店、超市和餐馆)的流行会员卡。比较在日本使用会员卡和其他支付方式的优缺点,包括当前的奖励和优惠。重点介绍最受欢迎的服务和参与商户。
不过,有些查询是模棱两可的。
还拿上面的例子来看,「积分系统在日本如何运作」可以指奖励积分,但也可以指有关移民政策或其他方面的信息
这时,「深度搜索」通过GPT-4来查找所有可能的意图,将搜索范围扩大到移民政策和公共交通票价的描述。
如果你的意图被误解了,你可以从下面的提示窗口中,选择贴切的方向。
必应会以这项任务为中心,对网络进行更深入的搜索,并拉回通常不会出现在典型搜索结果中的相关结果。
深度搜索结合使用了多种查询技术,以查找可能与用户扩展查询相匹配的网页,代表用户改写查询,并搜索重写后的查询。
比如,对于「积分查询」,「深度搜索」可能还会尝试搜索:
- 日本会员卡计划
- 日本最适合旅行者的会员卡
- 按类别对日本忠诚度计划比较
- 在日本兑换会员卡
- 使用手机应用管理忠诚度积分
这样一来,「深度搜索」可以找到涵盖查询不同方面的结果,即使这些结果没有明确包含原始关键词。
在必应上进行常规搜索时,每次搜索都要涉及数百万个网页,而「深度搜索」的搜索结果要比常规搜索排名靠前的结果多10倍,信息量更大、更具体。
可以看到,必应搜索到的任何主题,都将显示在搜索结果的面板中。
然后,你可以选择最适合自己要查找的内容,「深度搜索」将通过与综合描述的匹配程度,对搜索结果进行排序。
「深度搜索」通过各种信号来确定每个结果的相关性和质量,同时考虑主题匹配程度、是否达到了适当的详细程度、来源的可信度和可信度、新鲜度和流行度等。
微软在官方博客中表示,「深度搜索」适合对于有复杂问题并且不满足于简单答案的用户而设计,是一个可选项。
另外,你还可以在Edge浏览器上还可以对正在观看的视频进行总结或提问。
比如,让Copilot帮忙总结一下纳德拉最新的Ignite主题演讲视频。
或者是老黄在Computex 2023的演讲。
可以看到,Copilot给出的关键点还是相当准确的——在视频25分钟的时候,老黄发布了全新的定制AI模型服务Avatar Cloud Engine (ACE) 。
目前,这个功能已经正式上线,有兴趣的读者可以去尝试尝试~
参考资料:
https://blogs.microsoft.com/blog/2023/12/05/celebrating-the-first-year-of-copilot-with-significant-new-innovations/
文章来自于微信公众号 “新智元”
【开源免费】DeepBI是一款AI原生的数据分析平台。DeepBI充分利用大语言模型的能力来探索、查询、可视化和共享来自任何数据源的数据。用户可以使用DeepBI洞察数据并做出数据驱动的决策。
项目地址:https://github.com/DeepInsight-AI/DeepBI?tab=readme-ov-file
本地安装:https://www.deepbi.com/
【开源免费】airda(Air Data Agent)是面向数据分析的AI智能体,能够理解数据开发和数据分析需求、根据用户需要让数据可视化。
项目地址:https://github.com/hitsz-ids/airda
【开源免费】MindSearch是一个模仿人类思考方式的AI搜索引擎框架,其性能可与 Perplexity和ChatGPT-Web相媲美。
项目地址:https://github.com/InternLM/MindSearch
在线使用:https://mindsearch.openxlab.org.cn/
【开源免费】Morphic是一个由AI驱动的搜索引擎。该项目开源免费,搜索结果包含文本,图片,视频等各种AI搜索所需要的必备功能。相对于其他开源AI搜索项目,测试搜索结果最好。
项目地址:https://github.com/miurla/morphic/tree/main
在线使用:https://www.morphic.sh/
【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。
项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md
在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0