文心一言和chatgpt4对比 文心一言 vs ChatGPT:AI语言模型对话能力对比

AI资讯1年前 (2023)发布 fengdao
30 0

文心一言和 作为国内外最具代表性的基于人工智能的自然语言处理系统,它们能够模仿人类的对话方式,通过机器学习算法对大量数据进行学习,从而实现对话的能力。然而,它们的对话能力差异也是一个备受关注的问题。

本文将从不同的对话场景出发,比较百度文心一言语和在问答、聊天、翻译和个性化等方面的表现,看看这两者的变现如何,同时也展望了未来AI语言模型在对话系统中的发展趋势。

终于获得了文心一言的体验资格,赶紧来对比一下。

在开始前,先让它们各自做个自我介绍吧。

文心一言(浅色图,后同)

(深色图,后同)

对话场景一:问答

先来个简单的:

第一个问题 不仅进行了回答还作了一定的补充说明显得很有诚意;而第二个问题两者的答案就不太一样了,一个说鸡精里有鸡,一个说鸡精里没鸡。

先不管,咱接着往下问试试:

文心一言的答案有些前后矛盾了,在我进一步追问之下,虽然敢于认错,但是不免让人怀疑。

文心一言和chatgpt4对比_文心一言和chatgpt4对比_文心一言和chatgpt4对比

而 这里竟然还分步骤给了制作过程,并且认定鸡精里就是没有鸡。

我自己是既不吃味精也不吃鸡精的,所以我查找了一下其他内容源,结果是两种说法都有,文心一言的答案像是来自于百度百科(毕竟是自家的内容源)。

好了,不纠结,咱换个问题再试试:

这个问题,文心一言回答是在梦里,而 回答是身体和意识在现实中、但思维和感官体验在梦中,并且两者都给出了一些解释。

但是,咱也不清楚谁对谁不对。

对话场景二:这是什么

我将使用一段提示语让文心一言和 来分析我发送的内容是什么?

这次,文心一言首先在理解能力明显差了不少,问了几轮才给出了一本正经胡说八道的答案。

而 对提示语的任务要求和对内容的分析表现都很好,不管对我提示语中的回复格式、回答需求甚至是回答结果都是相当准确的。

对话场景三:代码

文心一言和chatgpt4对比_文心一言和chatgpt4对比_文心一言和chatgpt4对比

先写个正则试试吧:

这两个正则表达式,看起来 的结果更准备一点。

接下来,我让两者尝试写一个从百度百科页面抓取内容的代码:

我不懂代码,但是 确实是按照我的提示以“AC米兰足球俱乐部”的百度百科页面为例而写的代码并给了输出结果,此外输出结果更符合我想要的结果。

对话场景四:翻译

两者在这句诗的中译英时,文心一言将鹜翻译为鹅的复数形式(geese),而 翻译为野鸭(wild duck),但就这个词来说好像 更准确一点,但是紧接着我让它们回头再将它们的英文译文再翻译为中文时,文心一言翻译准确, 则不太行。

通过对比百度文心一言语和 在上述几个对话场景下的表现,我们可以看到它们各自的优劣势。 对人话(也就是我给的提示语)的理解能力更强,更能按照我的要求去执行,这还是在我全程都是使用中文提示语的前提下,而文心一言则仅仅在最后的译文回译上准确还原了原文,说实话,这有点出乎意料了,百度的中文语义理解不应该是表现如此呀。

最后,需要说明的是,本文仅仅是对百度文心一言语和在几个对话场景下的简单比较,并不能完全代表它们的全部能力。后续我还会进行更多的研究和实践,进一步探索两者的AI能力。

© 版权声明

相关文章

暂无评论

暂无评论...