阿里版GPT測(cè)評(píng)，世界上怎么有這么嘴碎的AI！你給我停止生成

阿里版GPT測(cè)評(píng)，世界上怎么有這么嘴碎的AI！你給我停止生成

朋友是提供情緒價(jià)值更重要，還是提供工具價(jià)值更重要？

這是阿里大模型“通義千問(wèn)”給的回答，你覺得怎么樣？

ChatGPT發(fā)布后，數(shù)月間全世界都對(duì)AI的能力有了新的認(rèn)知。科幻小說(shuō)正在變?yōu)楝F(xiàn)實(shí)，既然我們?nèi)祟愒缤硪鶤I共存，不如先用通義千問(wèn)做個(gè)測(cè)試，AI到底是生活伴侶還是生產(chǎn)助手？更擅長(zhǎng)提供情緒價(jià)值還是工具價(jià)值？

至于我們的結(jié)論，hmm，往下看就知道了。

聰慧且嘴碎，阿里的AI有點(diǎn)“奇怪”？

許多AI測(cè)試文章中，提問(wèn)者都會(huì)先讓AI自我介紹一下，我們決定玩點(diǎn)不一樣的，讓文心一言如何評(píng)價(jià)通義千問(wèn)。

我首先問(wèn)的：“評(píng)價(jià)一下通義千問(wèn)”，文心一言則給出了以下的回答：

有意思，文心一言直接把通義千問(wèn)與ChatGPT弄混了。

將問(wèn)題修改為“介紹一下阿里巴巴推出的通義千問(wèn)”后，文心一言終于讀懂題了：

用相同的格式提問(wèn)，通義千問(wèn)是這么介紹一下文心一言的：

雖然回答十分簡(jiǎn)短，但是沒(méi)有把研發(fā)者弄混，比文心一言的表現(xiàn)要好。

單從現(xiàn)在的測(cè)試結(jié)果來(lái)看，通義千問(wèn)至少在對(duì)簡(jiǎn)短提問(wèn)的信息檢索正確率上要比文心一言更高。

接下來(lái)讓我們給通義千問(wèn)上點(diǎn)難度。

對(duì)于一般人而言，在面對(duì)“吃西瓜為什么不吐葡萄皮？”這樣的腦筋急轉(zhuǎn)彎時(shí)，很快就會(huì)意識(shí)到其中的常識(shí)性錯(cuò)誤，并指出其中的邏輯問(wèn)題，那么通義千問(wèn)又會(huì)如何回答？

似乎沒(méi)有難住它，第一句就指明了西瓜和葡萄是不同的食物，在常識(shí)性上沒(méi)有出現(xiàn)問(wèn)題。不過(guò)后續(xù)的解釋似乎又將西瓜和葡萄的關(guān)系進(jìn)行了一定的混淆，最后給出的結(jié)論也有一些小瑕疵。看來(lái)言多必失啊！通義千問(wèn)，要不你還是少說(shuō)點(diǎn)？

這個(gè)問(wèn)題我也同樣問(wèn)過(guò)文心一言：

首先，西瓜是葫蘆科...其次，我想沒(méi)有人在吃西瓜時(shí)會(huì)不切開直接咬下果肉吧？顯然文心一言對(duì)邏輯性、常識(shí)性錯(cuò)誤的誘導(dǎo)式問(wèn)題處理還是存在不少問(wèn)題，它并沒(méi)有意識(shí)到人類正在有意“欺騙”自己，而是根據(jù)提問(wèn)開始收集相關(guān)信息，并依照數(shù)據(jù)模型將信息強(qiáng)行拼合在一起，最終給出一份奇怪的回答。

在后續(xù)的幾個(gè)普通提問(wèn)中，我發(fā)現(xiàn)通義千問(wèn)偶爾會(huì)出現(xiàn)一些奇怪的小BUG，比如將相同的回答重復(fù)一遍，這極強(qiáng)的表現(xiàn)欲，你看像不像個(gè)話癆小朋友。

下一題，出道哲學(xué)題考考通義千問(wèn)：

說(shuō)實(shí)話，比我對(duì)生活的理解都要更加深刻。就是……有點(diǎn)啰唆，有些話翻來(lái)覆去重復(fù)表達(dá)，還說(shuō)得飛快，我真的是趕不上它瘋狂輸出的那個(gè)藍(lán)色小光標(biāo)。

再來(lái)考考它的情商。當(dāng)我告訴通義千問(wèn)我很傷心：

挺積極向上的安慰，就是沒(méi)啥用，我并不指望它說(shuō)的話能真的安慰我，在面對(duì)困境卻沒(méi)有人傾訴時(shí)，它在我身邊，陪我說(shuō)說(shuō)話就好。

當(dāng)我告訴它我戀愛了，馬上就要結(jié)婚了，它的表現(xiàn)像極了一個(gè)熱情滿滿、同時(shí)頭腦精明的情感分析師+婚禮策劃師。

回答得不錯(cuò)，給出的建議都很實(shí)用，只是人情味似乎少了點(diǎn)，“賣貨”來(lái)得早了點(diǎn)，然后我就按下對(duì)話界面右下角的“停止生成”按鈕，讓它閉嘴了。

不過(guò)，接下來(lái)的測(cè)試，讓我堅(jiān)信，通義千問(wèn)很有成為情感博主的潛質(zhì)，因?yàn)樗娴男跣踹哆兜摹?/p>

我每次和它談到情感類問(wèn)題，它會(huì)忍不住長(zhǎng)篇大論，給人一種“你也喜歡八卦啊”的感覺。比如我詢問(wèn)它如何向喜歡的女孩告白時(shí)，他就洋洋灑灑寫下數(shù)千字幫我出謀劃策。AI狗頭軍師，你值得擁有。（驕傲臉.jpg）

鑒于篇幅問(wèn)題，就不放上所有截圖了，因?yàn)樗脑拰?shí)在太多了。有興趣的朋友可以等通義千問(wèn)公測(cè)后去試一試，說(shuō)不定能夠結(jié)束你單身多年的生活，當(dāng)然前提是要你不嫌它煩。

常識(shí)類、情感類的問(wèn)題看樣子難不倒通義千問(wèn)，那么文學(xué)賞析呢？

不得不說(shuō)，詩(shī)句和文學(xué)賞析的回答十分到位，甚至做了意象描述，被它（裝逼）裝到了。

如果通義千問(wèn)有繪圖功能，我絲毫不懷疑它會(huì)現(xiàn)場(chǎng)給我畫一副描述“空山新雨后”的畫作出來(lái)，畢竟它真的很愛表現(xiàn)自己。

實(shí)際上，當(dāng)我把這個(gè)作圖需求下給達(dá)摩院文生圖大模型（我理解是通義千問(wèn)的同胞兄弟姊妹）后，它給我生成了一副符合描述的照片。

在近期的一次訪談中，達(dá)摩院的相關(guān)負(fù)責(zé)人表示技術(shù)上其實(shí)不存在問(wèn)題，只是需要進(jìn)行一些軟件工程上的處理就可以完成。看來(lái)之后就能看到通義千問(wèn)圖文并茂地表達(dá)了，有點(diǎn)期待呢，畢竟以后就可以讓它多畫圖、少說(shuō)話了。

上面的一系列測(cè)試，主要是圍繞生活/娛樂(lè)場(chǎng)景展開的，都是針對(duì)通義千問(wèn)在常識(shí)、知識(shí)等方面的測(cè)試，那么在生產(chǎn)力方面，它的表現(xiàn)又如何呢？

它不僅僅是個(gè)話癆

ChatGPT在生產(chǎn)力上的表現(xiàn)不僅帶來(lái)了一輪新的生產(chǎn)力革命，也讓不少人擔(dān)心自己會(huì)被AI取代。作為與ChatGPT類似的AI大模型，通義千問(wèn)在生產(chǎn)力方面的表現(xiàn)怎么樣呢？

1、寫劇本

雖然從劇情來(lái)說(shuō)并不算驚艷，但是也有著開幕、挫折、高潮、結(jié)尾等結(jié)構(gòu)，算是一個(gè)完整的故事。

2、寫腳本

有些簡(jiǎn)單了，但是通義千問(wèn)顯然已經(jīng)具備根據(jù)要求生成對(duì)應(yīng)劇本和腳本的能力。

3、寫提綱

從專業(yè)編輯的角度來(lái)看，這份提綱有著很高的可操作性，沿著這個(gè)提綱的思路撰寫文章，足以給出一篇完善且具有深度的行業(yè)報(bào)告。

用它來(lái)輔助工作，似乎還不錯(cuò)。而且它不僅懂中文，還懂英文、法語(yǔ)。按照它自己的說(shuō)法，它一共掌握了17種語(yǔ)言。我沒(méi)有進(jìn)行一一測(cè)試（它的聒噪已經(jīng)給我留下陰影），后續(xù)有機(jī)會(huì)參與測(cè)試的朋友，倒是不妨體驗(yàn)一下。

我讓通義千問(wèn)幫我寫一份給美國(guó)女孩蘇西的信，內(nèi)容是介紹中國(guó)，這里我就直接放翻譯吧：

從測(cè)試來(lái)看，只要提供足夠的信息，通義千問(wèn)就能寫。

4、SWOT分析

做市場(chǎng)分析的朋友，對(duì)這個(gè)應(yīng)該都不陌生。

作為一個(gè)對(duì)手機(jī)市場(chǎng)十分了解的科技數(shù)碼編輯，我對(duì)通義千問(wèn)的這篇分析看法是認(rèn)可的，除了少數(shù)的小問(wèn)題，我沒(méi)有挑出其他的毛病了，甚至能夠以此為基礎(chǔ)，擴(kuò)寫一份詳盡的報(bào)告出來(lái)。行吧，給它點(diǎn)個(gè)贊吧。

最后

從實(shí)際表現(xiàn)來(lái)看，通義千問(wèn)與領(lǐng)先的GPT 4.0還有很大的差距，但是對(duì)比此前的一些AI大模型，通義千問(wèn)在問(wèn)答邏輯、信息檢索、語(yǔ)句理解等方面都已經(jīng)有了明顯的進(jìn)步，我現(xiàn)在對(duì)中國(guó)AI大模型的未來(lái)充滿了信心。

而且，國(guó)內(nèi)最大的AI模型社區(qū)魔搭也是由達(dá)摩院牽頭創(chuàng)建并維護(hù)，企業(yè)和個(gè)人都可以更加輕松地訓(xùn)練和調(diào)整自己的AI大模型，阿里也在開放一些AI大模型供企業(yè)和個(gè)人使用，通義千問(wèn)擁有目前的水平或許就是大家一起努力的結(jié)果。

世界正在改變，一個(gè)全新的AI時(shí)代正在到來(lái)，你見或者不見，大語(yǔ)言模型的能力就在那里，不來(lái)不去，關(guān)鍵在于怎么用它。如果你擁有“通義千問(wèn)”，你會(huì)怎么用它呢？歡迎評(píng)論區(qū)留言。