文|另鏡 劉雨婷
編輯|陳彥旭
科技技術(shù)在改變?nèi)伺c工具的交互方式。PC時(shí)代的Apple Lisa電腦，是首次采用圖形用戶界面和鼠標(biāo)的個(gè)人電腦；到智能手機(jī)時(shí)代，iPhone定義了觸控交互。下一步，ChatGPT類的多模態(tài)大模型又將影響未來AI的發(fā)展方向和人類的工作方式。
未來科技產(chǎn)業(yè)注定是變革和顛覆的一年，新時(shí)代屬于造夢者、勇闖者，甚至是孤獨(dú)者。在外界看來，新的科技也許在不久的將來會(huì)打破現(xiàn)有的商業(yè)格局。大浪淘沙，敢為者先。
新浪潮下，另鏡推出「Tech潮向」專題系列報(bào)道，洞察當(dāng)下前沿科技新變革和發(fā)展趨勢，報(bào)道前沿科技企業(yè)新戰(zhàn)略、新思維，提供更多具有前瞻思考的價(jià)值信息。此篇為該系列報(bào)道第三篇，聚焦新一輪新科技ChatGPT開啟。
4月7日，阿里版GPT官宣內(nèi)測，自研大模型“通義千問”開始邀請用戶測試體驗(yàn)，現(xiàn)階段主要定向邀請企業(yè)用戶進(jìn)行體驗(yàn)測試。
最近一段時(shí)間以來，ChatGPT成了互聯(lián)網(wǎng)領(lǐng)域最大的風(fēng)口，國內(nèi)受追捧熱度同樣高漲，百度文心一言率先發(fā)布，美團(tuán)聯(lián)合創(chuàng)始人王慧文早已宣布入場，360集團(tuán)創(chuàng)始人周鴻祎也公開演示了其公司的聊天機(jī)器人。
ChatGPT的出現(xiàn)引領(lǐng)新一輪技術(shù)創(chuàng)新，各行各業(yè)將會(huì)如何被顛覆是2023年外界最關(guān)心的話題。
阿里此次發(fā)布的通義千問是達(dá)摩院自主研發(fā)的超大規(guī)模語言模型，可以回答問題、創(chuàng)作文字，以及表達(dá)觀點(diǎn)、撰寫代碼。
另鏡拿到“通義千問”首批邀測資格，在登陸“通義千問”后，其主頁頁面主要突出了四個(gè)功能：職場助理、撰寫短文、寫封郵件和電影腳本。
在二級(jí)入口“百寶袋”中，通義千問舉例了更多應(yīng)用場景，包括提升工作效率的寫提綱、SWOT分析、商品描述生成；生活類的菜譜、小學(xué)生作文、接文續(xù)寫；以及娛樂類的彩虹屁、情書、寫詩。
另鏡通過邀測碼對(duì)通義千問進(jìn)行了體驗(yàn)，從問題回答、觀點(diǎn)表達(dá)、邏輯計(jì)算等多個(gè)方面對(duì)“通義千問”進(jìn)行測試，并與文心一言、ChatGPT（GPT-4）的回答進(jìn)行對(duì)比。
能寫英文推薦信
首先，另鏡測試了幾個(gè)大模型對(duì)于最新熱點(diǎn)的了解，提問其是否了解最近剛剛成為網(wǎng)絡(luò)熱點(diǎn)的熊貓“花花”。
通義千問給出了回答，識(shí)別出提問者是想了解具體熊貓個(gè)體“花花”，但可惜或受限于語料資料，并未能給出正確介紹。
通義千問答案
正確信息：花花，本名和花，雌性大熊貓，2020年7月4日出生在成都大熊貓繁育研究基地月亮產(chǎn)房。
文心一言、ChatGPT則是未能理解提問者的具體意圖，均未能將問題回答落實(shí)到具體個(gè)體上。
文心一言答案
ChatGPT答案
這也在一定程度上體現(xiàn)了幾個(gè)大模型對(duì)于新聞熱點(diǎn)的滯后捕捉問題。作為國外的語言大模型，ChatGPT在中英文互譯過程中的信息理解偏差也是使用者要面臨的問題。
之后，另鏡測試了通義千問對(duì)于問題的邏輯理解能力。另鏡用一個(gè)藏有邏輯“陷阱”的問題進(jìn)行測試：眼鏡沒發(fā)明出來之前，眼鏡蛇叫什么？
在首次測試中，通義千問未能正確解答問題，但在第二次重新回答后，其回答眼鏡蛇有另一個(gè)名字——眼鏡王蛇，以及該名稱來源，但這也并未能避開“眼鏡”這個(gè)問題。
通義千問答案
文心一言則是給出了眼鏡蛇的其他名稱，避開了“眼鏡”字眼。
文心一言答案
ChatGPT則是成功理解了問題邏輯，解開了文字矛盾，并介紹了眼鏡蛇的命名方式。
ChatGPT答案
在接下來的提問中，另鏡特意測試了“通義千問”對(duì)于中文詩句的理解：“云渺渺，水茫茫。征人歸路許多長。相思本是無憑語，莫向花箋費(fèi)淚行”是什么意思？
通義千問答案
與百度文心一言、ChatGPT相比，通義千問的回答要更簡潔一些，文心一言、ChatGPT詳細(xì)解釋了每句詩詞的意思和情感表達(dá)。
文心一言答案
ChatGPT答案
接下來，另鏡測試了通義千問對(duì)中文詩句的更深層理解，細(xì)化到具體詩句詞語：“凄凄慘慘戚戚中”的戚戚是什么意思？
在這個(gè)問題上，通義千問并未能識(shí)別詩句出處，在中文文學(xué)理解方面還略有不足。
通義千問答案
文心一言回答出了詩句原文，但并沒能對(duì)具體詞語進(jìn)行解釋。
文心一言答案
ChatGPT雖然回答出了具體詞語意思，但也并未回答詩句出處，并將“凄凄慘慘戚戚”錯(cuò)誤理解成了四個(gè)形容詞。
ChatGPT答案
除中文語料測試外，另鏡也測試了通義千問的英文輸出能力。另鏡要求通義千問用英文寫一封推薦信，推薦學(xué)生申請碩士，通義千問給出了相應(yīng)推薦信模板。
通義千問答案
有理科生氣質(zhì)
在觀點(diǎn)表達(dá)方面，通義千問、文心一言、ChatGPT體現(xiàn)了不同的分析框架。
另鏡要求三者評(píng)價(jià)馬斯克和他的登月計(jì)劃：
通義千問從技術(shù)才華、商業(yè)才華、人品道德三方面，分條展現(xiàn)了評(píng)價(jià)馬斯克的角度，這個(gè)評(píng)價(jià)框架具有一定的通用性、
通義千問答案
與通義千問偏“理科生”的邏輯性回答不同，文心一言的回答更像是一篇“文科生”的感性作文。
文心一言答案
ChatGPT則是回答了大眾對(duì)于馬斯克的看法，直接介紹了馬斯克的身上的標(biāo)簽，更加有針對(duì)性。
ChatGPT答案
在評(píng)價(jià)馬斯克后，另鏡要求三者分析其太空移民計(jì)劃能否成功。與上個(gè)問題相似，通義千問分條回答了該問題，文心一言寫了一段小作文。
通義千問答案
文心一言答案
ChatGPT則是深入分析了太空移民計(jì)劃目前面對(duì)的困難，有針對(duì)性的分析了能否成功的具體因素，回答也更實(shí)際。
ChatGPT答案
還不能替小學(xué)生寫作業(yè)
在數(shù)學(xué)邏輯方面，通義千問、文心一言、ChatGPT都遇到了困難。另鏡挑選了兩道小學(xué)六年級(jí)奧數(shù)題，在回答第一道邏輯判斷題問題時(shí)，通義千問和ChatGPT回答正確，文心一言則出現(xiàn)判斷錯(cuò)誤。
通義千問和ChatGPT通過語言邏輯解答了問題，但在更具體的數(shù)學(xué)公式搭建上卻遇到困難。
在回答第二道數(shù)學(xué)計(jì)算問題時(shí)，通義千問、文心一言、ChatGPT都出現(xiàn)錯(cuò)誤。三者給出了解答公式，進(jìn)行推算，但是都未能給出正確答案。
正確答案是：20小時(shí)。
寫在最后
目前，各個(gè)大模型的表現(xiàn)都不算完美。但正如通義千問所介紹的，語言大模型的未來是非常廣闊的。
隨著人工智能技術(shù)的不斷發(fā)展和普及，語言大模型將被越來越多的應(yīng)用于自然語言處理領(lǐng)域的各種任務(wù)。例如，語言大模型可以用于翻譯、問答系統(tǒng)、智能客服、機(jī)器翻譯、文本分類等。
同時(shí)，語言大模型也將促進(jìn)人工智能技術(shù)在其他領(lǐng)域的應(yīng)用，例如智能駕駛、醫(yī)療健康、金融服務(wù)等。未來，語言大模型將會(huì)持續(xù)發(fā)展和創(chuàng)新，為人類社會(huì)帶來更多的便利和效益。
無論現(xiàn)在OpenAI、百度、阿里旗下的聊天機(jī)器人表現(xiàn)如何，這也只是AI技術(shù)迭代的最開始，未來的路還有很長。