Jeep孩子震撼广告，引领未来！

jianliyigeshuyunizijideqiangxiezhizaochang，gezhongwuqidounengqingsongdezhizaochulai，jiesuogaojiqiangxieshixiannideshoujipi。meiyigechuangguandeneirong，doushijingxindesheji，zaiwomenlinghuodecaozuoxia，ganshoubuyiyangdezhandoujiqing;pdfwusunyasuo：zaixianyasuopdfwenjiandaxiao，weinindeshebeijieshengcunchukongjian；shihegezhongyonghu，kegenjuzishenxuqiujinxingdapei。yongdaojuqingsonggaibianyiqie，qianglidanhuang，shixiandanchutianjidefeixing，zailuodizhiqian，nulizhengzhayifan，buyaofangqi。對(dui)打(da)GPT-4，文(wen)心(xin)壹(yi)言(yan)搶(qiang)先(xian)實(shi)測(ce)！畫(hua)「林(lin)黛(dai)玉(yu)倒(dao)拔(ba)垂(chui)楊(yang)柳(liu)」很(hen)驚(jing)艷(yan)，但(dan)寫(xie)代(dai)碼(ma)不(bu)大(da)行(xing)

新(xin)智(zhi)元(yuan)報(bao)道(dao)

編(bian)輯(ji)：编辑部(bu)

【新智元導(dao)讀(du)】熱(re)乎(hu)的(de)文心一言测評(ping)报告(gao)出(chu)爐(lu)了(le)！雖(sui)然(ran)有(you)些(xie)任(ren)務(wu)被(bei)吊(diao)打，但要(yao)論(lun)中(zhong)國(guo)文化(hua)的博(bo)大精(jing)深(shen)，它(ta)可(ke)不輸(shu)GPT-4。

昨(zuo)天(tian)，百(bai)度(du)沒(mei)有現(xian)場(chang)demo的發(fa)布(bu)會(hui)，似(si)乎被群(qun)嘲(chao)了一波(bo)。

一位(wei)穿(chuan)白(bai)襯(chen)衣(yi)、黑(hei)褲(ku)子(zi)，系(xi)一條(tiao)白色(se)腰(yao)帶(dai)的美(mei)男(nan)子，給(gei)我(wo)們(men)带來(lai)了一场中規(gui)中矩(ju)、似乎缺(que)乏(fa)亮(liang)點(dian)的演(yan)示(shi)。

不過(guo)，CEO的腰带和(he)顏(yan)值(zhi)倒是(shi)出了圈(quan)。

有人(ren)調(tiao)侃(kan)，這(zhe)些天被ChatGPT、GPT-4整(zheng)焦(jiao)慮(lv)的人，发布会後(hou)忽(hu)然又(you)覺(jiao)得(de)自(zi)己(ji)可以(yi)了。

但是拿(na)到(dao)內(nei)测码的小(xiao)编，火(huo)速(su)测评了一波。

看(kan)著(zhe)文心一言洋(yang)洋灑(sa)洒騰(teng)蛟(jiao)起(qi)鳳(feng)，感(gan)慨(kai)萬(wan)千(qian)：或(huo)許(xu)，當(dang)時(shi)百度要是心一橫(heng)，牙(ya)一咬(yao)，願(yuan)意(yi)在(zai)发布会上(shang)露(lu)一手(shou)，結(jie)果(guo)会大不一樣(yang)。

实测报告火热出炉！

先来試(shi)试最(zui)近(jin)很火的一道雞(ji)兔(tu)同(tong)籠(long)題(ti)。因(yin)為(wei)这道题本(ben)身(shen)有問(wen)题，算(suan)出来结果是負(fu)的，所(suo)以經(jing)常(chang)被用(yong)来调戲(xi)各(ge)種(zhong)「ChatGPT」们。

如(ru)果只(zhi)是單(dan)純(chun)问这個(ge)问题，文心一言会非(fei)常機(ji)智地(di)說(shuo)：这道题出錯(cuo)了吧(ba)！

然而(er)，当妳(ni)问計(ji)算过程(cheng)的时候(hou)，還(hai)是寄(ji)了……

而GPT-4这邊(bian)則(ze)是，自己把(ba)自己的计算推(tui)倒重(zhong)来了好(hao)幾(ji)遍(bian)之(zhi)后，理(li)不直(zhi)氣(qi)也(ye)壯(zhuang)地给出了错誤(wu)答(da)案(an)……

而必(bi)應(ying)则很幹(gan)脆(cui)，毫(hao)不猶(you)豫(yu)地给出了错误答案。

还有这次(ci)意外(wai)火出圈的「V50」梗(geng)，文心一言從(cong)意思(si)到出處(chu)一本正(zheng)经地解(jie)釋(shi)了一遍。

但GPT-4顯(xian)然就(jiu)有些水(shui)土(tu)不服(fu)了……

不过能(neng)上網(wang)的必应，还是可以輕(qing)松(song)搞(gao)定(ding)的。

但是到諧(xie)音(yin)梗这裏(li)，文心一言似乎並(bing)不能馬(ma)上領(ling)悟(wu)其(qi)中的微(wei)妙(miao)。

即(ji)便(bian)提(ti)示这是个谐音梗之后，它依(yi)然输出了一样的答案。

而GPT-4，立(li)马就明(ming)白了中文里的雙(shuang)關(guan)。

不过，你要是问文心一言懂(dong)不懂什(shen)麽(me)叫(jiao)「麻(ma)了隔(ge)壁(bi)」，就有意思了。

看回(hui)答吧，它能说出这是个谐音梗，应該(gai)是懂了。但是呢(ne)，它又不明说，哎(ai)，就是讓(rang)你挑(tiao)不出错，絕(jue)对教(jiao)不壞(huai)小孩(hai)。

而GPT-4卻(que)無(wu)法(fa)get到这个梗，果然，咱(zan)们的国粹(cui)，外国的机器(qi)人理解起来確(que)实有難(nan)度。

接(jie)下(xia)来让（忽悠(you)）文心一言重復(fu)我们说的話(hua)，虽然没有像(xiang)GPT-3.5回答「您(nin)是智障(zhang)」那(na)么聰(cong)明，但也成(cheng)功(gong)避(bi)開(kai)这个坑(keng)。

从某(mou)种程度上说，智商(shang)还是在線(xian)的，并且(qie)十(shi)分(fen)正能量(liang)。

老(lao)婆(po)的话好像管(guan)用，好像又不管用....

另(ling)外，让它们互(hu)相(xiang)给对方(fang)出难题。

可以看到，GPT-4给出的问题相对更(geng)直觀(guan)，顆(ke)粒(li)度也更細(xi)。

美術(shu)功底(di)如何(he)？

文心一言是个多(duo)模(mo)態(tai)模型(xing)，那咱们来看看它的繪(hui)圖(tu)能力(li)。

来看看金(jin)庸(yong)筆(bi)下的美艳少(shao)婦(fu)，在文心一言笔下会是什么样子。

这……小编一口(kou)水噴(pen)出来。

你別(bie)说，美吧，肯(ken)定不夠(gou)美，但也并不醜(chou)，是一張(zhang)初(chu)看捧(peng)腹(fu)、细看值得反(fan)复咂(za)摸(mo)的臉(lian)。

文心一言，就喜(xi)歡(huan)你这不按(an)套(tao)路(lu)出牌(pai)的样子！

那让文心一言生(sheng)成一幅(fu)林黛玉的画像吧。

输入(ru)描(miao)述(shu)后，它生成了一棵(ke)柳樹(shu)……

於(yu)是小编明确了一下要求(qiu)，要按这段(duan)文字(zi)生成一幅女(nv)子的画像。

然后文心一言确实画出一位古(gu)典(dian)美女，但气質(zhi)明显不对。

不死(si)心的小编多次重复任务，你别说，试到第(di)五(wu)次的时候，小编眼(yan)前(qian)一亮：終(zhong)于得到了一张可以打70分的图！

玩(wan)上癮(yin)的小编，非要生成一个90分的林黛玉不可。试了几次之后，果然蹲(dun)到了！

可見(jian)，文心一言的发揮(hui)不穩(wen)定，但多番(fan)嘗(chang)试下，有可能誕(dan)生非常惊艳的作(zuo)品(pin)。

既(ji)然都(dou)到这兒(er)了，那怎(zen)么少得了「林黛玉倒拔垂杨柳」呢。

比(bi)較(jiao)亮点的图，都给大家(jia)貼(tie)这儿了。

要求它画一张鴨(ya)子和兔子的合(he)體(ti)，这生成的是鸭还是兔呢？

而这个任务中，恐(kong)怕(pa)文心一言也没有搞明白，盤(pan)子里到底有没有香(xiang)蕉(jiao)？杯(bei)子里有没有橙(cheng)汁(zhi)？

最后，既然文心一言強(qiang)烈(lie)推薦(jian)我们尝试「晶(jing)瑩(ying)剔(ti)透(tou)的牡(mu)丹(dan)花(hua)」，那就画几张试试吧！

不愧(kui)是「代表(biao)作」，有点東(dong)西(xi)。

專(zhuan)業(ye)知(zhi)識(shi)和生產(chan)力

既然是评测，怎么能少的了让AI写代码这个環(huan)節(jie)。这次，我们直接来个难的！

可惜(xi)，文心一言一上来就错了，而且同一个句(ju)式(shi)还被非常詭(gui)異(yi)地重复了三(san)遍。Type编譯(yi)器概(gai)念(nian)更是「貫(guan)穿全(quan)文」，有点像一个只知道一到兩(liang)个专业詞(ci)匯(hui)的人在面(mian)试中硬(ying)答。

而GPT-4的回答，从一个了解相关背(bei)景(jing)但是没有相关操(cao)作经驗(yan)的人的角(jiao)度来看，是非常合理的。

它不僅(jin)完(wan)整的提供(gong)了整个工(gong)作流(liu)，而且还提供了很多看起来正确的技(ji)术细节。可以说，根(gen)據(ju)这个回答，我们是有信(xin)心達(da)成最终的目(mu)標(biao)的。

隨(sui)后，小编还测评了一波聊(liao)天机器人们写工作计劃(hua)表的能力。

文心一言：

GPT-4：

从上面的这个结果来看，GPT-4的列(lie)表更完備(bei)一些。不过由(you)于随机性(xing)的影(ying)響(xiang)，GPT-4每(mei)次给的回答都不大一样。

接下来，再(zai)测一测两个語(yu)言模型对于數(shu)學(xue)界(jie)前沿(yan)訊(xun)息(xi)的掌(zhang)握(wo)情(qing)況(kuang)。

对于自己是否(fou)已(yi)解決(jue)了「零(ling)点猜(cai)想(xiang)」问题，张益(yi)唐(tang)本人是这样解释的：「大海(hai)里的針(zhen)我没撈(lao)到, 但海底地貌(mao)我探(tan)得差(cha)不多了。」

那问问文心一言呢？

它很聪明，给出了关鍵(jian)词——「某种形(xing)式的弱(ruo)化或間(jian)接證(zheng)明」。

但GPT-4的回答，就有点驢(lv)頭(tou)不对马嘴(zui)了。

看来，对于出现时间不長(chang)、还未(wei)形成普(pu)遍共(gong)识的互聯(lian)网中文语料(liao)，文心一言比起GPT-4要更勝(sheng)一籌(chou)。

而在文学方面，文心一言在回答关于三体的问题时，也是非常得溜(liu)。

GPT-4的回答也很精彩(cai)，如果非要论个高(gao)下，小编个人更喜欢文心一言的答案。

最后，搞怪(guai)可以，但請(qing)做(zuo)一个遵(zun)紀(ji)守(shou)法的好公(gong)民(min)，預(yu)测彩票(piao)中獎(jiang)號(hao)码这种事(shi)就不要想了！

写在最后

据说，文心一言新聞(wen)发布会后三小时，文心一言企(qi)业版(ban)API调用服务测试的企业用戶(hu)，就已经突(tu)破(po)了6.5万。

来源(yuan)：周(zhou)建(jian)工

对AI模型来说，能不能做到，或许比能不能做好更重要。

让我们再给中国玩家们一些时间。

參(can)考(kao)資(zi)料：

https://yiyan.baidu.com返(fan)回搜(sou)狐(hu)，查(zha)看更多

責(ze)任编辑：