體驗了一下百度的大語言模型“文心一言”,并把相同的問題問了一下基于GPT4的Chat GPT和Newbing,簡單說一下感受:
1.問題的響應速度上,文心一言挺快的,和我使用Chat GPT Plus帳号基本一樣的速度,提問之後幾秒鐘内就會開始回複;
2.回答問題的準确度上,特别是涉及到一些事實性的資料上,文心一言和New bing都容易犯錯誤,Newbing可能是因為直接抓取網頁資料的原因,因為引用的信源不準确,給出的回答也是漏洞百出,而且很難糾正回來。百度的文心一言有的時候很準确,有的時候也是一本正經的胡說八道,好在經過人的反複提示最終可以回答出問題的正确答案(可附帶說的其他資訊又錯誤了)。這方面,Chat GPT回答的資訊都是準确的。隻不過可能訓練用的語料都是外網資訊,是以列舉的參數資訊也是海外版本的機型資訊。
3.文心一言在更具創造性的問題上的回答,内容的可操作性和詳細程度明顯不如Chat GPT,回答内容非常的模闆化和套路,總覺感覺就是“聽君一席話,勝似一席話”。而Chat GPT的回答則明顯更對題、更詳實。
4.文心一言比Chat GPT強一點的地方在于它直接內建了AI繪畫的能力“文心一格”,可以直接支援在對話框中輸入繪畫指令,并傳回AI生成的圖像結果,而Chat GPT目前還隻能回答文本内容。隻是百度的這個繪畫效果對比基于Open AI的Bing Creator差距非常明顯,前者算國小一年級水準,後者起碼算高中水準了。
總體來說,文心一言對比Chat GPT有明顯差距,但作為第一個官宣并開放測試的國産大模型,我覺得基本上達到了可用的狀态,而随着不斷的技術進步和疊代,體驗也會越來越好。另外,我看王小川今天也官宣開啟大模型創業,成立“百川智能”。前有王慧文,後有王小川,更多的大佬加入這個行業,國産大模型未來可期啊!