每日看點(diǎn)!阿里達(dá)摩院:GPT-4替代年薪60萬(wàn)的數(shù)據(jù)分析師只要幾千塊,論文已發(fā)
GPT-4替代初級(jí)數(shù)據(jù)分析師的成本只有0.71%,換成高級(jí)數(shù)據(jù)分析師則是0.45%……
(資料圖)
你沒(méi)看錯(cuò),是百分之零點(diǎn)七一,不是百分之七十一。
按新加坡行情,年薪8.6萬(wàn)-9萬(wàn)美元(60-63萬(wàn)人民幣)的高級(jí)數(shù)據(jù)分析師,換成GPT-4就只需要三四百美元(2000多人民幣)了。
這項(xiàng)結(jié)論來(lái)自阿里達(dá)摩院與新加坡南洋理工大學(xué)的新論文,被網(wǎng)友評(píng)價(jià)為對(duì)AI和數(shù)據(jù)分析領(lǐng)域感興趣的必讀論文。
具體來(lái)說(shuō),結(jié)論中高級(jí)分析師指在金融行業(yè)擁有多年工作經(jīng)驗(yàn)的數(shù)據(jù)分析師。
而GPT-4的表現(xiàn),在大多數(shù)指標(biāo)上能與一位6年工作經(jīng)驗(yàn)的人類相當(dāng),正確性低于人類,但復(fù)雜性和一致性指標(biāo)高于人類。
在與另一位5年工作經(jīng)驗(yàn)的分析師對(duì)比中,GPT-4在信息的正確性、圖表的美觀性、洞察的復(fù)雜性等方面輸給人類。
如果與2年工作經(jīng)驗(yàn)的初級(jí)分析師對(duì)比,GPT-4在正確性上表現(xiàn)更好,而且能完成更多的工作。
但GPT-4完成所有類型的任務(wù)都要比人類快得多。
在假設(shè)每個(gè)月有21個(gè)工作日,每天8小時(shí)工作時(shí)間,按市場(chǎng)價(jià)支付工資的前提下,得出最終結(jié)論。
GPT-4當(dāng)數(shù)據(jù)分析師,都能干什么
論文重點(diǎn)考察了GPT-4作為數(shù)據(jù)分析師的以下幾種能力:
從數(shù)據(jù)和外部知識(shí)源中分析數(shù)據(jù),得出結(jié)論
200個(gè)樣本的實(shí)驗(yàn)表明,對(duì)于繪制圖表任務(wù),GPT-4能夠理解指令含義,且對(duì)圖表類型有一定背景知識(shí),從而繪制出正確的圖表。
圖表大部分清晰可見(jiàn),沒(méi)有任何格式錯(cuò)誤,圖標(biāo)的美觀性指標(biāo)滿分3分,GPT-4平均得分2.73。
但手工檢查還是能發(fā)現(xiàn)一些小錯(cuò)誤,圖表準(zhǔn)確性指標(biāo)滿分1分,GPT-4平均得分0.78。
論文中特別說(shuō)明他們的評(píng)估標(biāo)準(zhǔn)非常嚴(yán)格,只要x軸或y軸的任何數(shù)據(jù)或任何標(biāo)簽有錯(cuò)誤,都要扣分。
對(duì)于數(shù)據(jù)分析任務(wù),GPT-4在一致性和流暢性中平均得到滿分,驗(yàn)證了生成流暢且語(yǔ)法正確的句子對(duì)GPT-4來(lái)說(shuō)絕對(duì)不是問(wèn)題。
有意思的是,到了數(shù)據(jù)分析這一步的準(zhǔn)確性要比圖表信息的準(zhǔn)確性高得多,說(shuō)明盡管GPT-4畫(huà)了錯(cuò)誤的圖表但分析出了正確的結(jié)論。
在案例分析中,研究團(tuán)隊(duì)還總結(jié)出三條GPT-4與人類數(shù)據(jù)分析師的主要區(qū)別:
人類分析師可以用個(gè)人思想和情感來(lái)表達(dá),比如在分析時(shí)寫(xiě)“令人驚訝的是……”;人類讀者容易從這樣的表述中理解數(shù)據(jù)是符合預(yù)期還是不正常的。
人類分析師傾向于結(jié)合背景知識(shí)得出結(jié)論,如寫(xiě)到“……常見(jiàn)于……”;GPT-4通常只關(guān)注提取到的數(shù)據(jù)本身,允許GPT-4上網(wǎng)搜索實(shí)時(shí)在線信息可以改善這一點(diǎn)。
當(dāng)提供見(jiàn)解或建議時(shí),人類分析師傾向于保守,如聲明“假如數(shù)據(jù)沒(méi)有問(wèn)題的話……”;GPT-4會(huì)以自信的語(yǔ)氣直接給出建議,不會(huì)提及假設(shè)。
另外團(tuán)隊(duì)表示,由于預(yù)算有限,主要是雇一個(gè)來(lái)與GPT-4對(duì)比的高級(jí)分析師太貴了,人工評(píng)估和數(shù)據(jù)標(biāo)注的數(shù)量相對(duì)較少。
在最后的結(jié)論則是:
實(shí)驗(yàn)結(jié)果和分析表明,GPT-4在數(shù)據(jù)分析上有與人類相當(dāng)?shù)男阅埽欠窨梢匀〈鷶?shù)據(jù)分析師需要近一步研究才能得出結(jié)論。
論文:https://arxiv.org/abs/2305.15038
— 完—
本文來(lái)源:量子位 (ID:QbitAI),原文標(biāo)題:《阿里達(dá)摩院:GPT-4替代年薪60萬(wàn)的數(shù)據(jù)分析師只要幾千塊,論文已發(fā)》
風(fēng)險(xiǎn)提示及免責(zé)條款 市場(chǎng)有風(fēng)險(xiǎn),投資需謹(jǐn)慎。本文不構(gòu)成個(gè)人投資建議,也未考慮到個(gè)別用戶特殊的投資目標(biāo)、財(cái)務(wù)狀況或需要。用戶應(yīng)考慮本文中的任何意見(jiàn)、觀點(diǎn)或結(jié)論是否符合其特定狀況。據(jù)此投資,責(zé)任自負(fù)。關(guān)鍵詞: