阿里達(dá)摩院：GPT-4的成本只有高級(jí)數(shù)據(jù)分析員的0.45％

5 月 24 日，阿里達(dá)摩院發(fā)布了一個(gè)關(guān)于用 GPT-4 取代數(shù)據(jù)分析師的成本核算的研究論文。

該論文指出：“除了所有數(shù)據(jù)分析師和 GPT-4 之間的可比績(jī)效外，我們可以注意到 GPT-4 所花費(fèi)的時(shí)間要比人類數(shù)據(jù)分析師短得多。我們假設(shè)每個(gè)月有大約 21 個(gè)工作日，每天工作 8 小時(shí)左右，并根據(jù)每個(gè)級(jí)別的數(shù)據(jù)分析師所花費(fèi)的平均時(shí)間計(jì)算出每個(gè)實(shí)例在美元方面的成本。GPT4 的成本約為初級(jí)數(shù)據(jù)分析員成本的 0.71％和高級(jí)數(shù)據(jù)分析員成本的 0.45％?！?/p>

這篇來(lái)自阿里達(dá)摩院與新加坡南洋理工大學(xué)的新論文，主要探討了 GPT-4 能否做好數(shù)據(jù)分析師的工作，論文標(biāo)題為“Is GPT-4 a Good Data Analyst?”

該論文重點(diǎn)考察了 GPT-4 作為數(shù)據(jù)分析師的以下幾種能力：

生成 SQL 和 Python 代碼；

執(zhí)行代碼獲得數(shù)據(jù)和圖表；

從數(shù)據(jù)和外部知識(shí)源中分析數(shù)據(jù)，得出結(jié)論。

在 5.3 節(jié)“主要結(jié)果”中，該論文指出，GPT-4 的表現(xiàn)，在大多數(shù)指標(biāo)上能與一位金融行業(yè)工作 6 年的人類相當(dāng)，正確性低于人類，但復(fù)雜性和一致性指標(biāo)高于人類。在與另一位 5 年工作經(jīng)驗(yàn)的分析師對(duì)比中，GPT-4 在信息的正確性、圖表的美觀性、洞察的復(fù)雜性等方面輸給人類。如果與 2 年工作經(jīng)驗(yàn)的初級(jí)分析師對(duì)比，GPT-4 在正確性上表現(xiàn)更好，而且能完成更多的工作。

雖然在高級(jí)數(shù)據(jù)分析任務(wù)中，GPT-4 目前的準(zhǔn)確性低于人類，但是勝在成本便宜。

也就是說(shuō)，根據(jù)實(shí)驗(yàn)結(jié)果和分析，GPT-4 在數(shù)據(jù)分析上有與人類相當(dāng)?shù)男阅?，但是否可以取代?shù)據(jù)分析師需要近一步研究才能得出結(jié)論。

論文地址：https://arxiv.org/abs/2305.15038