梦晨 发自 凹非寺量子位 | 公众号 QbitAI

GPT-4替代初级数据分析师的成本只有0.71%，换成高级数据分析师则是0.45%……

你没看错，是百分之零点七一，不是百分之七十一。

GPT-4当数据分析师，都能干什么

论文重点考察了GPT-4作为数据分析师的以下几种能力：

生成SQL和Python代码执行代码获得数据和图表从数据和外部知识源中分析数据，得出结论

对于数据分析任务，GPT-4在一致性和流畅性中平均得到满分，验证了生成流畅且语法正确的句子对GPT-4来说绝对不是问题。

有意思的是，到了数据分析这一步的准确性要比图表信息的准确性高得多，说明尽管GPT-4画了错误的图表但分析出了正确的结论。

在案例分析中，研究团队还总结出三条GPT-4与人类数据分析师的主要区别：

人类分析师可以用个人思想和情感来表达，比如在分析时写“令人惊讶的是……”；人类读者容易从这样的表述中理解数据是符合预期还是不正常的。人类分析师倾向于结合背景知识得出结论，如写到“……常见于……”；GPT-4通常只关注提取到的数据本身，允许GPT-4上网搜索实时在线信息可以改善这一点。当提供见解或建议时，人类分析师倾向于保守，如声明“假如数据没有问题的话……”；GPT-4会以自信的语气直接给出建议，不会提及假设。

另外团队表示，由于预算有限，主要是雇一个来与GPT-4对比的高级分析师太贵了，人工评估和数据标注的数量相对较少。

在最后的结论则是：

实验结果和分析表明，GPT-4在数据分析上有与人类相当的性能，但是否可以取代数据分析师需要近一步研究才能得出结论。

论文：https://arxiv.org/abs/2305.15038

— 完 —

量子位 QbitAI · 头条号签约

关注我们，第一时间获知前沿科技动态