数据分析师工作保不住了？阿里达摩院发现，GPT-4 成本只需几千元
作者 | 核子可乐、凌敏
GPT-4 真的可以取代数据分析师吗？
今年 3 月 14 日，OpenAI 发布了新“**”——GPT-4。OpenAI 联合创始人 Sam Altman 表示，GPT-4 是“迄今为止功能最强大的语言模型”。与上一代相比，GPT-4 更强大更可靠，且更有创造性。
GPT-4 的发布让更多的人意识到，在聊天之外，人工智能的能力已不断扩展，并引发了部分人群对职业危机的担忧。有开发者担心，在未来的几十年内，AI 会循序渐进地取代一些开发岗位。
不过，GPT-4 的“野心”似乎不止于此，“取代程序员”浪潮未过，新一轮“取代潮”已经掀起。这一次，GPT-4 瞄准了年薪 60 万的数据分析师。
近日，阿里达摩院与新加坡南洋理工大学发布了一个关于用 GPT-4 取代数据分析师的成本核算的研究**。**指出，随着 LLM 的兴起和流行，不仅在 NLP 社区，其他诸多领域的人们都在考虑、或者担心自己的岗位可能被 AI 所取代。其中数据分析师成为 AI 时代下“首当其冲”的取代对象。
**认为，数据分析师的主要工作内容就是从业务数据中识别出有意义的模式和趋势，并为利益相关者提供有价值的见解、协助制定战略决策。为了实现这个目标，数据分析师必须具备多种技能，包括 SQL 查询编写、数据清洗和转换、可视化生成和数据分析。由于工作流程相对较为固化确定，因此公众对于 AI 是否将取代数据分析师展开了激烈讨论。
**指出：“除了所有数据分析师和 GPT-4 之间的可比绩效外，我们可以注意到 GPT-4 所花费的时间要比人类数据分析师短得多。我们假设每个月有大约 21 个工作日，每天工作 8 小时左右，并根据每个级别的数据分析师所花费的平均时间计算出每个实例在美元方面的成本。GPT-4 的成本约为初级数据分析师成本的 0.71％和高级数据分析师成本的 0.45％。”
在脉脉上，不少数据分析师岗位给到了月薪 40k 以上，以高级数据分析师年薪 60 万元为例，GPT-4 的成本大概在 2700 元左右。
图源：脉脉
**地址：
https://arxiv.org/abs/2305.15038
作为数据分析师，GPT-4 大概是什么水平？
在**中，研究人员试图分析：作为数据分析师，GPT-4 大概是个什么水平？
首先，研究人员将数据分析师的主要工作内容分成三个步骤：
- 数据收集：主要包括理解业务需求，并决定哪些数据源与需求有所关联。确定了相关数据后，分析师就可以通过 SQL 查询或其他工具提取所需的数据。
- 数据可视化：创建视觉辅助工具，例如图形和图表，借此高效传达见解。
- 数据分析：在数据分析阶段，分析师可能需要确定不同数据点之间的关联性，识别异常和异常值，并**随时间而变化的趋势。在此过程中得出的见解，可以通过书面报告或演示文稿的形式传达给利益相关者。
根据数据分析师的主要工作范围，研究人员专门设计了一个 GPT-4 数据分析师模拟流程。如下图所示，其中，业务问题和数据库等强制输入信息显示在右上角的蓝色框内，参考的外部知识源作为可选输入则位于左上角的红色虚线框内。下方绿色框中的是提取数据（data.txt）、数据可视化（figure.pdf）和分析等输出结果。
图1
具体而言，给定一个与业务相关的问题（q）和一个或多个相关数据库表（d）及其模式（s）。目标是提取所需数据（D），生成可视化图表（G），并提供分析和见解（A）。
根据给定问题，分析师需要从数据库中挑选出生成图表所需要的数据，并对这些数据做有意义的组织排列。例如，“请展示散点图中身高和体重之间的相关性”。可以看到，问题中还包含了图表类型信息，因此应当根据数据的性质和所提问题选择合适的图表类型，并使用合适的软件或编程语言生成图表。最后，需要分析数据以确定有助于回答问题的趋势、模式和见解。
研究人员希望使用 GPT-4 实现整个数据分析过程的自动化，并按图 1 所示的步骤进行。这主要涉及三个步骤：代码生成（蓝色箭头所示）、代码执行（橙色箭头所示、分析生成（绿色箭头所示）。该框架的算法如下图所示：
图2
为了判断 GPT-4 作为数据分析师的水平如何，研究人员选取了 200 个样本，并对 GPT-4 的输出进行了**且专业的人工评估，整个评估共分为两组。研究人员主要通过以下指标，对 LLM 的数据分析能力做定量评估：性能、时间和成本。具体来说，研究人员让 GPT-4 作为数据分析师解决几个端到端数据分析问题。由于此类数据分析问题没有可供参考的现成数据集，所以研究人员选择了相关度最高的数据集 NvBench，并在其中添加了数据分析部分。研究人员还设计了几项自动和人工评估指标，用以综合评估提取的数据、绘制的图表和生成的数据分析结论的实际质量。
图3
结果发现，在正确选取图表类型方面，两个评估组几乎都拿下了满分。这说明对于“绘制条形图”、“显示饼状图”等简单明了的指令，GPT-4 能够轻松理解其含义，并结合关于图表类型的背景知识正确绘制出适合的图表。在美学得分方面，GPT-4 的平均得分为 2.73 分（满分 3 分），这表明生成的大部分图形对受众来说清晰、不存在格式错误。但在所绘制图表的信息正确性方面，GPT-4 的得分无法令人满意。研究人员手动检查了这些图表，从中发现了一些小错误，但大部分图表仍给出了基本正确的数字。研究人员的评估标准非常严格，只要任何数据或者 x 轴/y 轴标签有误就必须扣分。从这个角度看，GPT-4 的工作能力仍有进一步改进的空间。
在对分析能力的评估方面，GPT-4 的对齐度和流畅度均获得满分。这再次证明 GPT-4 特别善于生成顺畅且语**确的句子。不过，分析的平均正确性分数远高于数字的信息正确性分数，也就是说，GPT-4 可能会生成错误数字，但分析结论却是正确的。图表当中只有少数会产生重要影响的数据错误点。而在复杂度得分上，GPT-4 的 2.16 分（满分 3 分）也合理且令人满意。
人类数据分析师 VS GPT-4，谁更胜一筹？
同样的任务，专业的数据分析师会做得比 GPT-4 更好吗？
为了对比 GPT-4 与人类数据分析师的表现，研究人员聘请了几位不同背景的专业数据分析师重复完成任务，并与 GPT-4 做了全面比较。结果发现，总体来看，GPT-4 的表现与人类数据分析师基本相当，但双方在不同指标上各有优势侧重。
图4
图 4 第一部分表示一位在金融行业有 6 年以上工作经验的高级数据分析师（Senior Data Analyst 1）在 10 个样本上的表现。从表中可以看到，GPT-4 的性能在大多数指标上都与这位专业分析师相当。虽然 GPT-4 的正确性得分比人类分析师低，但复杂度得分和对齐度得分更高。
第二部分为 GPT-4 同另一位在互联网领域拥有 5 年以上经验的高级数据分析师（Senior Data Analyst 2）在 8 个样本上的性能比较。由于样本量相对较小，结果显示人类分析师与 AI 之间存在较大差异。人类分析师在信息正确性、图形美观性、见解正确性和复杂度等方面均超过了 GPT-4，表明大语言模型仍有改进的空间。
第三部分比较了 GPT-4 同一位在咨询公司工作不足 2 年的初级数据分析师间在 9 个随机样本上的性能。GPT-4 不仅在数字和分析正确性上表现更好，而且也比人类分析师更倾向于生成较为复杂的分析结论。
此外，研究人员还对比了 GPT-4 与人类分析师所需的成本，结果发现 GPT-4 花费的时间比人类分析师短得多。
图5
图 5 为不同受试方之间的成本比较。研究人员从 level.fyi 提取了新加坡数据分析师的年薪中位数，从 Glassdoor 查到了新加坡数据分析师的平均年薪。假定每个月约有 21 个工作日，每天工作 8 个小时左右，并按不同级别的数据分析师平均花费的时间来计算各个实例的具体成本（以美元计价）。最终结果是：在根据市场**为各位数据分析师计费时，GPT-4 的成本约是初级数据分析师的 0.71%，是高级数据分析师的 0.45%。
GPT-4 这样的大语言模型真能取代人类数据分析师吗？在**的结尾，研究人员并未给出明确结论。虽然从分析结果来看，GPT-4 的实际表现几乎与人类相当，并且所需的成本更低，但能否全面取代人类数据分析师仍需要进一步研究。
本文转载来源：
https://www.infoq.cn/news/6LAGtDef93ytGip8YVd1
当前，以芯片为代表的信创产业逐步成为国家科技竞争力的重要标志。在国产CPU产业强势崛起的过程中，你首先想到的会是哪几企业？答案有很多，但“中科系”的提及率绝对很高。作为国家战略科技力量，“中科系”旗下
21世纪经济报道记者倪雨晴 圣何塞报道在硅谷源泉之一的圣何塞，英特尔CEO帕特·基辛格（Pat Gelsinger）正在带领英特尔加速奔跑。当地时间9月19日，2023英特尔on技术创新大会于美国加利
财联社9月19日讯（记者 唐植潇）近日有消息称，OPPO将会重启芯片业务，并且“有部分员工已经回流，加入到了车载业务之中”。记者就此事向OPPO方面进行核实，对方表示“不予置评”。特百惠（我国）数字与
600亿颗芯片！我国巨头正式宣布，美媒：**也没料到制裁这么快
我国芯片市场与美国依赖我国的集成电路市场一直以来都是一个巨大的市场，拥有庞大的需求和巨大的增长潜力。我国的电子消费市场一直在迅速增长，包括智能手机、电视、电脑和各种智能设备等，这些设备都需要高性能的芯
最新手机芯片天梯图：A17、华为麒麟9000S，排在什么位置？
近日，最火的两颗芯片分别是苹果的3nm芯片A17 Pro，虽然很多人吐槽它较上一代提升不明显，但论性能，可以碾压任何安卓芯片，甚至是领先2代的。另外一款芯片，则是华为麒麟9000S，当然，这颗芯片工艺
韩国芯片连续13个月暴跌，尹锡悦指责我国不采购，外媒：自食其果
据韩国媒体称，韩国的半导体出口额已经连续暴跌13个月了，比去年同比下降了28%左右。韩国政府急的焦头烂额。尹锡悦政府竟直接甩锅我国，话里话外都是指责，他认为韩国半导体卖不出竟是我国的原因，我国应该帮助
我国突破芯片瓶颈将影响全球秩序？美国很担心，指出我国关键弱点
我国在芯片半导体领域一直深受美国的**，通过贸易制裁的方式阻止高端芯片进入我国市场。这样的举措一度造成我国芯片领域发展断档，不过随着我国科技企业近几年的突破，目前我国已经在芯片制造方面取得了重大的成果
前几天，华为一声不响的上线了mate60系列，带着麒麟芯片9000s强势回归，吸引了全世界的目光。而华为麒麟芯片**背后，我们不该忘记这位老人—张汝京。我国半导体之父，为回**造芯片，被开除**户籍，
【有车以后 资讯】“未来汽车对传统汽车的颠覆性，使传统零部件体系的50%以上都面临重构。”12月16日，在全球智能汽车产业峰会(GIV2022)上，我国电动汽车百人会理事长陈清泰指出，智能汽车的价值链
投稿点这里汽车有多少个零件?其实这个问题并没有一个十分确切的标准答案...据估计，一般轿车约由1万多个不可拆解的**零部件组装而成。结构极其复杂的特制汽车，如F1赛车等，其**零部件的数量可达到2万个
全球最大的10家汽车零部件供应商 都是世界500强 无我国企业
【卡车之家 原创】美国《财富》**每年发布的世界500强排行榜，是以营业收入数据对全球企业作出排名的榜单。2017年“世界500强”榜单中，汽车制造商和零部件厂商共占据33席（除去大型工程车辆企业），
汽车零部件企业哪家强？除了博世**还有这些名字你一定耳熟能详
文：懂车帝原创 李德喆[懂车帝原创 行业]9月18日，由《我国汽车报》主办，罗兰贝格协办的2019汽车零部件“双百强”企业发布会在江苏南京举行。在两份榜单中，博世、**、电装位列2019全球汽车零部件
行业现状（Reference：产业运行 | 2021年汽车工业经济运行情况）中汽协预测：2022年我国汽车销量达到2700万辆，新能源销量超过550万辆（Reference：乘用车市场信息联席会）以乘
全球十大汽车零部件供应商，核心技术都被他们垄断，自主遗憾缺席
提到电影，我们会想到张艺谋、冯小刚，而很少会想到幕后的制作人；提起流行乐，我们会想到周杰伦、萧敬腾，而很少会想到背后的作词人。台前台后，一幕之别，知名度往往相差甚远。车界又何尝不是如此，知名车企我们都
来源：环球时报 【环球时报记者 倪浩 陶震 环球时报驻德国特约记者 青木】经过3年疫情后，全球最具影响力的通信展今年有望再现往日盛况。2月27日至3月2日，由全球移动通信**协会（GSMA）主办的20
近日华为、苹果争相推出手机卫星通信功能，成为一大亮点，不少手机厂商也将目光投到卫星通信。放眼未来，手机直连卫星的卫星通信服务将是大势所趋，也是6G时代的重要标志。华为以“北斗三号”为依托，率先把“卫星
国内企业在光通信产品的参数测试过程中，通常使用国外的先进测试设备。然而，这些测试仪器之间往往是孤立存在的，需要手动调试仪器并通过旋钮、按钮和人眼观察波形或数据。这不仅*作繁琐易出错，而且测试效率低下。
龙头20cm涨停，7天股价翻倍！一文看懂卫星通信前世今生及产业链
卫星通信概念股华力创通今日再度强势拉升，截至发稿，该股股价20cm涨停，7个交易日累计涨幅近113%，现报23.52元续刷阶段新高，总市值155.9亿元。消息上，有媒体从供应链获悉，Mate 60 P
工信部：目前我国尚不具备实现网络层面的移动通信号码归属地变更的条件
针对网友提出的“电话号码归属地更改”建议，工信部近日给出了官方回复。此前，有网友在人民网留言板向工信部留言称，“现在电话都是实名制，电话号绑定的***及一些主流的软件较多，更换号码后造成一系列问题
