图片来源:Igor Link / Shutterstock

重要的想法

人工智能

永利皇宫app官网和人工智能何时能最好地协同工作,以及何时各自单独工作效果更好

作者

将人工智能引入企业的最常见论点之一是人工智能有潜力通过补充永利皇宫app官网所做的工作来帮助永利皇宫app官网。但领导者首先必须了解人工智能和永利皇宫app官网是否以及何时可以一起比任何一方单独表现得更好。

研究人员最近发表的一篇论文麻省理工学院集体智慧中心发现平均而言,人工智能与永利皇宫app官网的组合并不优于最好的纯永利皇宫app官网或纯人工智能系统。

“这是我们最令人惊讶的发现,”麻省理工学院斯隆管理学院教授说CCI 总监。 “人工智能的一些最重要和最有趣的用例涉及永利皇宫app官网和计算机的组合。许多人会认为这种组合会好很多,但从统计数据来看,情况明显更糟。”

这篇论文基于对 100 多项有关永利皇宫app官网与人工智能协作的研究的回顾,是发表在《自然·永利皇宫app官网行为》杂志上。该研究揭示了人工智能和永利皇宫app官网工作者的结合何时最有可能取得成功——例如永利皇宫app官网独自超越人工智能的任务、涉及创建内容的任务以及涉及生成式人工智能的创作任务。

当永利皇宫app官网和人工智能尽其所能时,组合就会发挥作用

马龙和他的合著者 — 麻省理工学院斯隆管理学院助理教授米歇尔·瓦卡罗,麻省理工学院博士生和 CCI 附属机构 - 分析了 106 个实验中的 370 个独特效应大小,这些实验评估了单独永利皇宫app官网、单独人工智能以及永利皇宫app官网与人工智能组合的表现。这些研究于 2020 年 1 月至 2023 年 7 月期间发表。(效果大小定义为研究中变量之间差异的大小。)

研究人员发现,永利皇宫app官网和人工智能的结合平均表现优于永利皇宫app官网单独行动的基线,但它的表现并不比人工智能单独行动的基线更好。值得注意的是,永利皇宫app官网和人工智能组合的平均性能得分低于最好的永利皇宫app官网或人工智能系统的平均性能得分。

例如,事实证明,单独使用人工智能在检测虚假酒店评论方面最为成功,准确率为 73%,而永利皇宫app官网和人工智能结合使用的准确率为 69%,单独使用永利皇宫app官网的准确率为 55%。研究人员假设,由于人们在执行任务时的准确性普遍低于人工智能,因此他们也不太擅长决定何时信任算法以及何时信任自己的判断。这导致人工智能和永利皇宫app官网结合的性能低于单独使用人工智能的性能。

“当每一方都能比对方做得更好时,永利皇宫app官网和人工智能的结合效果最佳,”马龙说。

一个穿着职业装的人拿着指挥棒在后台编排数据图像

领导人工智能驱动的组织

亲自前往麻省理工学院斯隆管理学院

人工智能超越永利皇宫app官网以及人工智能与永利皇宫app官网结合的其他例子包括预测需求和诊断医疗问题。

在永利皇宫app官网表现更好的场景中,永利皇宫app官网和人工智能一起工作的平均表现优于单独工作的任何一方。以鸟类图像分类为例,这是一项需要专业知识的任务。仅永利皇宫app官网就达到了 81% 的准确率,仅人工智能就达到了 73% 的准确率,但两者的组合达到了 90% 的准确率。

“如果永利皇宫app官网本身就更好,那么永利皇宫app官网可能比人工智能更擅长知道何时信任人工智能以及何时信任永利皇宫app官网。”马龙说。

重新定义流程比重新分配任务更好

研究人员表示,永利皇宫app官网与人工智能的协作可以采取两种不同的形式。当永利皇宫app官网人工智能系统的平均表现比永利皇宫app官网单独表现更好时,永利皇宫app官网人工智能增强就会发生。当永利皇宫app官网与人工智能的输出表现优于永利皇宫app官网和单独的人工智能时,就会出现永利皇宫app官网与人工智能的协同作用。

实现永利皇宫app官网与人工智能的协同作用受到多种挑战的阻碍。首先是了解何时单独永利皇宫app官网、单独人工智能或两者结合最有效。瓦卡罗说,许多组织都在为此苦苦挣扎,因为他们往往高估了现有系统的有效性。随机实验,例如评估三个用例结果的 A/B 测试,可以在这里提供数据驱动的见解。

第二个是应用此类实验的结果来实现变革。马龙说,这并不是要在永利皇宫app官网和人工智能之间划分子任务,而是要重新设计他们协同工作的整个过程。例如,希望实现家具大规模生产自动化的公司需要考虑是否不仅应该自动化复杂的组装步骤,还应该自动化在工厂车间移动成品衣柜的繁琐过程。

“我们发现永利皇宫app官网擅长涉及情境理解和情商的子任务,而人工智能系统则擅长重复、大量或数据驱动的子任务,”瓦卡罗说。

决定策略后,采用持续改进的模型是值得的。 “从基本工作流程开始,然后监控性能,最后根据结果和用户反馈完善工作流程,”她说。

生成式 AI 展示了协作的力量

生成式人工智能是永利皇宫app官网与机器之间有望实现协同作用的一个领域。

研究人员发现,永利皇宫app官网与人工智能的组合在涉及决策的任务上表现较差,但在涉及创建内容的任务上表现较好。在研究期间,创作任务相对未被探索——只有 10% 的审稿论文着眼于内容创作。但在这些情况下,“永利皇宫app官网与人工智能协同作用的平均效应大小是积极的,并且明显大于决策任务的平均效应大小”,这构成了研究的大部分内容,并且往往会产生负面影响,研究人员写道。

相关文章

当两个头并不比一个好时
在用人工智能替代永利皇宫app官网之前要问的 4 个问题
生成式人工智能如何影响高技能工人

在之前的一篇论文中,马龙和他的合著者探索了生成式人工智能如何激发创意工作者通过简单的文本提示在几秒钟内生成大量图像。尽管有些结果可能是愚蠢且无关紧要的,但这个过程比使用画板的设计师要快得多 - 而且它可以为更复杂的设计提供灵感,这些设计将受益于人性化。

Vaccaro 表示,与主要为完成特定任务而设计的早期 AI 系统相比,生成式 AI 可能实现的迭代循环使其更适合永利皇宫app官网协作。

“生成式 AI 系统可以实现更具迭代性和​​交互性的过程,”她说。 “永利皇宫app官网现在可以在起草、编辑和修改文本、图像、音乐或视频的周期中与生成式人工智能进行协作。人工智能可以实时适应永利皇宫app官网的反馈,从而使永利皇宫app官网能够动态地完善其输出。”

该论文的结论是,永利皇宫app官网和人工智能的结合可能不会超越永利皇宫app官网,而人工智能本身可能会让企业有理由暂停协作。但马龙表示,这是错误的教训,部分原因是生成人工智能的能力很有前景。

“我们想说的是,我们需要变得更加成熟、更加了解什么对人机协作有效、什么无效,”他说。

了解更多信息 萨拉·布朗 高级新闻编辑和作家