您将学到什么:
对于专业分析师来说,确定客户的需求通常是一个漫长而乏味的过程。一项新研究发现,经过适当训练的8463永利皇宫登录语言模型在识别客户需求方面的表现与专家一样出色,从而使分析师能够将其专业知识应用到其他领域。
每一个成功产品的背后都有一家正确识别客户8463永利皇宫登录的公司。这需要耗时的任务来梳理市场研究采访记录、在线评论和其他数据源,以查明真正的客户8463永利皇宫登录,即产品或服务“要做的工作”。
根据麻省理工学院斯隆管理学院营销学教授的说法,专业分析师花在审查文档上的时间与花在与客户交谈上的时间一样多“细节在于细节,”他说。 “客户讲述产品如何工作或不工作的故事。他们不会告诉你产品应该是什么样子。”
人工智能可能会有所帮助。一个新纸,由西北大学豪瑟教授合着阿乔姆·铁莫申科,19 年博士生,麻省理工学院斯隆管理学院博士生毛乘风,发现经过微调的8463永利皇宫登录语言模型在识别和分类客户需求方面的表现与专家分析师一样好。使用法学硕士来完成这项任务可以让分析师将他们的专业知识应用到其他领域,例如综合见解、创新、产品开发、营销和发布。
“我们听到很多关于人工智能自动化任务和消除工作岗位的说法,”豪瑟说,“但这让专业分析师更好地完成工作。”
专家如何识别客户8463永利皇宫登录?
Hauser 自 20 世纪 90 年代初以来一直在研究识别客户8463永利皇宫登录的过程。这时,全面质量管理框架开始发挥作用,以标准化更好理解的过程客户的声音。此后的几十年里,标准可能已经发生了变化,但工作流程却没有。 “在你开始有效的工作之前,有很多繁琐的工作,”豪瑟说。
接受过识别客户8463永利皇宫登录培训的分析师首先要收集信息。他们采访了数十名客户并阅读了数千名产品评论。最近,他们开始在线搜索社交媒体帖子、视频推荐和其他用户生成的内容。
在阅读这些材料时,“挑战在于理解驱动客户行为的更深层次动机,并以简洁有效的形式捕捉这些动机,”研究人员写道。
从这里开始,必须筛选出一份初始的客户8463永利皇宫登录列表,并将其组织成亲和力图 这创建了主要和次要8463永利皇宫登录的层次结构。此流程将客户8463永利皇宫登录分为战略类别并消除冗余。例如,一家生产油漆和着色剂产品的公司可能有一组称为“产品外观和表面处理”的8463永利皇宫登录,其中包括客户8463永利皇宫登录,例如“确保我的着色剂颜色和纹理一致”和“确保颜色与我想要的颜色完全匹配。”
工作中乏味的部分是将8463永利皇宫登录(客户很少明确表述)与意见(客户非常乐意分享)分开。例如,当顾客称赞一种木材着色剂,因为“它变成了粉红色”,这凸显了需要查看哪些表面已经被着色剂覆盖。对智能手机电池寿命的抱怨表明,外出时需要长时间、不间断的使用。
法学硕士的表现与专家一样好
研究人员写道,专业分析师在工作中表现出色,得益于多年的培训,他们学会了“使用简单易懂的语言,以简洁的积极陈述的形式”表述客户8463永利皇宫登录。
一项研究发现,经过微调的法学硕士可以识别 100% 的主要客户8463永利皇宫登录,而专业分析师只能识别 87.5%。
为了尝试复制这种训练,研究人员从通用模型开始。他们利用一家拥有 30 年经验的市场研究公司提供的“客户之声”研究进一步完善了法学硕士课程。这个过程被称为监督微调,因为该模型是使用手动策划的训练示例(在本例中为市场调查研究)进行微调的。该过程还有助于标准化提示的结构,从而减轻最终用户仔细设计提示以确保他们获得所需输出的压力。
一系列研究比较了专业分析师、基础法学硕士和通过监督微调增强的法学硕士在识别和制定客户8463永利皇宫登录方面的产出。最初的研究基于木材染色产品,但此后已在其他产品和服务类别中进行了复制。
基础法学硕士本身不足以复制专业分析师的结果 - “他们错过了很多细微差别,”豪瑟说。然而,法学硕士在有监督的微调下的表现与人类工人一样好,甚至更好。
值得注意的是,该模型 100% 识别出主要客户8463永利皇宫登录(总共 8 个)和次要客户8463永利皇宫登录(总共 30 个),而专业分析师的识别率分别为 87.5% 和 80%,他们错过了对使木材维护更容易的产品的主要8463永利皇宫登录。
工业人工智能时代的战略、生存和成功
亲自前往麻省理工学院斯隆管理学院
立即注册
资源密集型流程民主化
微调是可扩展的,因为可以教会法学硕士来识别客户的8463永利皇宫登录,而无需对客户的8463永利皇宫登录有基本的了解。 “如果你必须从故事中提取客户8463永利皇宫登录,受监督的微调法学硕士可以做到,”豪瑟说。 “但是如果你问一位法学硕士,客户在染色甲板时关心什么,他的答案是肤浅的。”
监督微调模型已在各种基础法学硕士上进行了测试。这凸显了组织使用该模型来研究专有数据集的潜力,特别是考虑到研究人员发现,之前确定的 1,000 多个客户8463永利皇宫登录就足以进行监督微调。
此外,该模型已成功应用于食品、建筑供应和医疗保健行业的用例。一位用户,产品开发与管理协会,分析了与最近加入该组织的人员的对话。
“它为 [PDMA] 引入新成员和举办会议提供了不同的框架,”豪瑟说。特别是,该组织了解到新成员觉得退伍军人的“特殊语言”令人反感,因此它努力减少成员资源中行话和缩写词的使用。
考虑到所需的时间和资源,确定客户8463永利皇宫登录的过程通常仅限于企业。对于豪瑟来说,这篇论文展示了民主化的潜力。
豪瑟说,麻省理工学院斯隆管理学院“聆听客户”课程的学生通过将客户访谈记录上传到模型中,只需几分钟即可确定客户8463永利皇宫登录。当他们从学生转变为创始人时,这将被证明是有价值的。
“企业家没有钱进行8463永利皇宫登录研究,但他们确实有时间与消费者交谈并在征得他们同意的情况下记录对话,”豪瑟说。 “经过微调的法学硕士可以从这些对话的记录中快速准确地识别客户需求——否则这项任务需要大量的培训和经验。”
下载论文:8463永利皇宫登录语言模型能否像专业分析师一样提取客户需求?
约翰·豪瑟是麻省理工学院斯隆管理学院营销学 Kirin 教授,教授新产品开发、营销管理以及统计和研究方法。阿乔姆·季莫申科,19 年博士,西北大学副教授。他的研究探讨了新兴技术如何重塑创新。 毛乘风是麻省理工学院斯隆管理学院的博士生。他的研究重点是通过训练后技术和代理框架提高企业应用程序8463永利皇宫登录语言模型的有效性。研究合作者是Applied Marketing Science Inc.