APP推广合作
联系“鸟哥笔记小乔”
智能客服百亿市场,大模型如何带来「加速度」?
2024-07-24 10:56:56

©️深响原创 · 作者|亚澜

经历了巨头级公司全力加码、明星创业者云集的“百模大战”尖峰时刻,大模型对于很多人来说不再是一个陌生词汇。

喧嚣伴随着认知门槛的降低,逐渐叩开市场的大门,而喧嚣背后,大模型行业已达成共识——必须聚焦于“场景”和实际应用,只有使用量拉起来了,才有机会磨出真正有价值的好模型。也难怪就连Open AI的创始人Altman都已着手创办新公司Thrive AI Health,聚焦到健康慢病管理场景了。

在拉通大模型的应用方向,我们关注到智能客服这一特定领域。“大模型的应用对于智能客服行业的商业模式、组织结构、业务效率效果、商业价值等方面都产生了深刻的影响。”晓多科技CTO向海告诉「深响」。

晓多科技是以智能对话为核心的认知智能 SaaS 产品和行业数智化解决方案服务商,其智能客服广泛应用于电商、电信、政务、教育等多领域,覆盖全国50多城,服务了包括美的、海信、极米、方太、芝华士等零售类品牌,在今年5月成为了抖音电商客服服务商。作为专注智能客服十余年的关键企业,晓多科技从认知到实践,让我们看到大模型落地特定行业的探索过程——大模型究竟如何在智能客服具体场景中发挥作用?给客服行业带来了哪些层面的改变?我们如何去理解这些变化以及借力这些变化?

“客服”虽然并不“高大上”,但他们却是品牌商家直面用户的窗口。根据《2023年中国智能客服市场报告》,中国智能客服市场规模已达66.8亿元,预计到2027年,市场规模有望增长至181.3亿元。而大模型技术的应用,一方面解决着过去客服交互、客服培训等具体环节的痛点,另一方面也为智能客服行业延展出更多的业务空间,让智能客服不止于“客服”,更是深入到营销、交易、履约等各个生意关键环节,实现更大的价值。

智能客服百亿市场,大模型如何带来「加速度」?

01、先用再说

晓多科技能够在今天迅速拿起大模型的利器其实有一定的历史渊源。

十年前,CEO江岭察觉到客服行业痛点问题,就针对电商客服场景设计了人工智能辅助工具,其核心产品“智能客服机器人”已为多个电商平台的多品类企业提供着高准确率、高覆盖率的个性化服务。江岭是自然语言处理和机器学习专家,晓多科技的大部分研发人员则来自百度、腾讯、华为、科大讯飞等知名企业。

这样的技术积累和敏感度,让晓多科技在2020年就将大模型纳入了重点关注范围。2022年,ChatGPT在全球范围引发热议,江岭没有犹豫,立即发起了“全员AI”的工作要求,让各个业务模块尝试用GPT提效并加速认知上的迭代。

2022年12月,晓多科技的大模型团队正式组建,覆盖工程、算法、数据、产品等角色,并在单独的空间中“闭关”,围绕自己的业务场景去测,跑通微调模型。当时的晓多科技明确了一个很重要的方向判断:大模型的魔法不会凭空出现,必须围绕自身的业务场景去探索。

但晓多科技的业务模块并不简单,“一竖一横”的布局严密地构建出其在智能客服领域的专业度和护城河:

一竖是晓多科技最为核心的“前台业务”,直面消费者,包括接待消费者、回答消费者、导购消费者等等;

一横则是围绕客服管理和能力提升的“后台业务”,包括客服招聘、岗前培训、上岗考核、岗后团队管理等等。

这么多的场景,怎么选择?怎么切入?晓多的答案是先测试最核心的应答环节,这是智能客服最重要的能力。

2023年3月,晓多科技与国家超级计算成都中心达成合作,解决算力资源问题,把基础模型微调训练全部跑通。5月发布了基于生成式预训练Transformer的深度学习模型“XPT晓模型”。“XPT晓模型”与ChatGPT的核心技术架构相同,但不同的是,晓模型接受了大量的电商行业的领域知识训练,积累了电商行业关于商品、行业上下游、行业政策以及产品使用场景相关的数亿Token的领域知识,可以更好地为顾客提供智能化和个性化的服务。

智能客服百亿市场,大模型如何带来「加速度」?

XPT晓模型

“XPT晓模型”是晓多科技“一竖”业务的进阶。但考虑到人力和资源的效率问题,对于“一横”业务对应的诸多场景,晓多科技选择“放手”,以采购其他人的API为主了。

CTO向海向「深响」坦言:“一开始都自己做,但什么都全做的思路其实不符合晓多对于大模型ALL in One的理解。”

彼时向海注意到火山引擎在大模型上的投入很大,而且产品的成熟度和迭代速度有目共睹。晓多科技自己开发Agent产品时也受到了字节扣子(coze.cn)的一些产品思路启发。于是晓多科技开始和火山引擎团队接触并初步合作。

火山引擎团队“先做事”的风格让向海印象深刻。“让我们先用了再说、先敞开测、先把场景摆出来,”向海说:“用下来之后确实很多场景都匹配,可用性超过80%,稳定性也好。新业务测下来10次能对9.9、9.5次,符合我们的预期。”

另外,晓多科技的业务场景很多都在电商上,618、双11这样的大促节点带来的高并发问题不容忽视,火山引擎对于高并发的保障能力也是晓多科技认可的关键:“1000条并发过来,就能在几分钟、十几分钟形成一个模型的迭代,这个速度非常诱人。”

今年五月,字节跳动豆包大模型在火山引擎原动力大会上正式发布,据火山引擎总裁谭待介绍,经过一年时间的迭代和市场验证,豆包大模型正成为国内使用量最大、应用场景最丰富的大模型之一,日均处理1200亿Tokens文本,生成3000万张图片。而豆包主力模型在企业市场的定价只有0.0008元/千Tokens,这种让大模型以分计价到以厘计价的转折显然会刺激更多企业把大模型“先用起来”。

向海告诉「深响」,目前晓多科技与豆包大模型在“横”“竖”两向的诸多业务场景上都有紧密合作。

在“一横”的场景中,豆包是晓多科技的“伙伴”。比如通过调用豆包的API,用豆包模拟消费者进线,来训练客服应对各种问题。就像今年618前夕,晓多科技的一个客户招聘了三四百个客服,通过豆包的合作,在2-3天内完成了这批客服的训练和考试,大大节省了管理、考核、培训的时间精力和成本。

在“一竖”的核心场景中,豆包则扮演着“导师”的角色,生成大量训练数据,帮助晓多训练中小模型,帮晓多纠正优化小模型,让晓多能在响应时间有要求、准确率有要求、不接受幻觉的的场景上可以跑得更快。

向海为我们举了一个有趣的例子:人工客服在回答消费者问题时其实会逐渐积累负面情绪,当负面情绪不可避免地爆发时,智能系统就会做出拦截。这本来是智能客服的优势,但由于语言的艺术“博大精深”,有时就会错误地理解词语的含义而做出错误的响应动作。罗技有一款鼠标GPW,被消费者们昵称为“狗屁王”,当客服向消费者提到这块产品时,就不应该被拦截。但有时这种细分场景的小模型识别不出来,我们就需要“豆包”作为“导师”来纠偏,让我们的局部小模型自驱完成迭代,变得更好。

而字节跳动的抖音电商、抖音生活服务、巨量引擎等业务跟消费零售关系非常紧密,这也是其大模型的天然优势——在足够多的场景中进行深度的浸泡,理解毛细化的需求,为更多消费场景的企业提供全局视角才能看到的启发。

智能客服百亿市场,大模型如何带来「加速度」?

02、具体场景,具体解决

明确了晓多科技应用大模型的“顶层设计”,我们不妨再进一步,具体来看两个用大模型提效的实际业务场景——全渠道商品知识库和训练场。

全渠道商品知识库是客服系统非常重要的一个组成部分,从产品规格、使用说明、常见问答到退货政策、配送信息、故障排除步骤等等,好的知识库可以有效地管理和应用商品知识,提升服务体验。

但在实际的客服工作中,好的知识库实在太难得了。我们发现,大部分商家的知识库仍然是文档、Excel形式,知识库更新不及时、内容不全面、结构混乱、不易搜索、知识库系统与客服系统集成度太低、人工依赖度高等等问题层出不穷。比如客服在回答消费者问题时往往需要在多个平台和文档之间来回切换“找答案”,耗时且低效,更别说及时进行商品对比和商品推荐以及跨平台的知识分享了。

对此,晓多采取了通过后台管理界面“一键同步”功能,实现与电商平台的无缝对接,一键操作,便可轻松同步商品信息,这就解决了知识库内容及时和全面的问题。而借助晓多的智能学习引擎,这些信息被高效转化为可直接利用的丰富商品知识库,让商品管理变得便捷高效。商品知识库搭建完成后,即可一键启动,实现即时的智能应答和辅助,还可以一套知识库,在多渠道灵活分享使用。

这背后既有晓多科技对于智能客服各个环节细致入微的理解,也有大模型技术深入实际应用层面的积极进展。火山引擎行业团队与晓多科技合作采用标签化替代自然语言、设定结构化输出模板、创新实践示例、任务定制最优参数等策略,深度优化提示词,显著提升大模型输出的质量和稳定性。特别是在豆包通用模型 Doubao-pro-32k 版本中,针对超 5k 字的文本场景,有效解决了应答延迟问题。

具体而言,在客服转述用户的提问后,豆包大模型就通过分析和精准理解,将问题转化为知识库查询可用的关键字,以便能快速检索到相关内容。而基于对用户需求的理解,豆包大模型可在众多内容中将用户最为关心的部分以高亮显示,进行重点呈现,并支持多个不同产品之间的对比。通过两次“转译”让用户以口语化的自然语言提出需求,既收获对核心需求的精准回复,节约对话时间的同时,还提高了用户的满意度和下单率。

智能客服百亿市场,大模型如何带来「加速度」?

同样能带来超预期提效的还有“训练场”。

客服培训其实一直是整个行业的痛点,培训时间长、效果差、培训内容和实际情况脱节等问题直接影响着工作效率。针对这些问题,晓多训练场就通过调用大模型模拟用户进线,用实操练兵替代“只看”资料、考试、带教的新人培训方式。

晓多科技一开始使用的是传统的工程方法,容易显得不自然和机械化,用了豆包大模型后,对话更加拟人化,更符合实际情况,提高了消费者问题模拟的准确度,同时能与训练中的客服有效互动,提出的问题衍生不重复。这对于客服训练来说至关重要,消费者可不会按照“流程手册”来提问,现实中的场景一定是带有个性化需求、带有情绪的,如果训练时没有贴合实际,真到了工作中,客服恐怕就会手足无措。

据了解,在豆包大模型帮助下,晓多科技的“AI 训练场”场景获得了更高的并发保障,同时成本也优化了50倍以上,实现了效率成本双提升。目前晓多训练场可以将客服培训周期从原来的3-4个月缩短到8周左右,而AI训练的客服对比常规培训的客服,销售转化率提升了3%-5%。

智能客服百亿市场,大模型如何带来「加速度」?

训练场中还有“原版回复”功能

让新客服可以模仿再练习

03、感知变化,用才知道

更加值得探讨的是,大模型技术对业务层面的提效还会进一步影响到行业的商业模式和发展方向。

以智能客服这样的to B生意来说,过去的逻辑是,大家要尽量SaaS标准化,提高边际效益,从而带来更多利润空间。但实情是客户的生意五花八门,也经常提出定制的个性化需求,以至于不少人都质疑SaaS模式在中国的可行性。

而现在,大模型技术的改变为我们带来了全新的视角,它让个性化服务变得既可行又经济。

“个性的东西才是企业基业长青的秘诀。”向海告诉「深响」:“大模型让我们可以重新回归到个性化的服务上,对行业进行建模,对流程进行建模,把基座做好,支持我们在上面个性化。而更多长尾需求得到解决,个性化响应能力不断增强,也相当于让我们有了更广阔的发展空间。”

而在未来,智能客服行业将不仅仅是单纯的“客服”概念,它正逐步从成本中心转变为价值中心,成为企业直面消费者的第一现场。大模型技术的到来恰逢其时,它顺应了客服行业正在经历的深刻变革——客服的角色不再局限于传统的服务范畴,而是扩展到了咨询、销售导购等多个层面。服务场景日益丰富的客观趋势下,智能客服成为连接企业与消费者的纽带,也有了不止于“客服”的、更立体的价值。

当然,大模型技术对于智能客服行业已经产生了一些很直观的影响,比如工作流程、组织结构、关键岗位的变化等等。繁琐、重复性的脑力工作得到缓解,客服们可以承担起更多情感价值的传递。

智能客服百亿市场,大模型如何带来「加速度」?

整体看下来不难发现,“大模型”虽然是前沿科技,但在上述案例中并非以“高高在上”的姿态存在,而是深入到了业务的“细枝末节”,与人平视,追求效率务实。

晓多科技认为智能客服进化与人类形成的关系进阶路径是:“助理”(Copilot),“教练”(Coach),“同事”(Coworker)。在训练场的例子中,智能客服是Coach;在多策,智能客服是Coworker……这其实也与豆包大模型的理念不谋而合——字节跳动产品与战略副总裁朱骏曾透露其团队给豆包的三个产品设计原则,拟人化、离用户近、个性化。

豆包大模型其实包括了豆包通用模型pro、豆包通用模型lite、豆包·角色扮演模型、豆包·语音合成模型、豆包·声音复刻模型、豆包·语音识别模型、豆包·文生图模型、豆包·Function Call模型、豆包·向量化模型等9款大模型。企业可以根据自身业务场景需求,灵活选择并快速落地。而目前,豆包大模型已在金融、汽车、智能终端、电商零售、教育科研等多个行业落地。其背后的火山引擎则以一站式大模型服务平台火山方舟,让模型即服务,帮助企业在高效、安全的环境里应用各类模型。

放眼整个科技行业,我们总是试图总结一些评价大模型水平的衡量标准,比如泛化能力、精度和稳定性、训练数据量、工具链完备性、可解释性和鲁棒性等等。但谁用谁知道,抛开专业术语和科技感,解决真问题、技术真落地才是这轮大模型技术进步的中心奥义。

“并发足、稳定够、幻觉少、价格好。”向海如是说。

深响
分享到朋友圈
收藏
收藏
评分

综合评分:

我的评分
Xinstall 15天会员特权
Xinstall是专业的数据分析服务商,帮企业追踪渠道安装来源、裂变拉新统计、广告流量指导等,广泛应用于广告效果统计、APP地推与CPS/CPA归属统计等方面。
20羽毛
立即兑换
一书一课30天会员体验卡
领30天VIP会员,110+门职场大课,250+本精读好书免费学!助你提升职场力!
20羽毛
立即兑换
顺丰同城急送全国通用20元优惠券
顺丰同城急送是顺丰推出的平均1小时送全城的即时快送服务,专业安全,准时送达!
30羽毛
立即兑换
深响
深响
发表文章1426
深响是一支TMT领域新锐研究机构,由资深媒体人与投行人组成的精品团队,致力于深度研究全球范围内的商业案例,以优质的内容为行业与读者创造价值。
确认要消耗 羽毛购买
智能客服百亿市场,大模型如何带来「加速度」?吗?
考虑一下
很遗憾,羽毛不足
我知道了

我们致力于提供一个高质量内容的交流平台。为落实国家互联网信息办公室“依法管网、依法办网、依法上网”的要求,为完善跟帖评论自律管理,为了保护用户创造的内容、维护开放、真实、专业的平台氛围,我们团队将依据本公约中的条款对注册用户和发布在本平台的内容进行管理。平台鼓励用户创作、发布优质内容,同时也将采取必要措施管理违法、侵权或有其他不良影响的网络信息。


一、根据《网络信息内容生态治理规定》《中华人民共和国未成年人保护法》等法律法规,对以下违法、不良信息或存在危害的行为进行处理。
1. 违反法律法规的信息,主要表现为:
    1)反对宪法所确定的基本原则;
    2)危害国家安全,泄露国家秘密,颠覆国家政权,破坏国家统一,损害国家荣誉和利益;
    3)侮辱、滥用英烈形象,歪曲、丑化、亵渎、否定英雄烈士事迹和精神,以侮辱、诽谤或者其他方式侵害英雄烈士的姓名、肖像、名誉、荣誉;
    4)宣扬恐怖主义、极端主义或者煽动实施恐怖活动、极端主义活动;
    5)煽动民族仇恨、民族歧视,破坏民族团结;
    6)破坏国家宗教政策,宣扬邪教和封建迷信;
    7)散布谣言,扰乱社会秩序,破坏社会稳定;
    8)宣扬淫秽、色情、赌博、暴力、凶杀、恐怖或者教唆犯罪;
    9)煽动非法集会、结社、游行、示威、聚众扰乱社会秩序;
    10)侮辱或者诽谤他人,侵害他人名誉、隐私和其他合法权益;
    11)通过网络以文字、图片、音视频等形式,对未成年人实施侮辱、诽谤、威胁或者恶意损害未成年人形象进行网络欺凌的;
    12)危害未成年人身心健康的;
    13)含有法律、行政法规禁止的其他内容;


2. 不友善:不尊重用户及其所贡献内容的信息或行为。主要表现为:
    1)轻蔑:贬低、轻视他人及其劳动成果;
    2)诽谤:捏造、散布虚假事实,损害他人名誉;
    3)嘲讽:以比喻、夸张、侮辱性的手法对他人或其行为进行揭露或描述,以此来激怒他人;
    4)挑衅:以不友好的方式激怒他人,意图使对方对自己的言论作出回应,蓄意制造事端;
    5)羞辱:贬低他人的能力、行为、生理或身份特征,让对方难堪;
    6)谩骂:以不文明的语言对他人进行负面评价;
    7)歧视:煽动人群歧视、地域歧视等,针对他人的民族、种族、宗教、性取向、性别、年龄、地域、生理特征等身份或者归类的攻击;
    8)威胁:许诺以不良的后果来迫使他人服从自己的意志;


3. 发布垃圾广告信息:以推广曝光为目的,发布影响用户体验、扰乱本网站秩序的内容,或进行相关行为。主要表现为:
    1)多次发布包含售卖产品、提供服务、宣传推广内容的垃圾广告。包括但不限于以下几种形式:
    2)单个帐号多次发布包含垃圾广告的内容;
    3)多个广告帐号互相配合发布、传播包含垃圾广告的内容;
    4)多次发布包含欺骗性外链的内容,如未注明的淘宝客链接、跳转网站等,诱骗用户点击链接
    5)发布大量包含推广链接、产品、品牌等内容获取搜索引擎中的不正当曝光;
    6)购买或出售帐号之间虚假地互动,发布干扰网站秩序的推广内容及相关交易。
    7)发布包含欺骗性的恶意营销内容,如通过伪造经历、冒充他人等方式进行恶意营销;
    8)使用特殊符号、图片等方式规避垃圾广告内容审核的广告内容。


4. 色情低俗信息,主要表现为:
    1)包含自己或他人性经验的细节描述或露骨的感受描述;
    2)涉及色情段子、两性笑话的低俗内容;
    3)配图、头图中包含庸俗或挑逗性图片的内容;
    4)带有性暗示、性挑逗等易使人产生性联想;
    5)展现血腥、惊悚、残忍等致人身心不适;
    6)炒作绯闻、丑闻、劣迹等;
    7)宣扬低俗、庸俗、媚俗内容。


5. 不实信息,主要表现为:
    1)可能存在事实性错误或者造谣等内容;
    2)存在事实夸大、伪造虚假经历等误导他人的内容;
    3)伪造身份、冒充他人,通过头像、用户名等个人信息暗示自己具有特定身份,或与特定机构或个人存在关联。


6. 传播封建迷信,主要表现为:
    1)找人算命、测字、占卜、解梦、化解厄运、使用迷信方式治病;
    2)求推荐算命看相大师;
    3)针对具体风水等问题进行求助或咨询;
    4)问自己或他人的八字、六爻、星盘、手相、面相、五行缺失,包括通过占卜方法问婚姻、前程、运势,东西宠物丢了能不能找回、取名改名等;


7. 文章标题党,主要表现为:
    1)以各种夸张、猎奇、不合常理的表现手法等行为来诱导用户;
    2)内容与标题之间存在严重不实或者原意扭曲;
    3)使用夸张标题,内容与标题严重不符的。


8.「饭圈」乱象行为,主要表现为:
    1)诱导未成年人应援集资、高额消费、投票打榜
    2)粉丝互撕谩骂、拉踩引战、造谣攻击、人肉搜索、侵犯隐私
    3)鼓动「饭圈」粉丝攀比炫富、奢靡享乐等行为
    4)以号召粉丝、雇用网络水军、「养号」形式刷量控评等行为
    5)通过「蹭热点」、制造话题等形式干扰舆论,影响传播秩序


9. 其他危害行为或内容,主要表现为:
    1)可能引发未成年人模仿不安全行为和违反社会公德行为、诱导未成年人不良嗜好影响未成年人身心健康的;
    2)不当评述自然灾害、重大事故等灾难的;
    3)美化、粉饰侵略战争行为的;
    4)法律、行政法规禁止,或可能对网络生态造成不良影响的其他内容。


二、违规处罚
本网站通过主动发现和接受用户举报两种方式收集违规行为信息。所有有意的降低内容质量、伤害平台氛围及欺凌未成年人或危害未成年人身心健康的行为都是不能容忍的。
当一个用户发布违规内容时,本网站将依据相关用户违规情节严重程度,对帐号进行禁言 1 天、7 天、15 天直至永久禁言或封停账号的处罚。当涉及欺凌未成年人、危害未成年人身心健康、通过作弊手段注册、使用帐号,或者滥用多个帐号发布违规内容时,本网站将加重处罚。


三、申诉
随着平台管理经验的不断丰富,本网站出于维护本网站氛围和秩序的目的,将不断完善本公约。
如果本网站用户对本网站基于本公约规定做出的处理有异议,可以通过「建议反馈」功能向本网站进行反馈。
(规则的最终解释权归属本网站所有)

我知道了
恭喜你~答对了
+5羽毛
下一次认真读哦
成功推荐给其他人
+ 10羽毛
评论成功且进入审核!审核通过后,您将获得10羽毛的奖励。分享本文章给好友阅读最高再得15羽毛~
(羽毛可至 "羽毛精选" 兑换礼品)
好友微信扫一扫
复制链接