AI 产品项目展示|财富管理 × 语音中心 × 客户经营智能体

基于语音中心的“一户一档”客户经营智能体

将财富顾问与客户的电话录音、语音聊天等非结构化沟通内容,通过 ASR 转写与大模型分析转化为客户意图标签、沟通摘要和待跟进事项,沉淀动态客户档案,支撑顾问精细化经营。

业务痛点与项目目标

沟通信息沉淀不完整

大量录音和语音聊天未被结构化利用,客户真实需求难以长期沉淀。

客户标签更新不及时

传统画像偏静态,难以及时反映客户近期意图、资金计划和偏好变化。

顾问跟进效率低

优先跟进对象、话术和服务动作依赖人工判断,筛选成本高。

经营过程难评估

沟通过程、需求变化和服务效果缺少结构化数据支撑。

端到端产品链路

1
语音录音 / 聊天接入
2
ASR 转写
角色区分
3
文本清洗
结构化处理
4
大模型意图抽取
5
标签映射
画像更新
6
摘要待办
顾问确认

智能体核心能力

会话理解识别产品咨询、市场沟通、业务办理、风险提示、投诉反馈等场景。
隐含意图识别从“稳一点”“下个月要用钱”等自然表达中识别真实需求。
标签抽取将客户表达映射为标准标签,并保留触发语句与置信度。
沟通摘要生成本次沟通主题、主要诉求、疑虑和顾问答复。
待办生成识别发送资料、回访、权限开通、风险测评等后续动作。
反馈学习顾问确认、修改或删除标签,反哺提示词与抽取策略优化。

客户标签体系:核心经营标签 + 沟通档案总结项

调整后,客户画像主标签只保留可用于长期经营和客户分层的 4 类:投资兴趣、产品偏好、风险倾向、资金计划;服务需求、异议顾虑、流失风险、待跟进事项不再作为客户标签长期沉淀,而是在“用户沟通展示档案”中作为本次沟通总结项展示,便于顾问快速阅读和执行。
投资兴趣
基金关注ETF 关注港股通关注两融关注
产品偏好
稳健理财短期限高流动性低波动
风险倾向
风险敏感低风险偏好中等波动保本诉求
资金计划
有闲置资金计划调仓近期赎回短期用款
服务需求

归纳客户希望获得的服务方式或支持内容,例如资料发送、操作指导、定期资讯、持续跟进等,展示在本次沟通档案中。

异议顾虑

沉淀客户在本次沟通中的疑虑点,例如担心亏损、费用敏感、流动性顾虑、不理解产品等,辅助顾问下次沟通。

流失风险

识别负面情绪、资产转出、竞品比较、问题未解决等风险信号,作为沟通提醒和经营预警,不直接固化为客户标签。

待跟进事项

结构化展示下一步服务动作,例如发送资料、权限开通、风险测评、约定回访等,进入顾问任务清单。

客户:“最近港股行情怎么样?港股通怎么开?”
客户标签:投资兴趣-港股通关注。
沟通档案:待跟进事项-发送开通流程与风险提示材料。
客户:“有没有稳一点、收益比存款高一点的产品?”
客户标签:产品偏好-稳健理财、风险倾向-低风险偏好。
沟通档案:异议顾虑-担心亏损,需顾问解释产品波动与适当性。
客户:“这笔钱下个月可能要用,先不买长期产品。”
客户标签:资金计划-短期用款、产品偏好-高流动性。
沟通档案:服务需求-推荐短期限/高流动性备选方案。

指标体系设计:质量、使用、经营三层闭环

1. 语音识别质量

  • ASR 转写准确率
  • 金融术语识别准确率
  • 角色区分准确率
  • 转写失败率
  • 平均耗时
目标:保证后续标签抽取的输入质量,确保语音内容能够稳定、准确地转化为可分析文本。

2. 标签抽取质量

  • 标签准确率 Precision
  • 标签召回率 Recall
  • 人工确认率 / 修改率
准确率 = 顾问确认正确标签数 / AI 生成标签数;召回率通过抽样标注集评估。

3. 顾问使用效果

  • 客户档案查看率
  • 沟通摘要使用率
  • 标签采纳率
  • 待办事项完成率
看产品是否真正进入顾问工作流,而不是只停留在模型效果层。

4. 业务经营价值

  • 客户触达转化率
  • 产品咨询转化率
  • 权限开通转化率
  • 高价值客户覆盖率
  • 潜在流失召回率
  • 客户资产留存情况
对比使用智能体前后,观察跟进效率、触达质量和客户经营结果变化。

如何提高标签准确性:规则约束 + 模型抽取 + 人工反馈

1输入侧提质

标签准确性首先取决于语音转写与文本结构化质量,因此在进入大模型前先做系统侧预处理,避免把过多辅助信息直接塞进 Prompt。

金融热词优化:港股通、两融、ETF、固收、风险测评等术语加入热词库。
输入前过滤:噪音、重叠说话、异常转写等问题优先在系统侧处理;Prompt 不额外传入低置信度片段,减少上下文占用。
角色区分:优先基于客户发言生成画像,顾问话术仅作为上下文辅助。

2抽取侧约束

避免模型“自由发挥”,通过标准标签口径、置信度、证据句和强弱意图区分控制输出边界。

标签字典:每个标签配置定义、适用条件、排除条件、示例话术。
证据约束:每个标签必须返回触发语句、对话轮次、来源通话和置信度。
强弱意图:明确购买/开通为强意图,咨询/犹豫/泛化关注为弱意图。

3闭环侧校准

通过顾问确认和抽样标注,持续发现误判、漏判和口径不一致问题,反向优化模型策略。

人工确认:高影响标签进入画像前需顾问确认,低置信度标签只做提示。
样本复盘:按高频标签、低准确标签、投诉/流失等高风险场景定期抽检。
版本迭代:Prompt、标签字典、规则阈值、热词库分版本发布并做效果对比。

如何区分短期意图与长期偏好:标签分层、有效期与交叉验证

短期意图标签:服务“下一次跟进动作”

定义客户在某次沟通中表达的即时需求、阶段性计划或待办事项。
示例“下个月要用钱”“这周想了解港股通”“先发资料看看”“最近不买长期产品”。
依据单次会话即可触发,但必须保存触发语句、生成时间、来源通话和置信度。
有效期通常设置为 7 / 30 / 90 天,到期自动降权或失效,避免短期事件固化为长期画像。
使用用于待办提醒、近期触达、下次回访话术、短周期客户分群。

长期偏好标签:服务“客户画像与经营策略”

定义客户在多次沟通、交易行为或顾问确认中稳定体现出的投资偏好、风险倾向和服务偏好。
示例长期偏好稳健理财、持续关注 ETF、风险敏感、偏好电话沟通、对市场观点敏感。
依据需要多次会话重复出现,或与交易行为、资产配置、风险等级、顾问确认相互印证。
有效期长期保留但动态降权;当新证据持续反向出现时,触发标签更新或冲突提醒。
使用用于客户画像、内容推荐、产品适配前置筛选、长期经营策略和服务分层。

标签生命周期:避免“一次对话决定长期画像”

1. 生成候选标签基于客户原话、上下文和标签字典生成候选标签,不直接默认进入核心画像。
2. 计算置信度结合 ASR 置信度、意图强度、证据完整性、标签冲突情况给出分数。
3. 判断标签类型区分短期意图、长期偏好、待办事项、风险信号和服务需求。
4. 顾问确认修正高影响标签进入画像前由顾问确认;修改结果沉淀为训练与评估样本。
5. 有效期与降权短期标签到期失效,长期标签按新旧证据动态调整权重。
6. 业务动作验证通过触达、转化、客户反馈和顾问采纳情况验证标签是否真正有经营价值。

一户一档提示词设计:可解释、可校验、可运营的结构化抽取

P提示词设计原则

角色限定:模型只作为“财富管理会话分析助手”,负责抽取意图、标签、摘要和待办,不直接给客户投资建议。
输入轻量化:只传入客户基础信息、已有客户标签、标准标签字典和本次 ASR 转写文本;不传通话元数据、历史沟通摘要和 ASR 低置信度片段,避免占用过多上下文窗口。
类别显式化:Prompt 中明确要求识别 8 类信息,其中投资兴趣、产品偏好、风险倾向、资金计划进入客户标签;服务需求、异议顾虑、流失风险、待跟进事项进入沟通档案总结项。
字典映射约束:模型必须先理解客户原话含义,再按标签字典中的类别、标签名、定义、触发条件和排除条件进行匹配;不允许凭相似词直接生成标签。
标签强约束:客户标签只能从标准标签字典中选择;确需新增时必须放入“候选新标签”,不能直接进入客户画像。
证据可追溯:每个标签必须返回客户原话、对话轮次、置信度和生成理由,便于顾问判断;来源信息由系统侧记录,不放入 Prompt。
短长分离:一次会话优先生成短期意图或长期偏好候选;长期偏好必须由已有标签、业务行为或顾问确认交叉验证。
合规边界:不输出买卖建议、不承诺收益、不判断产品适当性结论;建议动作必须由顾问确认后执行。
设计目标:用“轻量输入 + 强约束输出”替代大段历史上下文堆叠,让模型聚焦本次会话证据,输出带证据、带置信度、带生命周期的客户经营数据,同时降低上下文窗口压力。
输入客户基础信息、已有客户标签、标准标签字典、本次 ASR 转写文本。历史摘要和低置信度片段不进入 Prompt。
处理先识别 8 类信息,再按标签字典完成语义映射;4 类核心经营标签入库,其余 4 类作为沟通档案总结项。
输出JSON 结构:客户标签、证据句、匹配规则、置信度、有效期、沟通档案总结项。

J示例 Prompt 模板

你是证券财富管理场景下的“客户经营会话分析助手”。 你的任务是基于本次财富顾问与客户的通话转写文本,识别客户真实意图,并按照标准标签字典完成“客户标签映射”和“沟通档案总结”。其中,投资兴趣、产品偏好、风险倾向、资金计划进入客户标签;服务需求、异议顾虑、流失风险、待跟进事项进入“用户沟通展示档案”的总结项。 【输入控制原则】 为控制上下文窗口占用,本 Prompt 只接收完成本次分析所必需的轻量信息:客户基础信息、已有客户标签、标准标签字典和本次 ASR 转写文本。不要要求传入通话元数据、历史沟通摘要、ASR 低置信度片段或完整历史对话。历史信息应先由系统侧沉淀为“已有客户标签”后再输入。 【重要边界】 1. 你只能做会话分析、标签抽取、摘要生成和待办建议,不得直接给出投资建议。 2. 不得承诺收益,不得替代适当性判断,不得诱导客户购买具体产品。 3. 对产品推荐、权限开通、风险测评等动作,只能生成“建议顾问确认后跟进”。 4. 如果本次会话证据不足,必须输出低置信度或“不生成标签”,不得依赖未输入的历史信息进行补充推断。 5. 客户画像标签必须优先来自标准标签字典,不能随意创造标签。 6. 顾问发言只能作为理解上下文,不能作为客户标签证据;客户标签证据必须来自客户发言。 【输入信息】 客户基础信息:{{customer_profile}} 已有客户标签:{{existing_tags}} 标准标签字典:{{tag_dictionary}} 本次 ASR 转写文本:{{asr_transcript}} 【标准标签字典建议结构】 标签字典建议按以下结构提供,便于模型做稳定映射: { "投资兴趣": [ { "tag_name": "港股通关注", "definition": "客户主动询问港股通、跨境投资或相关开通流程", "trigger_conditions": ["询问港股通", "了解开通流程", "关注港股市场"], "exclude_conditions": ["仅顾问单方面介绍", "客户明确表示不感兴趣"], "example_phrases": ["港股通怎么开", "我想了解一下港股通"] } ], "产品偏好": [], "风险倾向": [], "资金计划": [], "服务需求": [], "异议顾虑": [], "流失风险": [], "待跟进事项": [] } 【需要识别的信息类别】 请从本次客户发言中识别以下 8 类信息: 1. 投资兴趣:客户关注的市场、品种、业务或投资方向,例如基金、ETF、港股通、两融、固收等。 2. 产品偏好:客户对产品期限、收益形态、流动性、波动水平、持有方式等方面的偏好。 3. 风险倾向:客户对亏损、波动、回撤、保守/进取风格的表达。 4. 资金计划:客户关于新增资金、赎回、调仓、短期用款、资金到账等计划。 5. 服务需求:客户希望顾问提供的解释、资料、操作指导、资讯同步或沟通方式。 6. 异议顾虑:客户对产品、市场、费用、期限、流动性、风险、规则等方面的担心或反对意见。 7. 流失风险:客户表达资产转出、竞品比较、强烈不满、投诉倾向、长期不回应等风险信号。 8. 待跟进事项:客户明确或隐含需要顾问后续完成的动作,例如发送材料、回访、协助开通、提醒风险测评。 【客户标签与沟通档案边界】 - “投资兴趣 / 产品偏好 / 风险倾向 / 资金计划”是客户标签体系的 4 类核心经营标签,匹配成功后输出到 tags。 - “服务需求 / 异议顾虑 / 流失风险 / 待跟进事项”不作为客户画像标签入库,而是输出到 communication_profile,作为用户沟通展示档案的总结项。 - 如果标签字典中包含 8 类信息,也必须按上述边界处理:前 4 类进入 tags,后 4 类进入 communication_profile。 【标签字典映射规则】 1. 先做语义理解,再做字典匹配:不要因为客户原话中出现某个关键词就直接打标签,必须结合上下文判断真实含义。 2. 只允许将客户标签映射到标准标签字典中已有的标签名;标签名、标签类别必须与字典保持一致。 3. 匹配时依次参考:标签类别 → 标签定义 → 触发条件 → 排除条件 → 示例话术。 4. 如果多个标签相似,选择证据最直接、定义最匹配的标签;仍无法区分时输出低置信度,并要求顾问确认。 5. 如果客户表达明确但字典没有合适标签:不要强行映射到相近标签,应放入 candidate_new_tags,并说明建议新增原因。 6. 服务需求、异议顾虑、流失风险、待跟进事项即使能匹配字典,也只进入 communication_profile,不进入 tags。 【分析任务】 请按以下步骤处理: 1. 判断本次沟通场景:产品咨询 / 市场观点 / 业务办理 / 风险提示 / 客户维护 / 投诉反馈 / 其他。 2. 只基于“客户发言”抽取客户意图;顾问发言只能作为当前会话上下文,不得作为客户偏好的直接证据。 3. 按“需要识别的信息类别”逐项扫描客户发言,识别 8 类信息。 4. 对投资兴趣、产品偏好、风险倾向、资金计划进行标准标签字典映射;每个标签必须给出触发原话、对话轮次、标签类别、字典匹配依据、置信度和判断理由;不得引用未输入的历史摘要或通话元数据。 5. 将服务需求、异议顾虑、流失风险、待跟进事项整理为 communication_profile 总结项,并尽量保留证据句或动作建议。 6. 判断标签类型: - short_term_intent:短期意图,来自本次会话的即时需求或阶段性计划; - long_term_preference_candidate:长期偏好候选,来自本次会话但尚未被已有标签或顾问确认验证; - long_term_preference:长期偏好,必须能被已有客户标签、业务行为标签或顾问确认信息支持。 7. 判断标签是否需要顾问确认:高影响、低置信度、涉及产品适配、涉及长期偏好沉淀的标签必须需要确认。 8. 生成本次沟通摘要和建议下一步动作。 【置信度规则】 - 0.85-1.00:客户明确表达,且本次转写内容足够清晰,可作为强标签候选。 - 0.65-0.84:客户表达较明确,但仍需顾问确认。 - 0.40-0.64:弱意图,仅作为提示,不进入核心画像。 - 0.00-0.39:证据不足,不生成标签。 【短期意图与长期偏好判断规则】 - 单次通话出现的资金安排、近期咨询、临时拒绝、资料需求,默认归为短期意图。 - 在不传入历史沟通摘要的前提下,只有当本次表达与已有客户标签、交易行为、资产配置、风险测评或顾问确认信息一致时,才能归为长期偏好;否则只能归为长期偏好候选。 - 短期意图必须给出有效期,默认 30 天;资金使用计划、回访待办可设置 7-30 天。 - 长期偏好必须给出依据类型:已有标签印证 / 行为数据 / 顾问确认 / 风险等级印证。 【输出格式】 请严格输出 JSON,不要输出额外解释: { "conversation_scene": "", "summary": { "topic": "", "customer_needs": [], "customer_concerns": [], "advisor_response": [], "next_best_actions": [] }, "tags": [ { "tag_name": "", "tag_category": "投资兴趣/产品偏好/风险倾向/资金计划", "tag_type": "short_term_intent/long_term_preference_candidate/long_term_preference", "confidence": 0.0, "evidence_sentence": "客户原话", "dialogue_turn": "", "dictionary_mapping_basis": "匹配到该标签的字典定义/触发条件/排除条件判断", "reason": "", "validity_days": 30, "need_advisor_confirm": true, "action_suggestion": "" } ], "communication_profile": { "service_needs": [ {"summary": "", "evidence_sentence": "客户原话", "action_suggestion": ""} ], "objections_or_concerns": [ {"summary": "", "evidence_sentence": "客户原话", "severity": "low/medium/high"} ], "churn_risk_signals": [ {"summary": "", "evidence_sentence": "客户原话", "severity": "low/medium/high"} ], "follow_up_tasks": [ {"task": "", "evidence_sentence": "客户原话", "suggested_due_days": 7, "need_advisor_confirm": true} ] }, "candidate_new_tags": [ {"tag_name": "", "tag_category": "投资兴趣/产品偏好/风险倾向/资金计划", "evidence_sentence": "客户原话", "reason_for_new_tag": ""} ], "not_generated_reasons": [], "compliance_notes": [] }

简单 Demo:从一段通话到“一户一档”结构化更新

D模拟输入:轻量化 ASR 转写文本

客户基础信息张先生
已有标签稳健倾向
标签字典8 类标准字典
输入文本本次 ASR
顾问
张先生您好,最近市场波动比较大,想跟您同步一下账户情况,也看下近期有没有新的资金安排。
客户
最近我还是不太想冒风险,股票这块先不加了。有没有稳一点、期限短一点的产品?收益比活期高一些就行。
顾问
明白,您更关注稳健和流动性。我可以先整理一些低波动、短期限的产品资料给您参考。
客户
可以。另外我下个月可能要用一部分钱,所以最好不要锁太久。还有上次你说的港股通,我想了解一下怎么开,但现在不一定马上做。
顾问
好的,我后续把港股通开通流程和风险提示材料一起发您,您看完后我们再约时间沟通。
客户
可以,先发我企微吧。最近市场波动太大,我还是想保守一点。

AI模拟输出:客户标签 + 沟通展示档案

沟通摘要:客户表达近期风险偏好偏保守,明确关注稳健、短期限、高流动性产品;因下个月可能有资金使用计划,暂不适合长期锁定产品。同时客户对港股通开通流程有初步了解意向,但尚未形成强交易意图。
风险倾向|低风险偏好
证据:“不太想冒风险”“想保守一点”
置信度 0.82
需顾问确认
产品偏好|短期限 / 高流动性
证据:“期限短一点”“不要锁太久”
置信度 0.91
有效期 30 天
资金计划|短期用款
证据:“下个月可能要用一部分钱”
置信度 0.88
有效期 30 天
投资兴趣|港股通关注
证据:“想了解一下怎么开,但现在不一定马上做”
置信度 0.74
弱意图
服务需求

客户希望通过企微接收资料,并在阅读后再沟通;偏好低打扰、资料先行的服务方式。

异议顾虑

主要顾虑为市场波动、产品期限过长和流动性不足;暂不适合长期锁定型产品沟通。

流失风险

未出现明确资产转出或投诉信号,但客户对波动较敏感,需避免强推高波动产品。

待跟进事项

发送短期限低波动产品资料、港股通开通流程和风险揭示材料;7 日后企微回访。

会话场景:产品咨询 + 客户维护标签映射:8 类识别,4 类入画像沟通档案:总结项随会话更新
{ "conversation_scene": "产品咨询/客户维护", "summary": { "topic": "稳健短期限产品咨询与港股通开通了解", "customer_needs": ["稳健理财", "短期限产品", "港股通开通流程"], "customer_concerns": ["市场波动", "资金流动性", "长期锁定"], "next_best_actions": ["发送产品资料", "发送港股通开通流程", "7日后企微回访"] }, "tags": [ { "tag_name": "低风险偏好", "tag_category": "风险倾向", "tag_type": "long_term_preference_candidate", "confidence": 0.82, "evidence_sentence": "最近我还是不太想冒风险。", "validity_days": 90, "need_advisor_confirm": true, "dictionary_mapping_basis": "匹配风险倾向类标签:客户多次表达不想冒风险、想保守一点,符合低风险偏好触发条件" }, { "tag_name": "短期限/高流动性产品偏好", "tag_category": "产品偏好", "tag_type": "short_term_intent", "confidence": 0.91, "evidence_sentence": "有没有稳一点、期限短一点的产品?", "validity_days": 30, "need_advisor_confirm": false, "dictionary_mapping_basis": "匹配产品偏好类标签:客户明确提出期限短、不要锁太久,符合短期限/高流动性触发条件" }, { "tag_name": "短期用款", "tag_category": "资金计划", "tag_type": "short_term_intent", "confidence": 0.88, "evidence_sentence": "下个月可能要用一部分钱。", "validity_days": 30, "need_advisor_confirm": false, "dictionary_mapping_basis": "匹配资金计划类标签:客户明确提出下个月可能用钱,符合短期用款触发条件" }, { "tag_name": "港股通关注", "tag_category": "投资兴趣", "tag_type": "short_term_intent", "confidence": 0.74, "evidence_sentence": "我想了解一下怎么开,但现在不一定马上做。", "validity_days": 30, "need_advisor_confirm": true, "dictionary_mapping_basis": "匹配投资兴趣类标签:客户主动询问港股通开通方式,但表达暂不一定马上做,故为弱意图" } ], "communication_profile": { "service_needs": [{"summary": "企微发送资料,资料先行后续沟通", "evidence_sentence": "可以,先发我企微吧。", "action_suggestion": "通过企微发送资料"}], "objections_or_concerns": [{"summary": "担心市场波动、长期锁定和流动性不足", "evidence_sentence": "市场波动太大,我还是想保守一点。", "severity": "medium"}], "churn_risk_signals": [{"summary": "无明确流失信号;客户对波动敏感,需避免高波动产品强推", "evidence_sentence": "股票这块先不加了。", "severity": "low"}], "follow_up_tasks": [ {"task": "发送短期限低波动产品资料", "evidence_sentence": "先发我企微吧。", "suggested_due_days": 1, "need_advisor_confirm": true}, {"task": "发送港股通开通流程和风险揭示材料", "evidence_sentence": "我想了解一下怎么开。", "suggested_due_days": 1, "need_advisor_confirm": true}, {"task": "7日后企微回访", "evidence_sentence": "您看完后我们再约时间沟通。", "suggested_due_days": 7, "need_advisor_confirm": true} ] }, "candidate_new_tags": [], "compliance_notes": ["仅生成经营线索,不构成投资建议", "产品资料发送前需校验客户风险等级与适当性"] }
🎙️
语音数据资产化

将沉睡录音转化为可检索、可分析、可运营的客户标签与沟通记录。

🎯
标签准确性可运营

通过证据句、置信度、人工确认和抽样标注,持续降低误判与过度推断。

🏷️
画像动态更新

用标签来源、有效期、权重和冲突校验,区分短期需求与长期偏好。

🔁
全域运营基础

标签可延展至 APP 推荐、企微触达、智能外呼、客户分群和经营策略优化。