跳到正文
Product Talk· Teresa Torres·· 12 天前AI 评分60

Your360 AI 分享用状态机与评测构建360度反馈语音Agent

Building an AI Voice Agent for 360 Degree Feedback: How Your360 AI Uses State Machines, Evals, and Layered Synthesis

AI 导读

Product Talk 播客节目介绍 Your360 AI 如何构建360度反馈语音Agent,由主持人 Teresa Torres 对谈其联合创始人兼CEO Jared Goralnick、设计负责人 Eda Goksel Jackson 与AI工程师 Alex Krasun。

正文 · AI 翻译

AI 全文翻译,未经原作者审校;可切换原文对照。

Building an AI Voice Agent for 360 Degree Feedback: How Your360 AI Uses State Machines, Evals, and Layered Synthesis

在以下平台收听本期节目:Spotify | Apple Podcasts

要打造一个能让人们就自己的盲点畅谈44分钟的AI语音智能体,需要什么?Your360 AI通过一次次通话找到了答案。

在本期Just Now Possible节目中,Teresa Torres与Your360 AI的联合创始人兼CEO Jared Goralnick、设计负责人Eda Goksel Jackson以及AI工程师Alex Krasun进行了对谈。他们的产品将过去只有高管层才能享有的基于访谈的360度反馈,带给了所有人。一位名叫Tam的语音AI教练负责进行自我探索通话、采访每一位反馈提供者,并引导被反馈者解读他们的报告。

他们具体讲述了其中的付出:用状态机取代单一提示词,以确保Tam不会偏离主线;从Retell迁移到LiveKit,以掌控级联语音栈的每一层;以及利用失败通话构建的人物角色来运行AI评估。接着是更难的部分:准确、有据可依且真正匿名的综合分析。

你将了解到他们如何在可观测性与敏感数据之间取得平衡、为什么推理模型不适合语音场景,以及结构性和实质性评估如何分别捕捉明显的错误和被遗漏的模式。

节目笔记

嘉宾

  • Jared Goralnick,Your360 AI联合创始人兼CEO
  • Eda Goksel Jackson,Your360 AI设计负责人
  • Alex Krasun,Your360 AI AI工程师

核心要点

  • 他们通过一次次通话构建了这款产品。自我探索智能体在反馈收集功能出现前一个月就已上线并得到验证,而综合分析则是在那之后才完成的。
  • 单一提示词无法维持一场结构化的对话。状态机让智能体保持正轨,同时仍能在对方想要深入时深入探讨。
  • 语音AI不是问卷调查。人们会在第一句话里回答三个问题,因此智能体必须追踪已经涵盖的内容,并决定何时追问、何时推进。
  • 如果客户在早期不让你查看对话记录,这本身就说明了市场的情况。先找到愿意开放的合作伙伴,然后构建自动化标记机制,让人只在出现问题时介入。
  • 综合分析需要两类评估。结构性检查捕捉“别搞砸”类的错误,比如反馈归属错误;实质性检查则以极少的规则重新运行分析,以发现首轮遗漏的模式。

本期内容

  • 基于访谈的360度反馈与年度评估及基于问卷的发展性360度反馈有何不同
  • 与教练Tam的三次通话:自我探索、反馈收集和360度报告解读
  • 为什么第一次解读通话突破了60分钟的平台限制,以及为什么现在解读通话的中位时长是44分钟
  • 使用状态机来管理优势、成长领域和被要求改进领域之间的转换
  • 基于失败通话构建的人物角色所生成的评估,用于对模型和供应商升级进行回归测试
  • 针对情感、客户价值和产品品质的自动化标记,取代例行的转录文本审查
  • 对语音通话进行可用性测试:屏幕录制加上后续访谈,将用户的感知与实际情况进行对比
  • 从Retell迁移到LiveKit,以全面掌控语音转文本、LLM和文本转语音
  • 语音场景下的模型权衡:个性与首字词元时间的取舍,以及为什么推理模型会碍事
  • 优化反馈收集通话以提高完成率并降低摩擦,包括通过电话进行的通话
  • 匿名规则:关键反馈需多方印证,仅在三位及以上提供者时才展示分组
  • 在反馈报告中逐步揭示,让接收者一次处理一个主题
  • 通过各公司的价值观与领导力原则来传递反馈
  • 面向相互依赖团队与独立群体的组织热力图
  • 下一步:在一个人的第一次与第二次 360 之间,将认知转化为行动

资源与链接

章节

00:00 团队介绍
01:35 360 反馈的含义
04:11 谁在使用 Your 360
05:33 起源故事与 AI 的契合
08:25 360 的工作原理
13:55 让语音更有温度
22:18 测试与评估
23:43 隐私与可观测性
27:28 分阶段构建
32:33 可用性测试通话
34:31 测试通话的感知
35:12 用于流程的状态机
36:58 灵活过渡调优
38:27 掌控语音栈
40:42 模型权衡与成本
42:28 反馈访谈的约束
44:49 综合目标与匿名性
49:11 渐进式报告交付
52:02 基于模式的摘要
54:25 多轮质量保证框架
59:46 组织级洞察视角
01:02:45 为什么语音优于问卷
01:05:58 路线图:从认知到行动
01:07:30 结语致谢

完整文字稿

播客文字稿仅向付费订阅者开放。

来源:Product Talk · producttalk.org

原文链接:https://www.producttalk.org/building-an-ai-voice-agent-for-360-degree-feedback-how-your360-ai-uses-state-machines-evals-and-layered-synthesis/