aichat.md 上的语音回复和音频消息如何运作 – 详细说明

aichat.md 区别于其他平台的一大特点,是原生支持语音消息:既能接收(当客户向你发送音频消息时),也能回复(当 AI 助手用语音回复客户时)。这一切基于与两项国际认可技术的集成:

接收音频消息

客户通过已连接的渠道发送音频消息。

  • 兼容平台

  • 自动检测

使用 Whisper(OpenAI)进行解析

即时转录

音频消息会发送给 Whisper,由它“聆听”并将内容转换为文本。例如,如果有人说罗马尼亚语,转录结果也会是罗马尼亚语;如果说俄语,转录结果会是俄语,依此类推。

多语言

Whisper 会自动检测所使用的语言。

文本理解

AI 助手会像处理其他文字消息一样记录该文本,因此能准确理解客户的问题。

无需配置

无需手动配置语言或转录设置。

处理中

助手处理与决策

转录完成后,AI 助手会分析文本并决定如何回复。

使用 ElevenLabs 生成语音回复

将文本转换为语音消息的流程。

文本转语音

AI 助手先生成文字回复,然后发送给 ElevenLabs。

创建音频文件

ElevenLabs 使用所选声音将文本转换为语音消息。

返回给客户

最终语音消息会通过 Facebook/Instagram/Telegram 发送给客户。

自定义声音

可选择男声、女声、温暖语气或专业语气。

为每个联系人或场景定制声音

aichat.md 的一个独特优势是,你可以根据客户类型、语言或场景自定义使用的声音。

新客户

友好、略带热情的声音。

商务伙伴

更严肃、中性的声音。

不同语言

适应客户的语言(例如:带特定口音的法语、更温暖的西班牙语)。

特定场景

推广时使用有活力的语气,处理问题时使用平静的语气。

简短回顾场景

客户

在 Facebook 上发送一段 15 秒的罗马尼亚语语音消息,说:“您好,我想了解你们周六是否配送。谢谢!”

AI 助手(Whisper)

将文件发送给 Whisper,并获取文本。

AI 助手(回复)

检查指令。生成回复:“您好!当然,我们周六也配送,且不收取额外费用。” 将文本发送给 ElevenLabs,并接收音频文件。

AI 助手(发送)

在 Facebook 对话中同样用罗马尼亚语回复语音消息。客户会听到清晰、温暖且个性化的回答。
placeholder hero

为什么语音回复对你的业务很重要

通过集成 Whisper(用于语音识别)和 ElevenLabs(用于语音生成),aichat.md 可将收到的任何音频消息转化为顺畅的双向对话:无论客户使用哪种语言,都能理解其内容,并以像真人一样自然的个性化语音消息回复。
你甚至可以为每种语言或每类客户设置不同的声音,轻松打造独特且高度个性化的体验。

  • 提升转化率:当人们感受到更有人情味的互动(例如语音消息)时,反应会更积极。

  • 无障碍与高效率:许多客户更愿意说话,而不是打字。

  • 专业表现:助手可用多种语言出色回复(不仅是文字,也包括语音)。

  • 独特体验:打造独特且高度个性化的体验。