金融界2月5日消息，有投资者在互动平台向汤姆猫提问：贵司国内研发团队与西湖心辰合作的多模态 AI 汤姆猫产品已初步实现拍照识物、英文口语启蒙、兴趣引导、科普教育、AI 生图、AI 生成绘本、 情境对话等多个功能，近期公司协同西湖心辰团队在多模态、降低推理成本、对话时长等方向取得哪些进展？

公司回答表示：（1）汤姆猫AI情感陪伴机器人产品已在国内各大线上线下渠道开展试发行，该产品搭载了公司与西湖心辰共同研发的“汤姆猫情感陪伴垂直模型”以及西湖心辰的语音合成模型，上述模型帮助公司产品实现了正向情绪价值引导、汤姆猫特定音色的音频输出等功能。（2）在多模态大模型技术层面，西湖心辰于2024年创新性推出了语音大模型“心辰Lingo”，该模型实现了端对端语音技术的突破，端到端语音大模型不仅可以语音识别，还集成了自然语言处理、意图识别、对话管理以及语音合成等多个环节，实现了从语音输入到语音反馈的完整交互过程，能精确捕捉情感、语气、音调、环境音等重要特征，帮助模型更全面地理解语音内容，从而提供更加自然和生动的交互体验，同时还可以根据上下文和用户指令，自适应调整语音的速度、高低、噪声强度，并能够生成对话、歌唱、相声等多种风格的语音响应，具备语音实时控制音量、实时打断等功能，极大地提升了语音交互的灵活性、流畅性及拟人化，可赋能教育、金融、医疗健康、政府与公共服务、媒体与娱乐、零售与商业服务、制造与工程等多个行业的实际应用场景。该模型自开放内测预约以来，已有多家企业用户预约测试。

来源：金融界