• 主题
高级搜索  >
历史搜索 清空历史
首页> 外文会议>International Conference on Games and Virtual Worlds for Serious Applications >Web-Based Live Speech-Driven Lip-Sync
【24h】

Web-Based Live Speech-Driven Lip-Sync

机译：基于Web的实时语音驱动口型同步

获取原文
页面导航
  • 摘要
  • 著录项
  • 相似文献
  • 相关主题

摘要

Virtual characters are an integral part of many games and virtual worlds. The ability to accurately synchronize lip movement to audio speech is an important aspect in the believability of the character. In this paper we propose a simple rule-based lip-syncing algorithm for virtual agents using the web browser. It works in real-time with live input, unlike most current lip-syncing proposals, which may require considerable amounts of computation, expertise and time to set up. Our method generates reliable speech animation based on live speech using three blend shapes and no training, and it only needs manual adjustment of three parameters for each speaker (sensitivity, smoothness and vocal tract length). Our proposal is based on the limited real-time audio processing functions of the client web browser (thus, the algorithm needs to be simple), but this facilitates the use of web based embodied conversational agents.
机译：虚拟角色是许多游戏和虚拟世界中不可或缺的一部分。准确地使嘴唇运动与音频语音保持同步的能力是角色可信度的重要方面。在本文中，我们为使用Web浏览器的虚拟代理提出了一种基于规则的简单口形同步算法。它与实时输入实时工作，这与大多数当前的口形同步提议不同，后者可能需要大量的计算，专业知识和时间来建立。我们的方法基于实时语音使用三种混合形状生成可靠的语音动画，无需任何训练，并且只需为每个说话者手动调整三个参数（灵敏度，平滑度和声道长度）。我们的建议基于客户端Web浏览器有限的实时音频处理功能（因此，该算法必须简单），但这有助于基于Web的嵌入式对话代理的使用。

著录项

相似文献

  • 外文文献
  • 中文文献
  • 专利
获取原文

客服邮箱：kefu@zhangqiaokeyan.com

京公网安备：11010802029741号 ICP备案号：京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有

  • 客服微信

  • 服务号