结合LLM与3D动画技术的手语数字人系统

Yang Yang (杨阳), Zhang Ying (张颖), Huang Kaiyu (黄锴宇), Xu Jinan (徐金安)


Abstract
“手语翻译(Sign Language Translation, SLT)系统作为一种重要的辅助技术,为听障人士提供了与他人沟通的有效途径。然而,传统手语翻译系统在准确性、流畅性差等方面存在问题。本文提出了一种结合大语言模型(Large Language Model, LLM)和3D动画技术(3D Animation Technology)的手语翻译系统,旨在克服这些局限,提高翻译的准确性和流畅性。本文详细介绍了系统的设计与实现过程,包括提示词设计、数据处理方法以及手语数字人翻译系统的实现。实验结果表明,采用LLM方法在手语翻译中能够生成较为自然和准确的结果。在标准评估和人工评估的两种评估方法下,本系统在大多数情况下能够较好地完成手语翻译任务,性能优于传统方法。本文的研究为进一步改进手语翻译系统提供了有益的参考和启示。”
Anthology ID:
2024.ccl-3.44
Volume:
Proceedings of the 23rd Chinese National Conference on Computational Linguistics (Volume 3: Evaluations)
Month:
July
Year:
2024
Address:
Taiyuan, China
Editors:
Hongfei Lin, Hongye Tan, Bin Li
Venue:
CCL
SIG:
Publisher:
Chinese Information Processing Society of China
Note:
Pages:
393–404
Language:
Chinese
URL:
https://aclanthology.org/2024.ccl-3.44/
DOI:
Bibkey:
Cite (ACL):
Yang Yang, Zhang Ying, Huang Kaiyu, and Xu Jinan. 2024. 结合LLM与3D动画技术的手语数字人系统. In Proceedings of the 23rd Chinese National Conference on Computational Linguistics (Volume 3: Evaluations), pages 393–404, Taiyuan, China. Chinese Information Processing Society of China.
Cite (Informal):
结合LLM与3D动画技术的手语数字人系统 (Yang et al., CCL 2024)
Copy Citation:
PDF:
https://aclanthology.org/2024.ccl-3.44.pdf