LLM2D
对选定印度语言的LLM和Google Translate翻译进行情感和语义分析的评估
An evaluation of LLMs and Google Translate for translation of selected Indian languages via sentiment and semantic analyses
作者: Rohitash Chandra, Aryan Chaudhary, Yeshwanth Rayavarapu
发布日期: 3/28/2025
arXiv ID: oai:arXiv.org:2503.21393v1

摘要

arXiv:2503.21393v1 声明类型: cross 摘要:大型语言模型(LLMs)在语言翻译方面一直崭露头角,包括资源稀缺的语言。关于LLMs生成的翻译质量评估的研究相对有限,包括Gemini、GPT和谷歌翻译。在本研究中,我们通过使用对印度语言,包括梵语、泰卢固语和 Hindi 的选定LLMs进行语义和情感分析来解决这一局限性。我们选择了由专家精心翻译的文本,并使用LLMs生成它们的英文翻译,然后与选定的专家(人类)翻译进行比较。我们的发现表明,在翻译准确性方面LLMs取得了显著进步,但在保持情感和语义完整性方面仍有挑战,尤其是在比喻和哲学的背景下。情感分析显示,GPT-4o 和 GPT-3.5 在保护断章 (梵语-英语)翻译的情感方面比谷歌翻译表现更好。对于泰卢固语-英语翻译的Tamas 和 Telugu-English 的 Maha P 翻译,我们观察到了类似的趋势。在三种语言的翻译中,GPT-4o 在情感方面与 GPT-3.5 的表现相似。我们发现,与谷歌翻译相比,LLMs 在捕捉情感方面的翻译通常表现更好。