基于LDA主题模型的维吾尔语无监督词义消歧
袁扬; 李晓; 杨雅婷
刊名厦门大学学报(自然科学版)
2020
卷号59期号:2页码:198-205
关键词维吾尔语 无监督词义消歧 主题模型 语义相似度 同义词
ISSN号0438-0479
英文摘要

维吾尔语是典型的资源稀缺型语言,由于词义消歧标注语料资源和语义分析工具的不足,导致传统的有监督方法难以实现.针对该问题,将篇章文本的词义消歧问题类比为文本主题分类问题,在LDA(latent Dirichlet allocation)主题模型的基础上提出了一种维吾尔语无监督词义消歧模型.为强化主题模型对歧义词语义项的分类性能,加入了3个数据预处理过程:去除停用词,过滤有效词和强化同义词词频权重.实验结果表明,在随机抽取的63组测试样本集中,该模型的词义消歧准确率达到65.08%,在篇章文本采样词任务中词义消歧准确率达到61.2%.

CSCD记录号CSCD:6665020
内容类型期刊论文
源URL[http://ir.xjipc.cas.cn/handle/365002/7283]  
专题新疆理化技术研究所_多语种信息技术研究室
作者单位1.新疆民族语音语言信息处理实验室
2.中国科学院大学
3.中国科学院新疆理化技术研究所
推荐引用方式
GB/T 7714
袁扬,李晓,杨雅婷. 基于LDA主题模型的维吾尔语无监督词义消歧[J]. 厦门大学学报(自然科学版),2020,59(2):198-205.
APA 袁扬,李晓,&杨雅婷.(2020).基于LDA主题模型的维吾尔语无监督词义消歧.厦门大学学报(自然科学版),59(2),198-205.
MLA 袁扬,et al."基于LDA主题模型的维吾尔语无监督词义消歧".厦门大学学报(自然科学版) 59.2(2020):198-205.
个性服务
查看访问统计
相关权益政策
暂无数据
收藏/分享
所有评论 (0)
暂无评论
 

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。


©版权所有 ©2017 CSpace - Powered by CSpace