集成方法提升阿拉伯语推文自动分类精度

0 下载量 115 浏览量 更新于2025-01-16 收藏 819KB PDF 举报
随着社交媒体的普及,推文分类已成为一个热门研究领域,特别是在阿拉伯语环境下,因为这种语言的特殊性带来了额外的挑战。这篇论文探讨了如何通过集成方法提高阿拉伯语推文的自动分类精度,特别关注的是将其分类为体育、文化、政治、技术和一般等类别。作者们,Ahmed N. Abdelaala和Hassan Elmahdya Halawauni,分别来自埃及开罗爱资哈尔大学和Minia大学的计算机和系统工程系,他们针对阿拉伯语推文的预处理进行了深入研究。 首先,他们强调了阿拉伯文本预处理的重要性,因为这种语言的特性(如词序和书写方向)与英文不同,需要更精细的处理以提取有效信息。预处理步骤包括移除停用词和标准化文本,以便降低噪声并聚焦于关键信息。文本分类的目标是根据预先设定的类别对文档进行自动归类,这项技术在信息检索、情感分析等领域具有广泛的应用。 研究的核心是采用集成学习方法,包括bagging(自助采样法)、boosting(提升算法)和stacking(堆叠分类器)来提高分类准确性。他们选择J48(决策树)、朴素贝叶斯(NB)和顺序最小优化(SMO)作为单一分类器,通过对比这些方法,集成后的模型能够显著提高性能。具体来说,他们发现集成方法使得朴素贝叶斯分类器的准确率提高了1.6%,而顺序最小优化分类器的准确率提升了2.2%。这证明了集成策略在阿拉伯语推文分类中的有效性。 论文还指出,他们的研究成果发表在《电气系统与信息技术学报》上,是基于2018年的数据集进行的实验验证。最后,研究者强调了成果的版权归属,即该论文是遵循CC BY-NC-ND许可的开放获取文章,允许在特定条件下分享和使用。 这篇论文为阿拉伯语推文的自动分类提供了一个实用的集成方法,不仅改进了单个分类器的性能,也为处理其他类似语言的文本提供了有价值的经验和参考。这对于推动阿拉伯语信息处理和跨文化交流的理解至关重要。