文本挖掘及其应用

应用技术

文本挖掘及其应用

蒋良孝

,蔡之华

!

(中国地质大学计算机科学与技术系,武汉"#$$%")

要:文本挖掘是指利用数据挖掘技术,从大量的文本数据中提取感兴趣的、潜在的有用模式和隐藏的信息。

本文详细阐述了文本挖掘的功能、文本挖掘的过程、文本挖掘的应用,并在文章最后介绍了文本挖掘的工具及演示实例。

关键词:文本挖掘;数据挖掘;文档

引言

随着网络和连机出版的发展,文本数据出现爆炸性增长,能获得的文本信息的集合是如此巨大,以至于不能进行简单的阅读和分析;并且在当今海量的文本数据中,只有很少的一部分与某个用户相关,而不清楚文档的内容,又很难形成有效的查询。可见,传统的信息检索技术已经不能适应日益增加的大量的文本数据处理的需要。从原则上讲,可以在任何类型的信息存储上进行数据挖掘,从而提取知识。然而,大部分数据挖掘工具是在集成的、一致的和清理过的、也就是“二手”的数据上进行。如关系数据库的数据挖掘主要与存储在经过净化和一定预处理的关系数据库中进行,并且实质上与结构化的数据协同工作。在现实世界中,知识不仅以传统数据库中的结构化数据的形式出现,而且以诸如书籍、研究论文、新闻文章、/01页面及电子邮件等各种各样的形式出现。由于在这些非结构化的数据源中也存在着大量的知识,因此也应该在这些数据源上进行数据挖掘,提取感兴趣的、潜在的有用模式和隐藏的信息,这就是文本挖掘。文本挖掘可以完成不同文档的比较,以及文档重要性和相关性排列,或者找出多文档的模式及趋势。因此,文本挖掘就成为了数据挖掘中的一个日益流行且重要的研究课题。

湖北省自然科学基金项目资助(编号:8基金项目:+,,29::,,;)

2文本挖掘的功能

在当今世界,一个人或一个组织所获得的文本

信息集合十分巨大,而且文本信息集合还在不断地更新和增加。这样,信息检索等技术就不能适应当今文本信息处理的需要,所以,必须用文本挖掘技术来解决这一难题。文本挖掘可以对大量文档集合的内容进行总结、分类、聚类、关联分析、分布分析以及趋势预测等。

(文本总结2)

文本总结是指从文档中抽取关键信息,用简洁的形式对文档内容进行摘要或解释。这样,用户不需要浏览全文就可以了解文档或文档集合的总体内容。文本总结在有些场合十分有用,例如,搜索引擎在向用户返回查询结果时,通常需要给出文档的摘要。目前,绝大部分搜索引擎采用的方法是简单地截取文档的前几行。

代文本分类是指按照预先定义的主题类别,为文

计档集合中的每个文档确定一个类别。这样,用户不

但能够方便地浏览文档,而且可以通过限制搜索范

围来使文档的查找更为容易。目前,345667通过人

(总工来对/01的文档进行分类,这大大影响了索引

第的页面数目。利用文本分类技术可以对大量文档

一进行快速、有效的自动分类。

五七期"#!!"#$%&’()*$%+,,-.+

(文本分类+)

Word文档免费下载Word文档免费下载:文本挖掘及其应用 (共4页,当前第1页)

你可能喜欢

  • 知识发现
  • 十大数据挖掘算法
  • 形式概念分析
  • 数据挖掘报告
  • 数据挖掘流程
  • 自动文本分类
  • 信息挖掘
  • 数据挖掘论文

文本挖掘及其应用相关文档

最新文档

返回顶部