自动标引查看源代码讨论查看历史

自动标引
图片来自slidesplayer

自动标引（Automatic Indexing）包括关键词自动提取（又称自动抽词标引）与自动赋词标引两种类型。

关键词自动提取是一种识别有意义且具有代表性片段或词汇的自动化技术。关键词自动提取在文本挖掘域被称为关键词抽取，在计算语言学领域通常着眼于术语自动识别，在讯息检索领域，就是指自动标引。自动标引属于文本讯息抽取的范畴。文本讯息抽取是从文本数据中抽取人们关注的特定的讯息。

作用

由于关键词是表达文件主题意义的最小单位，因此大部分对非结构化文件的自动处理，如自动标引、自动文摘、自动分类、自动聚类、相关反馈、自动过滤、事件检测与跟踪、知识挖掘、讯息可视化、概念检索、检索提示、关联知识分析、自动问答等，都必须先进行关键词提取的动作，再进行其他的处理。可以说，关键词提取是所有文件自动处理的基础与核心技术。目前大多文档都不具有关键词,同时手工标引费力费时且主观性较强, 因此关键词自动标引是一项值得研究的技术。

发展过程

自动标引研究可以分为三个阶段： 从Luhn于1957年开始进行自动标引后开始，到目前为止，自动标引研究经历了50年的发展历程。一直到20世纪90年代初，关于关键词自动提取的研究一直就没有停止过。 20世纪90年代初到90年代末，自动标引研究渐渐冷却，原因主要包括：全文索引逐渐被人采用，并且基本上能满足用户需要；传统的自动标引方法的效率到了极限；网络兴起之初的冲击与信息需求环境的改变。20世纪90年代末一直到现在，关键词自动提取的研究逐渐升温，尤其是最近几年，关键词自动提取研究进行的如火如荼，产生该现象的主要原因为：全文索引的功能越来越难以满足实际需求，用户需要更加精确的结果；另外互联网的很多服务，例如自动摘要，文档分类与聚类，文本分析，主题检索等都要依赖于关键词自动提取的结果，只有这样才能有希望从根本上提高讯息服务品质。