1.搜素引擎的工作原理可以分为哪几个阶段?
搜索引擎工作原理非常复杂,大致可以分为3个阶段:爬行与抓取、预处理、排名
(1)爬行与抓取(不理解,先不写)
(2)预处理
提取文字(提取关键词)
中文分词(记歌词与组合在一起)
去停止词(文章出现多次的词句,删除对此文章意义没有任何改变的)
消除噪声(对页面没有贡献的,没有意义的,包括版权、导航条、广告等)
去重(去掉多余的)
正向索引
倒排索引
链接关系计算
特殊文件处理
(3)排名
对搜索的请求进行分析
文件匹配
初始子集筛选
相关性计算
排名过滤及调整
排名显示1.搜素引擎的工作原理可以分为哪几个阶段?
搜索引擎工作原理非常复杂,大致可以分为3个阶段:爬行与抓取、预处理、排名
(1)爬行与抓取(不理解,先不写)
(2)预处理
提取文字(提取关键词)
中文分词(记歌词与组合在一起)
去停止词(文章出现多次的词句,删除对此文章意义没有任何改变的)
消除噪声(对页面没有贡献的,没有意义的,包括版权、导航条、广告等)
去重(去掉多余的)
正向索引
倒排索引
链接关系计算
特殊文件处理
(3)排名
对搜索的请求进行分析
文件匹配
初始子集筛选
相关性计算
排名过滤及调整
排名显示