“搜索”的原理,架构,实现,实践,面试不用再怕了(值得收藏)!!!
发布时间:2019-04-02 20:07:03 所属栏目:优化 来源:58沈剑
导读:可能99%的同学不做搜索引擎,但99%的同学一定实现过检索功能。搜索,检索,这里面到底包含哪些技术的东西,希望本文能够给大家一些启示。 全网搜索引擎架构与流程如何? 全网搜索引擎的宏观架构如上图,核心子系统主要分为三部分(粉色部分): (1)spider爬虫
分词后倒排索引:
由检索词item快速找到包含这个查询词的网页Map>就是倒排索引。 画外音:明白了吧,词到url的过程,是倒排索引。 正排索引和倒排索引是spider和build_index系统提前建立好的数据结构,为什么要使用这两种数据结构,是因为它能够快速的实现“用户网页检索”需求。 画外音,业务需求决定架构实现,查询起来都很快。 检索的过程是什么样的? (编辑:晋中站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |