分布式搜索引擎的研究和实践pdf.doc

分布式搜索引擎的研究和实践 分布式搜索引擎的研究和实践 摘要 有人抄概念，有人潜心做技术，本文就是这样一篇让“云”接地气的理论加实践的文章。 当前社会，数据已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对 于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。 另外一方面分布式系统成为时下各种网络架构的先进的解决方案。本文通过分布式搜索 引擎与传统数据库搜索模式的比较、结合当前信息检索的发展阶段和应用范围来说明研究分 布式搜索的必要性。 此外，分布式信息检索主要是一门实验科学。通过对国内国外企业在信息检索方面的发 展趋势和社会价值的了解；并且利用网络上各种相关学习资料掌握实施分布式搜索引擎项目 实现的基本方法。通过对各种流行的分布式搜索方案的选型，最终选定 Elasticsearch 作为 实验框架来构建一个分布式搜索引擎框架。通过对 ElasticSearch 的部署和使用的实践，验 证了这是一个比较完整的，稳定高效的分布式信息检索系统解决方案，可以为以后独立开发 一个商用的系统打下基础。 分布式搜索引擎是向云计算迈出的重要一步。分布式搜索引擎是当下大数据时代信息检 索的比较先进的解决方案，是用软件架构来实现控制硬件成本的一个很好的范例。 关键词：分布式，信息检索，搜索引擎，大数据，云计算，实践，ElasticSearch  第 1 页 共 35 页  分布式搜索引擎的研究和实践 目 录 第一章 绪论 ........................................................................................................................ ............ 4 1 引言 ..................................... ................................................................................................. 4 1.1................. 选题意义................................................................................................. 4 1.2 研究方向及研究背景 ................................................................................................ 4 1.3............. 本文的组织 ................................................................................................. 5 2 文献综述 .............................................................................................................................. 5 3 信息检索技术当前发展状况............................................................................................... 6 3.1 基于目录的搜索引擎............................................................................................... 6 3.2 基于机器人的搜索引擎（robot based search engines） ............................... 6 3.3 基于关键字检索的搜索引擎................................................................................... 6 3.4............. 元搜索引擎 ..................................................................................