互联网的快速发展，使得人们面对的信息量急剧增大，特别是在网购的时候，货比三家和尽量省事儿的矛盾心理令很多人在面对琳琅满目的上平的时候不知所措。因此如果有个高效且方便的比价系统，便能够它使得用户可以在短时间内得到大量的所关心的商品的实时的价格及变化，这其中包括折扣信息特定网站搜索库存数量可设定的价格区间等重要信息，而且还不必考虑商家“竞价”的影响，使得购物环境更加纯净和自由。为此，本设计就是要设计出个基于结构的购物网站比价系统，实现同时对数家专业购物网站商品的实时信息比对以及走势查询。也使顾客减少网络搜索的次数并减少无用时间的浪费，具有很高的经济效益和实用价值。国内外研究现状比价搜索引擎，本质上来说就是个垂直搜索引擎，整个看似杂万方数据第章绪论乱无章，但如果按其所蕴涵信息的“深度”可以划分为和两大部分。是指通过超链接可以被传统搜索引擎站的价格进行查询，服务于广大用户，尽可能减少用户网上点点搜索的时间的浪费，提高查询效率。系统需要解决三个方面的问题。第，因为电子购物网站的产品的价格是不断变化的，所以产品价格互联网的快速发展，使得人们面对的信息量急剧增大，特别是在网购的时候，货比三家和尽量省事儿的矛盾心理令很多人在面对琳琅满目的上平的时候不知所措。因此如果有个高效且方便的比价系统，便能够它使得用户可以在的支持，但是却仅仅是针对站内的搜索，可比性不强，同时不排除所谓的竞价排名的嫌疑。为此，能从整个电子商务平台的角度，构建个不带有任何商业性质的比价系统将具有非常好的应用价值和意义。课题来源目的和意义方面的比较支持。从目前的发展现状来看，谷歌百度搜狐雅虎等知名网站，都具有非常先进的搜索技术，对全文所搜的支持非常全面。但是在特定领域的搜索却表现平平。淘宝有啊京东等网站对网上购物也提供了很好的特点迅速成为人们购物的理想方式。然而面对海量的商品，顾客很多时候无法在短时间内对同商品的价格及其走向折扣质量好评度等信息进行查询，而且对于跨商务平台下的不同商家的商品信息也缺乏有效的比价比质五章系统测试与运行结果测试原则准备工作使用抓取网页同步索引和数据库搜索前台本章小结结论致谢参考文献万方数据第章绪论第章绪论课题背景随着互联网的快速发展，网络购物以其快捷简便实惠引建立模块产品信息索引结构索引的创建对中文的分析请求处理模块前台显示模块万方数据通过获取价格产品参数和价格走势数据库访问类实现索引检索类实现前台页面设计与实现第内容取消对的限制利用策略多线程抓取网页信息提取模块介绍使用提取网页中的关键信息使用获取价格信息手机词库设计索索引的结构索引模块设计数据库和的结合本章小结第四章系统实现与测试网页爬取模块网页抓取模块向中添加定制的扩展来抓取特定的块价格查询模块走势查询模块万方数据后台管理模块设计网页爬取模块信息提取模块索引建立模块数据存储模块请求处理模块数据库设计比价搜索的数据库设计特点数据库表的设计索引设计使用建立索引统概述系统的用例模型系统流程系统目标和解决的问题系统需求问题描述系统功能性需求系统非功能性需求系统开发环境系统硬件平台系统软件平台与开发工具本章小结第三章系统设计系统功能架构设计前台模块设计参数查询模万方数据目录第章绪论课题背景课题来源目的和意义国内外研究现状国外研究现状国内研究现状主要研究内容本文的组织结构第二章系统需求分析引言系万方数据,万方数据,万方数据目录第章绪论课题背景课题来源目的和意义国内外研究现状国外研究现状国内研究现状主要研究内容本文的组织结构第二章系统需求分析引言系统概述系统的用例模型系统流程系统目标和解决的问题系统需求问题描述系统功能性需求系统非功能性需求系统开发环境系统硬件平台系统软件平台与开发工具本章小结第三章系统设计系统功能架构设计前台模块设计参数查询模块价格查询模块走势查询模块万方数据后台管理模块设计网页爬取模块信息提取模块索引建立模块数据存储模块请求处理模块数据库设计比价搜索的数据库设计特点数据库表的设计索引设计使用建立索引索引的结构索引模块设计数据库和的结合本章小结第四章系统实现与测试网页爬取模块网页抓取模块向中添加定制的扩展来抓取特定的内容取消对的限制利用策略多线程抓取网页信息提取模块介绍使用提取网页中的关键信息使用获取价格信息手机词库设计索引建立模块产品信息索引结构索引的创建对中文的分析请求处理模块前台显示模块万方数据通过获取价格产品参数和价格走势数据库访问类实现索引检索类实现前台页面设计与实现第五章系统测试与运行结果测试原则准备工作使用抓取网页同步索引和数据库搜索前台本章小结结论致谢参考文献万方数据第章绪论第章绪论课题背景随着互联网的快速发展，网络购物以其快捷简便实惠的特点迅速成为人们购物的理想方式。然而面对海量的商品，顾客很多时候无法在短时间内对同商品的价格及其走向折扣质量好评度等信息进行查询，而且对于跨商务平台下的不同商家的商品信息也缺乏有效的比价比质方面的比较支持。从目前的发展现状来看，谷歌百度搜狐雅虎等知名网站，都具有非常先进的搜索技术，对全文所搜的支持非常全面。但是在特定领域的搜索却表现平平。淘宝有啊京东等网站对网上购物也提供了很好的支持，但是却仅仅是针对站内的搜索，可比性不强，同时不排除所谓的竞价排名的嫌疑。为此，能从整个电子商务平台的角度，构建个不带有任何商业性质的比价系统将具有非常好的应用价值和意义。课题来源目的和意义互联网的快速发展，使得人们面对的信息量急剧增大，特别是在网购的时候，货比三家和尽量省事儿的矛盾心理令很多人在面对琳琅满目的上平的时候不知所措。因此如果有个高效且方便的比价系统，便能够它使得用户可以在短时间内得到大量的所关心的商品的实时的价格及变化，这其中包括折扣信息特定网站搜索库存数量可设定的价格区间等重要信息，而且还不必考虑商家“竞价”的影响，使得购物环境更加纯净和自由。为此，本设计就是要设计出个基于结构的购物网站比价系统，实现同时对数家专业购物网站商品的实时信息比对以及走势查询。也使顾客减少网络搜索的次数并减少无用时间的浪费，具有很高的经济效益和实用价值。国内外研究现状比价搜索引擎，本质上来说就是个垂直搜索引擎，整个看似杂万方数据第章绪论乱无章，但如果按其所蕴涵信息的“深度”可以划分为和两大部分。是指通过超链接可以被传统搜索引擎站的价格进行查询，服务于广大用户，尽可能减少用户网上点点搜索的时间的浪费，提高查询效率。系统需要解决三个方面的问题。第，因为电子购物网站的产品的价格是不断变化的，所以产品价格的爬取实时性要求比较高，这就要求了系统爬取信息的速度定要在可以接受的范围之内。同时，即使在服务器爬取信息时网速很慢的情况下也要达到定的速度。第二，系统还要考虑到搜索引擎必须要面对的问题，那就是查询的精确性，这个精确性包括两个方面第个情况是，用户提出的查询请求是准确的，那么服务器就要做到搜索的结果只有用户想要搜索意向第二个情况就万方数据第二章面向网购的笔记系统的系统需求分析是，当用户的搜索请求是不精确的时候，服务器能够对相似度较高的产品作为结果进行返回。这两种情况就要求建立的索引当查询的时候必须具有定的准确性。第三，由于爬取的数据在定的时间内是要存储到服务器的，而网上的产品的数量又很多，所以存储的空间就有了定的要求，这就不得不将索引的优化作为个很重要的方面。系统非功能性需求比价搜索引擎是基于网络的实时性较强和操作方便的搜索系统，为了使用户能够在短时间内准确查询到所需的产品，既达到准确查询的目的，又要有快速查询的目标，为此，系统设计必须满足以下要求实用性比价搜索引擎系统的开发首先将实用性放在首位，能够满足般的产品信息查询价格查询以及走势的要求。准确性准确性是衡量系统性能的重要指标，在查询过程中应确保准确无误，没有所谓的竞价排名的情况，否则会影响查询的客观公正性，也会使用户丧失对系统的信任。可靠性指系统使用的软硬件可靠性程度，使系统在运行中不发生或极少发生故障，在偶然事故及操作失误时，系统应具有较强的备份及还原功能，而不应造成系统崩溃或信息丢失。另外，系统具有防止二次登录的功能，能保证考生恶意登录。安全性安全性要求在系统异常情况下保证数据的丢失减少到最低限度。因此，比价搜索引擎系统应充分利用数据库的维护工具，便于数据备份恢复，从而提高系统的安全性。系统的简单易用性搜索引擎开发时要本着“简单易用”的原则，方便系统管理员和用户的使用。可扩展性指当问题规模变化时，系统能进行相应的扩展。方面包括接入计算机万方数据第二章面向网购的笔记系统的系统需求分析规模的扩展，如网络主机由几十台到几百台时，系统依然能很好地提供服务另方面，使用功能的扩展，即搜索的产品不光是种，而是可以扩展到若干产品。系统开发环境系统开发环境主要分为系统硬件平台和系统软件平台与开发工具。系统硬件平台服务器主要功能处理用户的查询请求，集中存储和管理数据库及索引的数据。主要特点要求较高的处理能力处理能力和内存容量。方案采用性能较高的服务器。配置要求个以上内存以上硬盘空间以上。客户机主要功能通过浏览器访问搜索引擎，完成各项操作。主要特点任务简单，只需般的处理能力。方案采用普通机。配置要求内存以上硬盘空间以上。系统软件平台与开发工具系统软件平台数据库。应用服务器。客户机操作系统及以上版本。开发工具与语言开发语言语言。开发框架。开发工具。万方数据第二章面向网购的笔记系统的系统需求分析本章小结本章主要针对比价搜索引擎进行需求分析，阐述了系统要达到的目标和需要解决的问题以及介绍系统开发环境。下章将介绍系统主要功能的具体设计。万方数据第三章面向网购的比价系统的系统设计第三章面向网购的比价系统的系统设计掌握个开发工具容易，而运用开发工具开发出个好的系统却并不那么容易。由于比价搜索引擎这种搜索引擎类软件难于开发，难于维护，因此，开发时必须严格按照软件工程的开发方法，对信息进行系统化规范化自动化处理。系统功能架构设计在软件设计中，通常采用模块化的设计思想，这样的设计比较合理，在开发阶段也比较容易实施。模块化的过程般是根据功能来进行的，而且通常需要结合分层设计的思想。即由顶层模块调用它的各个子模块来实现整个的功能，而每个下层模块再调用它的子模块，以此类推。最基础最具体的功能则由最下层的模块来完成。根据上述原则，按照功能，比价搜索引擎可以分为后台管理模块和前台显示模块。系统总体功能模块结构如图所示图系统功能模块总体结构参数查询模块价格查询模块走势查询模块网页爬取模块数据存储模块索引建立模块信息提取模块请求处理模块前台显示后台管理电子产品比价搜索引擎万方数据第三章面向网购的比价系统的系统设计系统各功能介绍如下参数查询对确定型号的产品或品牌的所有产品或近似品牌或型号产品的各个精确参数的查询。价格查询对用户的查询请求做出反应，显示出型号产品在不同购物网站的最新的价格。走势查询在已知用户想要查询的产品型号及商城的情况下，对近几天的价格纪录以折线图的形