基于web的比价系统的设计与实现.doc

摘要 网络购物的发展非常迅速,目前能在网上购买的商品已经十分丰富,能在市场上买到的商品,几乎都能在网上买到。随着网络购物市场的发展,出现了很多的购物网,如京东,卓越,当当,淘宝等。因为运作模式的不同,对于同样的商品,这些购物网在同一时间对同一商品的售价往往是不同的。对于客户来说,在网上购物时,都希望以最低的价格购得看中的商品。为了达到这一目的,需要到各购物网上去查询看中的商品的价格,比较之后才能知道最低的价格。显然,这样做是非常麻烦的,用户需要打开很多个Web页面,搜索到商品后,记录下价格后再做比较。如果有一套系统,能自动的在购物网站搜集商品价格信息,并将价格比较的结果展现出来,那将会给用户提供非常大的便利,本文的目的就是研究如何实现这种比价系统。

该系统主要分为两个部分，数据抽取部分以及比价部分。数据的抽取部分采用Java编写的WebMagic爬虫对购物网站的商品信息进行抽取。