商城网站网络爬虫项目

中 北 大 学

课程设计任务书

学 院、系： 专 业： 学 生 姓 名：

设 计 题 目：

起 迄 日 期: 指 导 教 师:

软件学院 软件工程 学 号： 学 号： 学 号： 学 号：

XXX商城网站网络爬虫项目

2018年1月5日~2018年1月19日

董晓丽

发任务书日期:2018 年1月5日

课 程 设 计 任 务 书

1．设计目的： 通过实训，巩固、深化和扩展学生所学的JavaEE框架理论知识与专业技能，提高学生分析问题、解决问题的能力和动手编程能力，使学生能够掌握一个基于WEB的小型应用系统的设计与开发，同时进一步熟悉数据库的设计及使用。 基本要求：（1）使用Struts2或别的框架，数据库自由选择（MySql、SQLServer或ORACLE）； （2）按照软件工程的思想完成系统开发过程（包括需求分析、系统设计、编码实现和测试运行）； （3）最终系统要求数据充实、界面友好、使用方便。 2．课程设计的具体工作内容： 设计内容： 本课题来自于拟研项目“分类爬虫系统的研究与实现”，设计内容为“XXX商城网站网络爬虫项目”。 主要功能及要求： 1、按某个关键字在XXX商城网站获取商品的具体信息：包括商品的名字、商品的链接网址、商品的价格信息、累计评论数量。 2、将所得的信息存储到数据库中。 3、网页形式呈现所获取商品信息。 要求： 1、掌握使用爬虫工具抓取网站页面信息技术； 2、熟悉实际项目分析、设计、实现流程； 3、完成项目前后台功能，包括数据获取、分析、处理、存储与结果呈现。 课 程 设 计 任 务 书

3．对课程设计成果的要求： 提交课程设计说明书和光盘（每班统一制作1张光盘，每组一个目录）。 每组的光盘目录内含： （1）源程序文件； （2）数据库备份文件； （3）课程设计说明书文档（另需交打印文档一份）。 4．课程设计工作进度计划： 起 迄 日 期 2018年 1月5日 ~ 1月7日 1月8日 ~ 1月17日 1月18日 1月19日 工 作 内 容 选择课程设计题目，明确课程设计任务，完成需求分析及 系统分析与设计； 功能模块代码实现、调试，完善实例数据，系统测试； 撰写课程设计说明书文档； 验收程序、答辩。