下载文档原格式
软件工程详细设计方案一、设计背景及目的随着信息技术的发展，软件工程在各个行业中发挥着越来越重要的作用。
在软件工程中，详细设计方案是软件开发过程中非常重要的一环，它涉及到软件系统的具体实现细节，包括软件架构、模块设计、数据结构、算法设计等各个方面。
一个好的详细设计方案能够为软件开发提供清晰的指导，同时也能够为软件的测试、维护和升级提供便利。
本文旨在提出一份软件工程详细设计方案，以便为软件开发人员提供参考，同时也为软件开发过程中的相关工作提供指导。
二、设计原则1. 遵循软件工程的最佳实践，包括模块化、可重用、可扩展、可维护等原则。
2. 详细设计方案应能够明确地描述软件系统的结构和功能，以便开发人员可以清晰地理解并实施。
3. 详细设计方案应包括充分的测试计划，以保证软件的质量和稳定性。
三、详细设计方案内容1. 软件架构设计软件架构设计是软件系统中最基本的设计。
它应包括系统的整体结构，各个模块之间的关系，以及系统的部署方式。
- 系统结构：描述软件系统的总体结构，包括各个模块的功能和相互关系。
- 模块描述：对系统中各个模块进行详细的描述，包括模块的功能、接口和实现细节。
- 部署方式：描述软件系统的部署方式，包括客户端/服务器模式、云计算模式等。
2. 数据结构设计数据结构设计是软件系统中非常重要的一环，它决定了软件系统中数据的存储方式、处理方式和访问方式。
- 数据模型：描述软件系统中所使用的数据模型，包括数据库模型、文件模型等。
- 数据操作：描述系统中数据的操作方式，包括增删改查、事务处理等。
- 数据安全：描述系统中数据的安全策略，包括数据加密、访问控制等。
3. 接口设计接口设计是软件系统中模块之间交互所使用的接口设计，包括模块间的接口、用户界面的设计等。
- 模块接口：描述软件系统中各个模块之间的接口，包括参数传递、消息传递、事件触发等。
- 用户界面：描述软件系统的用户界面设计，包括界面元素、交互方式等。
软件工程师软件设计与实现软件工程师在软件设计与实现方面扮演着关键的角色。
他们负责从概念设计到具体实现的整个过程，确保软件的开发和交付达到高质量的标准。
本文将重点探讨软件工程师在软件设计和实现方面的职责，并介绍一些常用的设计和开发方法。
一、需求分析与系统设计在软件工程中，需求分析是确保软件项目顺利进行的关键一步。
软件工程师应当把握用户需求，与业务团队合作，根据需求进行系统的设计。
系统设计包括基本的架构设计、模块划分和数据库设计。
合理设计系统的结构和组织是保证软件项目成功的关键。
在需求分析与系统设计阶段，软件工程师需要与客户沟通，确保对需求的准确理解，并提供专业的建议和解决方案。
他们需要考虑系统的功能和性能需求，以及安全性和可维护性方面的要求。
二、编码与测试软件工程师在系统设计完成后，需要开始软件编码。
编码是根据预定的设计和开发规范，将设计翻译成可执行的代码。
在编码过程中，软件工程师需要保持代码的可读性和可维护性。
完成编码后，软件工程师需要对代码进行测试。
测试是确保软件质量的关键一步。
测试包括单元测试、集成测试和系统测试等。
软件工程师需要编写测试用例，并对软件进行全面的功能和性能测试，以确保软件正常运行。
三、版本控制与持续集成在软件开发过程中，代码的版本控制是至关重要的。
软件工程师需要使用版本控制系统，如Git，确保团队成员之间的协作和代码的同步。
版本控制可以追踪代码的变化，方便错误修复和历史回溯。
持续集成是一种软件开发实践，旨在通过自动化构建、测试和部署，确保软件的稳定性和一致性。
软件工程师需要结合持续集成的原则和工具，保证软件的开发过程高效且质量可控。
四、软件维护与优化软件发布后，软件工程师的工作并未结束。
维护是软件工程师日常工作的一部分。
他们需要进行软件缺陷修复、功能更新和用户支持等工作。
软件工程师应当根据用户反馈和市场需求，及时修复和改进软件。
此外，软件工程师还应当关注软件的性能优化。
通过对代码和系统的分析，软件工程师可以发现性能瓶颈，并进行相应的优化和调整，以提升软件的性能和用户体验。
软件开发和设计软件在现代社会中扮演着重要的角色。
无论是商业还是个人，几乎每个人都使用某种类型的软件。
软件开发是一个大而复杂的领域，它需要开发人员对编程语言、编程框架、数据库技术等进行深入了解。
本文将围绕软件开发和设计展开讨论，探究这个领域的一些重要概念和技能。
一. 软件开发的基本概念1.1 什么是软件？软件是计算机科学中的一个术语，指计算机程序和相关文档、数据的集合体，以及人员和设备构成的软件系统的全部内容。
软件分为系统软件和应用软件。
1.2 软件开发的过程软件开发的过程一般分为以下几个步骤：需求分析、系统设计、编码、测试、部署和维护。
其中，需求分析是开发的关键，决定了整个软件开发的方向。
1.3 软件开发的目标软件开发的目标不仅是编写代码，更重要的是要以最合理的方式实现客户的需求。
软件开发的最终目标是提供高质量的软件，并通过这些软件提高效率和生产力。
二. 软件设计的基本原则2.1 单一职责原则每个软件模块应该只负责一个特定的功能。
这个原则涉及到软件中模块之间的耦合和职责分配。
2.2 开闭原则软件中的模块应该对修改关闭，对扩展开放。
这个原则强调在软件开发期间让软件保持尽可能的灵活性。
2.3 接口隔离原则将接口细分成较小、较专一的接口，以便实现解耦和高内聚。
这个原则强调模块之间的独立性和互换性。
2.4 依赖倒置原则应该面向抽象编程，而不是面向实现编程。
这个原则涉及到向高层对象传递低层对象的问题。
三. 编写高质量的代码3.1 遵循软件工程的原则倡导使用软件工程中的最佳实践，例如代码审查、测试驱动开发等。
3.2 避免重复代码重复代码是软件开发中的一大问题。
避免重复代码可以使代码更容易维护，同时也可以提高代码的效率。
3.3 使用注释注释可以帮助其他开发人员更容易地了解代码。
使用适当的注释可以使代码更加易于维护和开发。
四. 好的软件开发团队应该具有哪些技能？4.1 熟练掌握编程语言和编程框架良好的软件开发团队需要掌握多种编程语言和编程框架，以实现客户的需求。
软件工程的需求分析与系统设计软件工程是指将工程的原理和方法应用于开发、维护和管理软件系统的学科。
在软件工程的开发过程中，需求分析和系统设计是非常重要的环节。
本文将重点探讨软件工程中的需求分析和系统设计，并介绍相关的方法和技术。
一、需求分析需求分析是软件工程中非常关键的阶段，它的目的是准确地理解用户的需求，并将这些需求转化为具体的软件规格说明。
需求分析阶段主要包括以下几个步骤。
1. 需求获取：通过与用户的沟通和交流，获取用户对软件系统的需求。
可以通过面对面的会议、访谈和问卷调查等方式来获取需求。
2. 需求分析：将收集到的需求进行整理和归类，分析用户需求的优先级和重要性，确定最终的软件需求规格。
3. 需求验证：验证软件需求规格是否准确、完整和一致。
可以通过原型设计、模型验证和评审等方式进行需求验证。
二、系统设计系统设计是根据需求分析的结果，将软件系统划分为各个子系统，并确定各个子系统之间的接口和功能。
系统设计阶段主要包括以下几个步骤。
1. 架构设计：确定软件系统的整体框架和结构，包括模块划分、组件设计和系统模式选择等。
常用的系统架构包括分层架构、客户-服务器架构和面向服务架构等。
2. 详细设计：对系统的各个模块进行详细设计，包括算法设计、数据结构设计和界面设计等。
详细设计需要考虑系统的性能、可靠性和可扩展性等方面。
3. 接口设计：定义各个模块之间的接口规范，确保模块之间的正确交互和数据传递。
接口设计需要考虑模块之间的解耦和复用性。
三、需求分析与系统设计的关系需求分析和系统设计是紧密相关的，需求分析的结果直接影响系统设计的过程和结果。
需求分析阶段的正确性和完整性决定了系统设计的准确性和稳定性。
在需求分析阶段，我们需要充分了解用户的需求，并将之转化为具体的软件规格。
这些规格要求在系统设计阶段被满足和实现，包括系统的架构设计、模块划分和接口设计等。
系统设计阶段需要基于需求分析的结果，进行各个模块的设计和接口规范的定义。
软件工程系统设计简介系统设计是软件工程中的重要环节之一，它是在需求分析的基础上，根据软件系统的功能和性能要求，采用适当的技术和方法，设计出合理的软件系统结构和模块之间的接口关系，以便满足系统的需求。
本文档将介绍系统设计的基本概念、目标和过程，以及常用的系统设计方法和实践经验。
概念和目标系统设计是软件工程中的一种创造性活动，其目标是通过优秀的设计，实现系统的可靠性、可维护性、可扩展性和可重用性。
系统设计需要综合考虑软件系统的需求、功能和性能要求，同时考虑系统的架构、模块划分、接口设计和数据结构设计等方面的问题。
系统设计的基本概念包括以下几个方面：1.架构设计：确定系统的整体结构和各个模块之间的关系，包括系统的层次结构、模块划分和接口设计等。
2.接口设计：定义模块之间的通信接口和数据格式，确保模块之间能够正常交互，并实现高内聚低耦合的设计原则。
3.数据结构设计：确定系统所需的数据结构和数据库设计，包括数据的存储格式、访问方法和数据的一致性等。
4.算法设计：根据系统的需求和功能要求，设计合适的算法和数据处理方法，以保证系统的性能和效率。
系统设计的目标是实现高质量的系统设计，以满足用户的需求和期望。
一个好的系统设计应具备以下几个特点：1.可靠性：系统设计应能够保证系统的稳定性和可靠性，即系统能够在各种环境下正常运行，并能够正确处理各种异常情况和错误。
2.可维护性：系统设计应具备良好的可维护性，即系统的各个模块和组件能够方便地进行修改、扩展和维护，以适应用户的变化需求。
3.可扩展性：系统设计应能够方便地进行扩展，即系统的各个模块能够方便地进行添加、删除或替换，以适应系统的功能变化和扩展需求。
4.可重用性：系统设计应具备良好的可重用性，即系统的各个模块和组件能够被其他系统或模块所重用，以提高开发效率和降低开发成本。
过程和方法系统设计的过程包括需求分析、概要设计和详细设计三个阶段。
在需求分析阶段，通过与用户和相关利益方的交流和沟通，获取系统的需求和功能要求；在概要设计阶段，根据系统需求，确定系统的总体结构和模块划分，并定义系统的接口和数据结构；在详细设计阶段，对系统进行具体的设计和实现，包括对系统的模块进行详细设计和编码，以及进行测试和验证。
精品好资料——————学习推荐淮海工学院计算机工程学院实验报告书课程名：《软件工程》题目：图着色理论在仓库管理系统中的应用——概要设计与详细设计班级：网络122学号：2012122683姓名：叶婷1、实验目的与要求熟悉Visio绘图工具或PowerDesigner系统，并使用Visio或PowerDesigner系统提供的设计绘图工具，如H图、程序流程图、盒图、PAD图等完成软件工程实验项目的概要设计与详细设计文档中的层次图和程序流程图等图形绘制与文档说明。
2、实验内容一、概要设计1.1引言1.1.1编写目的近年来，生产的工业化速度迅速加快，生产的产品数量猛增，给传统的仓库管理方式手工作业带来了很大的负担，今天的仓库作业和库存控制作业已十分多样化，复杂化，靠人工去记忆去处理已十分困难，且出现错误的可能性很大。
如果不能保证正确的进货、验收、质量保证及发货，就会导致浪费时间，产生库存，延迟交货，增加成本，以致失去为客户服务的机会。
本文正是为解决这个问题而作。
本说明书的预期读者为小中型仓库的管理员及客户和采购员。
1.1.2背景本系统是：仓库管理系统。
本项目的任务提出者、开发者都是本人用户：中小型仓库管理员。
软件的计算机网络：任何装有IIS的计算机作为服务器端，其他处在同一网络的计算机作为客户端。
1.1.3定义DFD: Data Flow Diagram 数据流图，它从数据传递和加工角度，以图形方式来表达系统的逻辑功能、数据在系统内部的逻辑流向和逻辑变换过程，是结构化系统分析方法的主要表达工具及用于表示软件模型的一种图示方法。
DD；Data Dictionary 数据字典：是指对数据的数据项、数据结构、数据流、数据存储、处理逻辑、外部实体等进行定义和描述，其目的是对数据流程图中的各个元素做出详细的说明。
1.1.4参考资料1.《软件工程》---钱乐秋，赵文耘，牛军钰编著 ------ 清华大学出版社2.《数据库系统概论》—王珊萨师煊主编 -------高等教育出版社3.《 Java语言程序设计实用教程》董迎红张杰敏编著------ 北京大学出版社4. 可行性研究报告5. 需求分析说明书1.2总体设计1.2.1需求规定本系统软件主要实现的功能是仓库管理员对仓库进行库存的管理，主要包括，对于生产部门送来的货物进行清点，无误后入库，对于销售部门请求的货物进行核实，无误后出库。
软件工程的设计与开发随着科技的不断发展，软件成为人们日常生活不可或缺的一部分。
我们可以上网购物，可以上网银行，甚至可以通过手机软件订餐。
对于软件来说，设计和开发是两个不可分割的过程。
在软件工程中，设计与开发的关系就像画家和画布的关系，设计决定着开发的方向和方式。
本篇文章将从软件设计与开发的角度，探讨如何高效地进行软件设计和开发。
1.软件设计1.1 软件设计的定义软件设计是软件开发过程中非常重要的一部分。
它是一种模块化、可重用的过程，可以帮助我们更好地理解软件系统的构成和工作方式。
软件设计可以被定义为一种呈现系统部件和关系的过程。
软件设计师设计的输出物可以是架构、数据结构、接口、模板、模型和代码等。
1.2 软件设计原则软件设计的初衷是为了满足用户需求，因此，设计的重心在于用户，而不是开发人员。
好的软件设计应该遵循以下原则：1）设计必须优先考虑用户。
软件设计的目标是为用户提供服务，因此设计师必须首先了解用户的需求，然后再设计出能够更好地满足这些需求的系统。
2）设计必须遵循简单性原则。
软件设计必须简单明了，以降低系统复杂度和可维护性。
3）设计必须应对变化。
软件系统会随着时间的推移而逐渐演化和改变，因此，设计必须考虑未来的发展和变化。
4）设计必须满足高质量标准。
软件设计必须严格按照质量标准进行，以确保系统的可靠性和安全性。
1.3 软件设计的过程软件设计的过程分为四个阶段：1）需求收集和分析。
在这个阶段，设计师通过与用户交流和访谈，明确软件的目标和需求。
2）概念设计。
在这个阶段，设计师需要制定系统总体架构和拟定最终交付方案。
3）详细设计。
在这个阶段，设计师需要定义各种数据结构和算法，绘制UML 图并编写代码。
4）实施和测试。
在这个阶段，设计师将所设计出的模型和代码进行实现，并进行测试、评估等工作。
2.软件开发2.1 软件开发的定义软件开发是指将需求收集、分析、设计、实现、测试等一系列工作有机地结合起来，制定出符合客户需求的软件系统。
软件工程实践：需求分析和系统设计软件工程是指将工程的原则和技术应用于软件的开发和维护过程中，以实现高质量、高可靠性和高效率的软件产品。
在软件工程实践中，需求分析和系统设计是非常重要的环节。
本文将详细介绍需求分析和系统设计的步骤和方法。
一、需求分析1. 确定项目的范围和目标在开始需求分析之前，需要明确项目的整体范围和目标。
这包括确定软件的功能和特性、用户需求以及项目的约束条件等。
2. 收集需求需求收集是指通过与用户、客户和利益相关者沟通，确定软件的具体需求。
可以采用面谈、问卷调查、用户故事等方法收集需求。
3. 分析和整理需求在收集到需求之后，需要对需求进行分析和整理。
这包括识别和分类需求、厘清需求之间的关系、评估和验证需求的可行性等。
4. 编写需求规格说明书需求规格说明书是指将需求以详细、准确和可理解的方式进行描述的文档。
在编写需求规格说明书时，应该清晰地定义用户需求、功能需求、非功能需求等，对每个需求进行详细描述，并确保需求之间的一致性和完整性。
5. 确认需求需求确认是指与用户和客户确认需求规格说明书的内容。
在确认需求之前，应邀请相关方参与需求评审，确保所有人对需求的理解一致，并进行必要的修改和调整。
6. 管理需求变更在软件开发过程中，需求可能会发生变化。
需要建立一个有效的需求变更管理机制，及时识别、记录和评估需求变更，确保变更的可行性和影响的控制。
二、系统设计1. 确定系统的整体架构系统设计的第一步是确定系统的整体架构。
系统架构包括系统的分层和组件的划分，确定各个组件之间的关系和通信方式。
2. 设计系统的详细模块在确定系统的整体架构之后，需要对系统进行更详细的设计。
将系统按照功能划分成不同的模块，并定义每个模块的职责和接口。
3. 设计系统的数据库对于需要存储数据的系统，需要设计系统的数据库。
包括数据库的结构设计、表的设计、关系的建立等。
4. 确定接口规范系统设计还需要确定系统的接口规范。
这包括定义系统与外部系统的接口、系统内部模块之间的接口等。
软件工程系统开发目标与设计目录第1章引言 (1)1.1系统开发的背景 (1)1.2系统开发的目标、意义 (1)1.3本文的组织 (2)第2章相关技术简介 (4)2.1系统开发平台及开发工具 (4)2.2工具和编程语言 (4)2.2.1 HERITRIX技术 (5)2.2.2H TMLPARSER技术 (6)2.2.3 JAVA语言 (6)2.2.4 JAVA IO流技术 (7)2.2.5JDBC技术 (8)第3章系统分析与设计 (9)3.1功能需求 (9)3.1.1系统数据流图 (9)3.1.2 系统状态图 (11)3.2功能介绍 (12)3.3概念结构 (13)3.3.1 概念结构设计 (13)3.3.2 逻辑结构设计 (14)第4章模块实现 (17)4.1爬虫模块 (17)4.1.1 设计事项 (17)4.1.2 操作界面 (17)4.1.3 核心代码 (23)4.2页面解析文本信息入库模块（HTMLPARSER） (29)4.2.1设计思想 (29)4.2.2操作界面 (29)4.2.3 核心代码 (31)4.3信息筛选上传、信息查看删除的模块 (34)4.3.1 设计思想 (34)4.3.2操作界面 (35)4.3.3 核心代码 (37)总结.................................... 错误！未定义书签。
第1章引言1.1 系统开发的背景信息在现代经济生活中的作用越来越大，对于个人而言，缺乏信息将导致很多机会的丧失。
与此同时，现在的大学生缺乏社会实践锻炼，自我竞争的意识在逐渐降低，而且社会上多数在校大学生沉迷于网络游戏，缺乏主动学习、参与竞争的意识。
当下社会，竞争与挑战是每一个人都将面对且必须面对的，比赛，是可以更好地证明自己的一个重要手段。
然而现今缺乏一个整合了所有比赛信息方便人们寻找的平台，学生获得信息的途径也总是少得可怜。
有一个属于自己的比赛信息集成系统成为亟待解决的问题。
缺少一个可以每天登陆系统，了解到当下最新的比赛资讯，能够分门别类的，整整有序的，及时全面的网站平台。
鉴于此想法，本次项目选择开发比赛信息集成系统。
希望通过比赛信息集成系统这个平台让大学生真正得到锻炼的机会，让他们认识到自己的真正价值，发现自己除了游戏之余还有更大的发展空间。
目前，国内同类的赛事信息类系统有“赛才网”。
赛才网偏社区、家园、群组，提供的范围较大且包含很多新闻信息；与赛事信息集成系统地不同在于，比赛信息集成系统要做的是以赛事信息提供为主，主打“方便、即时、全面”的概念，对赛事信息要求较高，讨论交流区为辅。
两者侧重点不一。
针对于此，此次项目致力打造一个服务于在校大学生的轻松、便捷、互动地参与各类竞赛活动的竞赛门户网站，致力于系统地收集和整理各个领域的各类赛事，为参赛者提供最优质的信息服务,使得来自全国各地的参赛选手可以相互学习分享心得,通过各种有意义的比赛不断提升自己。
希望通过此次开发的平台项目，能为广大学生及赛事爱好者提供全面、即时的赛事信息，在分享赛事资讯的同时提供一个交流、讨论的平台。
1.2 系统开发的目标、意义开发目标:本系统主要为全力打造一个服务于在校学生和在职人员等轻松、便捷、互动地参与各类竞赛活动的竞赛门户网站，为参赛者提供最优质的信息服务,来自全国各地的参赛选手可以相互学习分享心得,通过各种有意义的比赛不断提升自己。
系统中主要的开发包括赛事信息网站前台以及赛事网站后台两大部分。
其中前台中，本组开发主要集中于网站的开发，方便用户浏览下载信息；赛事论坛开发，用户可以分享赛事经验，共享赛事资源；用户中心开发，方便用户获得更多的赛事资源的权利；而后台，主要着重爬虫系统开发，半自动傻瓜式的获取全网更多赛事资源，整合成为本系统的资讯，赛事资源丰富，更受用户青睐；用户管理、论坛管理等等，系统地、有条理地管理前台信息，让系统健全运行。
通过前后台的整合，统一，协调地完成此次系统开发出分门别类的、整整有序的、及时全面的赛事网站平台系统开发能为在校的大学生提供最为全面、优质的赛事信息，为提高中国大学生的身心素质做出贡献。
主要表现在（1）有利于大学生正确认识自己，对自身成长产生紧迫感。
通过广泛的社会比赛，能让学生看到自己和市场需求之间的差距，看到自身知识和能力上存在的不足，比较客观地去重新认识、评价自我，逐渐摆正个人与社会、个人与人民群众的位置。
（2）有利于大学生对理论知识的转化和拓展，增强运用知识解决实际问题的能力。
大学生以课堂学习为主要接受方式，这对大学生来说非常重要，但这些理论知识并不代表大学生的实际技能，往往难以直接运用于现实生活之中。
比赛的方式使大学生接近社会，获得大量的感性认识和许多有价值的新知识，同时使他们能够把自己所学的理论知识与接触的实际现象进行对照、比较，把抽象的理论知识逐渐转化为认识和解决实际问题的能力。
（3）有利于发展大学生的组织协调能力和创新意识。
各种种类繁多的比赛没有课堂教学太多的束缚和校园生活的限制，学生们的积极性被充分调动起来，兴趣高涨，思维也空前的活跃起来，往往会产生一些创造性火花，在实践中勇于开拓、敢于创新。
（4）有利于提高大学生个人素养，完善个性品质。
在比赛中的困难和危险面前，要求大学生们具有一定的牺牲精神和坚强的品质。
赛事活动多了，并且能深入下去，大学生在积极参与的过程中，就会逐渐养成坚韧、顽强的优良品性，养成务实的学习态度和生活作风，不断提高自己、完善自己。
1.3 本文的组织正文包括四章：引言、系统相关技术、比赛信息集成系统的分析与设计、系统模块的设计与实现。
第1章为绪论，分为3节，主要介绍系统的开发背景、系统的开发目标及研究内容及本文的组织。
第2章为系统相关技术，分为2节，主要介绍系统相关技术：爬虫技术功能、页面解析的功能、以及信息筛选及录入的功能等的前提下进行介绍的，运用了heritrix、htmlparser、java io、java技术等实现。
第3章为比赛信息集成系统的分析与设计，分4节，包括系统模块设计，功能需求，数据需求，数据库设计。
第4章为个人模块设计与实现，分4节，包括比赛信息系统的爬虫模块、页面解析文本信息入库模块，以及信息筛选上传、信息查看删除的模块的设计。
第2章相关技术简介2.1 系统开发平台及开发工具硬件环境: 个人PC、电网、电信网络等。
软件环境: MyEclipse 8.0、Apache、Tomcat 5.5。
相关技术: Html+div+css+javascript;爬虫heritrix；页面解析技术：htmlparser；数据库sql；struts2模式。
相关工具：Microsoft SQL Server 2005、Macromedia dreamweaver 8、MyEclipse 8.0。
2.2 工具和编程语言在比赛信息集成系统中，运用了java+sql+heritrix+htmlparser等技术。
其中后台主要运用了heritrix爬虫技术。
首先，Heritrix[1]是一个纯由Java开发的、开源的Web网络爬虫，用户可以使用它从网络上抓取想要的资源。
它来自于。
Heritrix 最出色之处在于它的可扩展性，开发者可以扩展它的各个组件，来实现个性的抓取逻辑，比赛信息系统利用它实现更多赛事信息的全网爬取，取得更多的大学生赛事资源。
其次，Java[2] [3]语言是一种功能强大的编程语言，负责heritrix应用的业务逻辑的实现和对应用程序进行控制。
再次，Htmlparser是一个纯的java写的html（标准通用标记语言下的一个应用）解析的库，它不依赖于其它的java库文件，主要用于改造或提取html。
它能超高速解析html，而且不会出错。
就其他解析工具来说，htmlparser就是目前最好的html解析和分析的工具。
因此，从heritrix爬取下来的.Html 页面通过htmlparser遍历解析成.Txt文件，为赛事信息的筛选以及录入做好充足的准备。
因为htmlparser需要与数据库sql连接进行页面的解析存储，因此本系统在这里运用了JA V A中的资源文件(properties)，通过加载app.properties文件实现遍历.Html文件解析并保存到指定的文件中。
再次，本系统还引入了java.io包完成最后解析成功的.Txt文件的读写工作。
JA V A IO[4]流可分为四大抽象类：字符流：ReaderWriter，字节流：InputStream（读数据）OutputStream（写数据）本系统中主要运用的是字节流与读写数据InputStream和OutputStream。
最后，而存入数据库则使用较为普遍的JDBC[5]技术，JDBC（Java Data Base Connectivity,java数据库连接）是一种用于执行SQL语句的Java API，可以为多种关系数据库提供统一访问，它由一组用Java语言编写的类和接口组成。
JDBC提供了一种基准，据此可以构建更高级的工具和接口，使数据库开发人员能够编写数据库应用程序。
下面就heritrix、htmlparser、java及java io、JDBC进行介绍2.2.1 heritrix技术heritrix[6]技术Heritrix是一个专门为互联网上的网页进行存档而开发的网页检索器。
它使用Java编写并且完全开源。
它主要的用户界面可以通过一个web流量器来访问并通过它来控制检索器的行为，另外，它还有一个命令行工具来供用户选择调用。
Heritrix是由互联网档案馆和北欧国家图书馆联合规范化编写于2003年初。
第一次正式发布是在2004年1月，并不断的被互联网档案馆和其他感兴趣的第三方改进。
到现在已经成为一个成熟的开源爬虫，并被广泛使用。
它的工作流程是一个循环，具体流程是：1 在预定的URI中选择一个。
2 从选择的URI的网址下载远程文件3 分析，归档下载到的内容4 从分析到的内容里面选择感兴趣的URI。
加入预定队列。
5 标记已经处理过的URI。
Heritrix的使用首先应该知道它的配置与使用，在这里，本系统用的是heritrix的1.14.4的版本，安装heritrix时值得注意的heritrix.properties文件。
在heritrix.properties中配置了大量与Heritrix运行息息相关的参数，这些参数主要是配置了Heritrix运行时的一些默认工具类、WebUI启动参数，以及Heritrix的日志格式等。
当第一次运行Heritrix时，只需要修改该文件，为其加入WebUI的登录名和密码。
接着可以实行简单的任务抓取工作，当然，简单的安装于抓取工作不能满足本系统的需求，因此需要更多的扩展与组件的开发，首先需要扩FrontierScheduler，将需要的所有链接的处理。
