网络搜索蜘蛛

时间:2013-01-31 16:19来源:凌阳教育 作者:admin 点击:

项目简介:

       网络搜索蜘蛛使用了Web搜索引擎技术。它是当今网络信息处理领域的一个热点和难点。Web可以看作是一个庞大的分布式网络数据库,对于这样一个信息量飞速增长的数据库,如果人工地去检索和分类整个Web将是一项非常巨大的工程,因此在搜索引擎技术中我们必须采用网络机器人在完成这项任务,我们研究的网络机器人程序就是这么一种专业化的能高效地扫描Web站点并检索其内容的程序,能够更快更新网页、更广搜索网页,所以研究网络搜索蜘蛛对搜索引擎的发展具有直接的现实意义和重要的学术价值。

培训目标:

1、了解Java项目的整个开发流程

2、掌握Java网络编程

3、掌握Java数据库技术

4、掌握Java多线程

功能描述: 

1、解析HTTP:解析HTTP获取网页地址

2、网页文件解析:解析网页文件获取下一条网页的地址

3、获取网页文件:获取网页文件内容,下载到本地

4、数据库操作:保存解析到网页地址

5、多任务下载:同时对多个网页进行下载   

技术要点:

1、项目流程及规范设计:主要是完整项目开发的流程,及严格的开发规范

2、MVC结构的实际应用:Java开发中最常用的结构模式

3、并发服务实现:通过线程实现多任务并发

4、数据库操作:通过JDBC操作MySQL数据库

5、文件操作:将网络中获取到的数据写入到文件

6、HTML文件解析:检索HTML文件当中的网页地址

项目展示:




分享到:

凌阳教育培训【凌阳科技旗下教育品牌】——专业的培训机构,全国唯一“按班公布学员就业去向”的诚信机构

关注我们:

全国免费咨询电话:156-0117-5697或010-62981113(转2824) 服务监督电话:010-62981113-2800

京ICP备09010168号  京公网安备11010802010586号

北京安卓培训中心:海淀区上地信息产业基地中黎科技园1号楼3层A段

Copyright © 2017 SunplusEdu Inc. All Rights Reserved