我们的项目

项目实训一、music.qq.com 歌曲数据爬虫程序
该项目是video.google.cn视频搜索引擎项目的爬虫程序学习案例，以music.qq.com为数据源，利用HTMLParser开发网络爬虫程序，抓取music.qq.com歌曲数据资源，学员们普遍抓取到歌曲数据23万余首，歌手资料及头像图片近两万，并保存到本地硬盘。


二、仿video.google.cn大型百万级视频搜索引擎项目
该项目分视频数据采集和搜索引擎两部分，开发周期耗时一个月，锻炼知识点：J2SE基础+JDBC+HTMLParser+Lucene+Swing+JSP+Servlet。
1. 视频数据采集
以56.com为数据源，利用HTMLParser开发网络爬虫程序，抓取56.com的用户资料/视频/专辑数据并写入数据库，学员们编写的爬虫程序普遍都能抓取到56.com百万级的视频数据资源。
2. 搜索引擎开发
用Lucene开发视频搜索引擎，首先以庖丁中文分词来生成视频数据的索引库，然后分别用Swing和JSP+Servlet来开发桌面版和WEB版的视频搜索引擎。
项目架构图如下：



三、 简易版OA项目
该项目开发时间较短，仅规划了较简单的OA功能，目的在于锻炼Struts2+Spring+Hibernate+EHCache+URLRewrite+JQuery的综合运用。
功能包括：
1. 部门管理。
2. 职员管理。
3. 权限管理(锻炼Struts2拦截器的应用)。
4. 共享文档(锻炼Struts2的文件上传)
5. 留言板(锻炼Struts2结合jquery实现ajax)。
6. 全部页面一律要求国际化，OGNL表达式开发。


四、 仿土豆网(www.tudou.com)大型WEB2.0视频网站项目
整个项目分土豆网前台和网站后台管理系统两部分。
首先将第一期的视频搜索引擎项目百万级的视频/专辑/用户数据导入土豆网数据库，在百万级的大数据量情况下锻炼数据库的优化。然后分八个小组团队协作开发，周期耗时一个半月。
1. 土豆网前台
先从土豆网上将其HTML,CSS,Javascript,图片等相关文件下载到本地硬盘。
开发土豆网的首页、豆单、排行、视频播放页、用户注册/登录、用户个人主页、日志管理、视频上传/管理、豆单管理、标签管理、好友管理、短消息等功能。

技术工具：
a) 采用Trufun Kant for Java的Eclipse插件做UML用例图和类图设计。
b) 采用Apache+Tomcat做Web Server。
c) 采用Struts2+Spring+Hibernate+EHCache+URLRewrite做服务器端实现。
d) 采用JQuery做Ajax实现。
e) 采用Flex/Flash AS3开发FLV视频播放器。

f) 采用FFMPEG+Mencoder做服务器端视频格式到FLV的转码。
g) 采用FFMPEG 做视频的截图。
h) 数据库做索引优化，EHCache查询缓存，前台频道首页一律由管理后台生成纯HTML静态页。

2. 网站后台管理系统
网站管理后台主要负责注册用户、视频、豆单等数据的管理(增/删/查/改/审核/推荐)，注册用户、PV流量、视频播放次数等数据的图形报表统计，生成网站前台纯静态HTML页面等功能。
技术工具：
a) 采用Apache+Tomcat做Web Server。
b) Spring+Hibernate+EHCache做服务器端实现。
c) 纯Flex 开发管理后台界面，Flex Chart 组件开发统计报表。
d) 采用Blazeds实现Flex与Spring交互。
e) 采用JAVA反射机制(java.lang.reflect)开发HTML页面生成的模板引擎。