通过htmlParser抓取百度相关内容

最近这两天我做了个 最新电影网的视频网站,主要是从土豆抓取来的.所以 内容页就是框架,不便于搜索的抓取。所以我就想加些相关内容,像这样的 内容
      由于我就是通过百度搜索关键字来填充内容。下面就是我通过htmlParser抓取的代码。
public   class  BaiduResultAction  extends  BaseAction  {

    
public static final Logger logger = Logger
            .getLogger(BaiduResultAction.
class);

    
/**
     * 组装新闻
     * 
     * 
@param url
     * 
@return
     
*/

    
public String compNews(String url) {
        String returnContent 
= null;
        
try {
            ParserModel parserModel 
= new ParserModel();
            
//table 的抓取标签
            String content = "border=/"0/" cellpadding=/"0/" cellspacing=/"0/"";
            parserModel.setContent(content);
            NodeClassNameFilter contentNodeClassNameFilter 
= new NodeClassNameFilter(
                    TableTag.
class, parserModel);

            NodeList contentList 
= getAllNodeList(url,
                    contentNodeClassNameFilter);

            
// 对table的处理 只取第一个table中的一项记录
            
//如果全部抓取内容,则要去掉最后一个break;
            for (int i = 1; i < contentList.size(); i++{
                
if (contentList.elementAt(i) instanceof TableTag) {
                    TableTag tableContent 
= (TableTag) contentList
                            .elementAt(i);
                    
int rowCount = tableContent.getRowCount();
                    TableRow[] arrRows 
= tableContent.getRows();
                    
for (int j = 0; j < arrRows.length; j++{
                        TableRow tableRow 
= arrRows[j];
                        TableColumn[] arrColumm 
= tableRow.getColumns();
                        
for (int k = 0; k < arrColumm.length; k++{
                            String columContent 
= arrColumm[k].toHtml();
                            
if(columContent != null){
                                String[] split 
= columContent.split("<br>");
                                
if(split.length>2)
                                    returnContent 
= split[1].substring(0,split[1].length()-4);
                            }

                            
break;
                        }

                    }

                }

                
break;
            }
        
        }
 catch (IllegalArgumentException e) {
            
// TODO Auto-generated catch block
            e.printStackTrace();
            
return null;
        }
 catch (Exception e) {
            
// TODO Auto-generated catch block
            e.printStackTrace();
        }

        
return returnContent;
    }


    
public static void main(String[] args) throws Exception {
        BaiduResultAction action 
= new BaiduResultAction();
        
//抓取sohu的内容.通过百度
        String url = "http://www.baidu.com/s?wd=%BA%DA%BF%CD%B5%DB%B9%FAII+11%28112%29++site%3Asohu.com";
        
// String url = "http://bbs.hoopchina.com/htm_data/96/0712/274754.html";
        
// List<String> hrefList = sinaAction.parseLink(url, getIndexFilter());
        /* logger.debug(sinaAction.compNews(url)); */
        action.compNews(url);
    }

}
效果如下:http://www.tondou.cn/c/2008-05-12/314146 u
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
图像识别技术在病虫害检测中的应用是一个快速发展的领域,它结合了计算机视觉和机器学习算法来自动识别和分类植物上的病虫害。以下是这一技术的一些关键步骤和组成部分: 1. **数据收集**:首先需要收集大量的植物图像数据,这些数据包括健康植物的图像以及受不同病虫害影响的植物图像。 2. **图像预处理**:对收集到的图像进行处理,以提高后续分析的准确性。这可能包括调整亮度、对比度、去噪、裁剪、缩放等。 3. **特征提取**:从图像中提取有助于识别病虫害的特征。这些特征可能包括颜色、纹理、形状、边缘等。 4. **模型训练**:使用机器学习算法(如支持向量机、随机森林、卷积神经网络等)来训练模型。训练过程中,算法会学习如何根据提取的特征来识别不同的病虫害。 5. **模型验证和测试**:在独立的测试集上验证模型的性能,以确保其准确性和泛化能力。 6. **部署和应用**:将训练好的模型部署到实际的病虫害检测系统中,可以是移动应用、网页服务或集成到智能农业设备中。 7. **实时监测**:在实际应用中,系统可以实时接收植物图像,并快速给出病虫害的检测结果。 8. **持续学习**:随着时间的推移,系统可以不断学习新的病虫害样本,以提高其识别能力。 9. **用户界面**:为了方便用户使用,通常会有一个用户友好的界面,显示检测结果,并提供进一步的指导或建议。 这项技术的优势在于它可以快速、准确地识别出病虫害,甚至在早期阶段就能发现问题,从而及时采取措施。此外,它还可以减少对化学农药的依赖,支持可持续农业发展。随着技术的不断进步,图像识别在病虫害检测中的应用将越来越广泛。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值