天天看点

利用Jsoup解析HTML

     最近又要做html内容抽取,这次打算尝试一下除了用正则表达式以外的其他方式。自然第一个想到的就是HtmlParser,结果找到了以后发现最近的更新还是在06年,汗!这个时候很意外的发现了Jsoup,试用了一下感觉相当清爽,推荐一下。

    如果你很有兴趣,直接去官方网站看下说明文档,地址是http://jsoup.org/cookbook/。我这里给个小例子,目的是从下文中抽取出标题,大家可以看一下他的类jQuery语法。

  1. <div class="artHead">  
  2.   <div>  
  3.     <span class="artType01" style="margin-right: 5px;"><a href="javascript:void(0)">原创</a></span>  
  4.   <h3 class="artTitle"><a href="/2431658/483361">JAVA程序内存溢出问题的分析</a>  
  5.   <a href="http://blog.51cto.com/artcommend" target="_blank"><img src="https://s4.51cto.com/image/skin/34/indextj.gif" width="15" height="15" /></a>  
  6.   </h3>  
  7.   </div>  

    这个内容是从我博客首页上摘取的,所以直接打开这个页面进行抽取,测试代码如下:

  1. package jsoup; 
  2. import java.io.IOException; 
  3. import org.jsoup.Jsoup; 
  4. import org.jsoup.nodes.Document; 
  5. import org.jsoup.select.Elements; 
  6. public class ParseTest { 
  7.     public static void main(String[] args) { 
  8.         try { 
  9.             Document doc = Jsoup.connect("http://passover.blog.51cto.com/").get(); 
  10.             System.out.println(doc.title()); 
  11.             Elements eles = doc.select("div.artHead"); 
  12.             System.out.println(eles.first().select("h3[class=artTitle]")); 
  13.         } catch (IOException e) { 
  14.             e.printStackTrace(); 
  15.         } 
  16.     } 

继续阅读