/*
 * 創(chuàng)建日期 2005-2-17
 *
 * TODO 要更改此生成的文件的模板，請轉(zhuǎn)至
 * 窗口 － 首選項 － Java － 代碼樣式 － 代碼模板
 */
package net.nutch.analysis;

import org.apache.lucene.analysis.Token;
import org.apache.lucene.analysis.TokenStream;
/**
 * @author Administrator
 *
 * TODO 要更改此生成的類型注釋的模板，請轉(zhuǎn)至
 * 窗口 － 首選項 － Java － 代碼樣式 － 代碼模板
 */
public class ContentTokenStream extends TokenStream{
	
	private ContentTokenizer tokenizer;
	
	public ContentTokenStream(ContentTokenizer tokenizer){
		this.tokenizer = tokenizer;
	}

	public Token next() {
		try{
			return tokenizer.next();
		}catch(Exception e){
			return null;
		}
	}
	
	public Token next(boolean skipStopword){
		try{
			return tokenizer.next(skipStopword);
		}catch(Exception e){
			return null;
		}
	}
	
	public static void main(String[] args) {
	}
}