亚洲欧美第一页_禁久久精品乱码_粉嫩av一区二区三区免费野_久草精品视频

? 歡迎來到蟲蟲下載站! | ?? 資源下載 ?? 資源專輯 ?? 關于我們
? 蟲蟲下載站

?? util.java

?? Light in the box 抓取程序。 使用HttpClient
?? JAVA
字號:
package com.blogool.crawl;

import java.io.*;

import com.blogool.crawl.lib.Cat;
import com.thoughtworks.xstream.XStream;
import com.thoughtworks.xstream.io.xml.DomDriver;

public class Util {
	public static int PAGE_COUNT = 20;

	public static String md5Encoding(String source) {
		StringBuffer reStr = null;
		try {
			java.security.MessageDigest alga = java.security.MessageDigest
					.getInstance("MD5");
			byte[] bs = alga.digest(source.getBytes());
			reStr = new StringBuffer();
			for (int i = 0; i < bs.length; i++) {
				reStr.append(byteHEX(bs[i]));
			}
		} catch (Exception ex) {
		}
		return reStr == null ? null : reStr.toString().toLowerCase();
	}

	/**
	 * byteHEX(),byte類型的數轉換成十六進制的ASCII,
	 */
	public static String byteHEX(byte ib) {
		char[] Digit = { '0', '1', '2', '3', '4', '5', '6', '7', '8', '9', 'A',
				'B', 'C', 'D', 'E', 'F' };
		char[] ob = new char[2];
		ob[0] = Digit[(ib >>> 4) & 0X0F];
		ob[1] = Digit[ib & 0X0F];
		String s = new String(ob);
		return s;
	}

	public static String getBASE64(String s) {
		if (s == null)
			return null;
		return (new sun.misc.BASE64Encoder()).encode(s.getBytes());

	}

	public static String getUnBASE64(String s) {
		if (s == null)
			return null;
		try {
			return new String((new sun.misc.BASE64Decoder()).decodeBuffer(s));
		} catch (IOException e) {
			// TODO 自動生成 catch 塊
			e.printStackTrace();
			return null;
		}
	}

	public static void saveCat(Cat root, File f) {
		// 啟用xstream+xpp方式保存數據
		XStream sm = new XStream();
		FileOutputStream ops = null;
		try {
			ops = new FileOutputStream(f);
			sm.toXML(root, ops);
		} catch (Exception e) {
			e.printStackTrace();
		} finally {
			if (ops != null) {
				try {
					ops.close();
				} catch (Exception e) {
					e.printStackTrace();
				}
			}
		}
	}

	public static Cat loadCat(File f) {
		XStream sm = new XStream(new DomDriver());

		FileInputStream fis = null;
		try {
			fis = new FileInputStream(f);
			Cat root = (Cat) sm.fromXML(fis);
			return root;
		} catch (Exception e) {
			e.printStackTrace();
		} finally {
			if (fis != null) {
				try {
					fis.close();
				} catch (Exception e) {
					e.printStackTrace();
				}
			}
		}
		return null;
	}

	public static void main(String[] args) {
		/*
		 * Cat root = loadCat(new File("d:/libox1/cats1.xml")); int c = 0; for
		 * (int i = 0; i < root.getCats().size(); i ++) { Cat cat =
		 * root.getCats().get(i); for (int j = 0; j < cat.getCats().size(); j
		 * ++) { Cat cc = cat.getCats().get(j); File f = new
		 * File("d:/libox1/pages", getBASE64(cc.getCatName())); if (!f.exists()) {
		 * System.out.println(cc.getCatName());
		 * System.out.println(getBASE64(cc.getCatName()));
		 * System.out.println(cc.getUrl()); } } }
		 */
		File f = new File("d:/libox1/test");
		File[] files = f.listFiles();
		for (int i = 0; i < files.length; i++) {
			String fn = files[i].getName();
			fn = Util.getUnBASE64(fn);
			files[i].renameTo(new File(f, fn));
		}

	}

	public static void saveContent(String content, File f) {
		try {
			// String name = Util.getItemFileName(url);
			// File f = new File(OUTPUT_PATH, name);
			BufferedWriter bw = null;
			try {
				bw = new BufferedWriter(new FileWriter(f));
				bw.write(content);
			} catch (Exception e) {
				e.printStackTrace();
			} finally {
				try {
					if (bw != null)
						bw.close();
				} catch (Exception e) {
					e.printStackTrace();
				}
			}
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
	
	public static void saveData(byte[] bytes, File f) {
		try {
			OutputStream os = null;
			
			try {
				os = new BufferedOutputStream(new FileOutputStream(f));
				os.write(bytes);
			} catch (Exception e) {
				e.printStackTrace();
			} finally {
				if (os != null) {
					try {
						os.close();
					} catch (Exception e) {
						e.printStackTrace();
					}
				}
			}
		} catch (Exception e) {
			e.printStackTrace();
		}
	}

	public static String getContentOrignal(File f) {
		
		BufferedReader br = null;
		StringBuilder sb = new StringBuilder();

		try {
			br = new BufferedReader(new FileReader(f));
			String line = null;
			while ((line = br.readLine()) != null) {
				sb.append(line);
				sb.append("\n");
			}
		} catch (Exception e) {
			e.printStackTrace();
		} finally {
			if (br != null) {
				try {
					br.close();
				} catch (Exception e) {
					e.printStackTrace();
				}
			}
		}
		return sb.toString();
	}
	
	public static String getContent(File f) {
		System.out.println("獲取文件" + f.getPath() + "內容.");
		BufferedReader br = null;
		StringBuilder sb = new StringBuilder();

		try {
			br = new BufferedReader(new FileReader(f));
			String line = null;
			while ((line = br.readLine()) != null) {
				sb.append(line);
			}
		} catch (Exception e) {
			e.printStackTrace();
		} finally {
			if (br != null) {
				try {
					br.close();
				} catch (Exception e) {
					e.printStackTrace();
				}
			}
		}
		return sb.toString();
	}

	public static String modifyName(String name) {
		/*
		 * name.replaceAll("wholesale", ""); if (name == null) return ""; int
		 * pos = name.indexOf("\" title=\""); if (pos >= 0) name =
		 * name.substring(0, pos); pos = name.indexOf("\" ");
		 * 
		 * if (pos >= 0) return name.substring(0, pos); else return name;
		 */
		if (name == null || name.trim().equals("")) {
			System.out.println("Cat name is null");
			return null;
		} else {
			return name.replace("[?()/\\*<>|\"\']", "-");
		}
	}

	public static Cat getCatByFileName(String fileName, Cat root) {
		if (root == null || root.getCats() == null)
			return null;
		fileName = fileName.toLowerCase();
		if (fileName.equals("Apple iPhone".toLowerCase())) {
			int i = 0;
			i++;
		}

		for (int i = 0; i < root.getCats().size(); i++) {
			Cat c = root.getCats().get(i);
			if (c.getCats() == null)
				continue;
			for (int j = 0; j < c.getCats().size(); j++) {
				Cat ch = c.getCats().get(j);
				if (ch.getUrl().toLowerCase().indexOf(fileName) >= 0
						|| ch.getCatName().toLowerCase().indexOf(fileName) >= 0)
					return ch;
			}
		}
		return null;
	}

	public static String getItemFileName(String url) {
		if (url == null || (url = url.trim()).equals(""))
			return null;
		else {
			int pos = url.lastIndexOf("_");
			if (pos >= 0) {
				return url.substring(pos + 1, url.length());
			} else
				return null;
		}
	}
	
	public static String getImageFileName(String url) {
		if (url == null || (url = url.trim()).equals(""))
			return null;
		else {
			int pos = url.lastIndexOf("/");
			if (pos >= 0) {
				return url.substring(pos + 1, url.length());
			} else
				return null;
		}
	}
}

?? 快捷鍵說明

復制代碼 Ctrl + C
搜索代碼 Ctrl + F
全屏模式 F11
切換主題 Ctrl + Shift + D
顯示快捷鍵 ?
增大字號 Ctrl + =
減小字號 Ctrl + -
亚洲欧美第一页_禁久久精品乱码_粉嫩av一区二区三区免费野_久草精品视频
国产大陆a不卡| 日本v片在线高清不卡在线观看| 欧美日韩精品电影| 色综合久久综合网97色综合| 99久久er热在这里只有精品66| 国产成人精品影院| 成人av网站大全| av爱爱亚洲一区| 欧美亚洲综合另类| 欧美精品自拍偷拍| 日韩午夜精品视频| 久久久99精品免费观看| 中文字幕在线免费不卡| 亚洲激情成人在线| 丝袜美腿亚洲色图| 精品无人区卡一卡二卡三乱码免费卡| 久热成人在线视频| 国产永久精品大片wwwapp| 成人晚上爱看视频| 欧美亚洲动漫制服丝袜| 在线播放日韩导航| 久久久久久亚洲综合影院红桃| 国产视频一区二区在线| 亚洲少妇最新在线视频| 三级久久三级久久久| 国产一区视频导航| 色综合天天视频在线观看| 欧美日韩高清影院| 久久久精品中文字幕麻豆发布| 国产精品久久久久影院亚瑟 | 国产精品成人在线观看| 亚洲人成小说网站色在线| 婷婷综合在线观看| 国产精品18久久久久久久久久久久 | 麻豆成人免费电影| 99久久久免费精品国产一区二区| 欧美亚洲免费在线一区| 久久精品一区八戒影视| 天堂在线一区二区| 波多野结衣精品在线| 日韩一区和二区| 国产精品午夜免费| 精品在线播放午夜| 欧美日韩亚洲综合在线 欧美亚洲特黄一级| 精品人在线二区三区| 亚洲自拍与偷拍| 成人久久视频在线观看| 日韩限制级电影在线观看| 一区二区三区视频在线看| 国产91高潮流白浆在线麻豆| 日韩视频在线永久播放| 亚洲第一综合色| 91黄色在线观看| 亚洲色图欧洲色图| 大白屁股一区二区视频| 精品1区2区在线观看| 青青草97国产精品免费观看| 欧美性色欧美a在线播放| 成人欧美一区二区三区小说| 国产精品123| www精品美女久久久tv| 美脚の诱脚舐め脚责91| 欧美精品在欧美一区二区少妇| 亚洲人成人一区二区在线观看| 高清不卡在线观看av| 久久久一区二区三区| 经典三级视频一区| 欧美精品一区二区三区蜜桃 | 成人免费看片app下载| 久久视频一区二区| 国产精品一二三在| 国产午夜一区二区三区| 国产精品一区二区三区乱码| 欧美成va人片在线观看| 理论电影国产精品| 欧美成人video| 国产一区在线不卡| 欧美激情在线观看视频免费| 国产伦精品一区二区三区免费| 欧美成人综合网站| 国产专区欧美精品| 国产欧美日韩视频一区二区| 国产91露脸合集magnet| 中文字幕一区二区三区精华液| 波多野结衣精品在线| 亚洲精品日产精品乱码不卡| 精品婷婷伊人一区三区三| 午夜精品免费在线观看| 91精品国产综合久久福利软件| 日本不卡的三区四区五区| 精品国产3级a| 99re热这里只有精品视频| 成人免费在线视频| 欧美日韩国产影片| 韩国午夜理伦三级不卡影院| 欧美国产日韩a欧美在线观看| 91麻豆免费观看| 五月天欧美精品| 国产喷白浆一区二区三区| 91久久精品国产91性色tv| 日韩精品1区2区3区| 久久久久久久免费视频了| 99精品视频中文字幕| 日本成人在线看| 中文天堂在线一区| 69堂亚洲精品首页| 成人综合在线观看| 日韩精品午夜视频| 亚洲国产精品成人久久综合一区| 91免费在线看| 美女网站色91| 亚洲视频 欧洲视频| 欧美一区二区三区系列电影| 成人午夜av影视| 日韩国产欧美在线播放| 中文字幕日韩一区二区| 欧美一卡在线观看| 色婷婷精品久久二区二区蜜臂av| 蜜臀99久久精品久久久久久软件| 国产精品私人自拍| 日韩精品一区二区三区四区| 在线观看日韩电影| 国产传媒欧美日韩成人| 欧美96一区二区免费视频| 亚洲色图欧洲色图婷婷| 欧美国产成人精品| 久久综合一区二区| 欧美一区二区视频在线观看| 91国偷自产一区二区使用方法| 国产成人免费视频精品含羞草妖精 | 欧美一区二区三区在线| 91黄视频在线| 99精品国产一区二区三区不卡| 蜜臀av性久久久久蜜臀aⅴ四虎| 一区二区三区成人在线视频| 国产精品麻豆网站| 亚洲国产精品激情在线观看 | 91色porny| 成人av一区二区三区| 国产传媒久久文化传媒| 六月丁香婷婷色狠狠久久| 五月天一区二区三区| 亚洲一区二区美女| 亚洲18女电影在线观看| 亚洲国产精品精华液网站| 亚洲一区二区三区四区中文字幕| 亚洲日本在线看| 亚洲欧美另类在线| 亚洲免费在线视频| 亚洲美女免费视频| 一区二区三区在线视频观看| 亚洲你懂的在线视频| 中文字幕在线观看一区| 亚洲四区在线观看| 亚洲精品视频在线观看网站| 亚洲一区二区在线免费看| 亚洲444eee在线观看| 日韩不卡一区二区| 精久久久久久久久久久| 国产精品18久久久久久久久久久久| 国产69精品一区二区亚洲孕妇 | 美腿丝袜亚洲综合| 国产综合久久久久久鬼色| 国产精品一区二区三区网站| 丁香亚洲综合激情啪啪综合| 成人av一区二区三区| 在线亚洲欧美专区二区| 91精品国产综合久久精品麻豆| 欧美一区二区三区影视| 欧美激情一二三区| 一区二区三区精品视频| 美国一区二区三区在线播放| 国产成人一区二区精品非洲| 色综合激情五月| 51精品久久久久久久蜜臀| 久久婷婷国产综合国色天香 | 久久蜜桃一区二区| 国产精品免费视频一区| 一区二区三区波多野结衣在线观看| 日本成人在线看| 91在线云播放| 欧美一级日韩免费不卡| 国产精品欧美综合在线| 亚洲国产成人va在线观看天堂| 国产麻豆精品在线观看| 91丨九色丨黑人外教| 欧美一区二区视频在线观看 | 日韩精品一区二区三区蜜臀 | 欧美午夜影院一区| 久久综合久久鬼色| 一区二区三区日本| 欧美人妖巨大在线| 久久久亚洲国产美女国产盗摄| 亚洲三级视频在线观看| 韩国午夜理伦三级不卡影院| 欧美日韩免费电影| 国产精品久久久久影院亚瑟| 日本麻豆一区二区三区视频| 色婷婷香蕉在线一区二区| 久久精品视频一区二区三区|