亚洲欧美第一页_禁久久精品乱码_粉嫩av一区二区三区免费野_久草精品视频

? 歡迎來到蟲蟲下載站! | ?? 資源下載 ?? 資源專輯 ?? 關于我們
? 蟲蟲下載站

?? cseggraph.java

?? 基于中科院的ICTCLAS實現中文分詞系統 開發工具是JAVA.經測試,效果很好
?? JAVA
字號:
package com.gftech.ictclas4j.segment;

import com.gftech.common.GFCommon;
import com.gftech.ictclas4j.utility.CDictionary;
import com.gftech.ictclas4j.utility.Final;
import com.gftech.ictclas4j.utility.Utility;

public class CSegGraph {
	// segGraph: The segmentation word graph
	// Row first array
	public CDynamicArray m_segGraph;

	// pAtoms: the buffer for returned segmented atoms
	// Such as a Chinese Char, digit, single byte, or delimiters
	public byte[][] m_sAtom = new byte[Final.MAX_SENTENCE_LEN][Final.WORD_MAXLENGTH];

	// Save the individual length of atom in the array
	public int[] m_nAtomLength = new int[Final.MAX_SENTENCE_LEN];

	// pAtoms: the POS property
	public int[] m_nAtomPOS = new int[Final.MAX_SENTENCE_LEN];

	// The count of atoms
	public int m_nAtomCount;

	public CSegGraph() {
		m_segGraph.SetRowFirst(false);	
		//segGraph: The segmentation word graph
		//Row first array
	}

	// Generate the segmentation word net according the original sentence
	// sSentence: the sentence
	// dictCore: core dictionary
	// boolean bOriginalFreq=false: output original frequency
	public boolean GenerateWordNet(byte[] sSentence, CDictionary dictCore,
			boolean bOriginalFreq) {
//		Gernerate the word net from the sLine, that's list all the possible word
		int i=0,j;
		int nLen= sSentence.length;
		byte[] sWord=new byte[Final.WORD_MAXLENGTH] ;
		byte[] sTempWord=new byte[Final.WORD_MAXLENGTH] ;
		byte[] sWordMatch=new byte[Final.WORD_MAXLENGTH];
		int nWordIndex=0;
		int nHandleTemp=0;
		int k,nPOS;
		int[] nMatchFreq=new int[20];
		int[] nMatchHandle=new int[20];
		int nTotalFreq;
		int nMatchCount=0;
		double dValue=0;
		m_nAtomCount=0;
		m_segGraph.SetEmpty();//Set segmentation graph empty

		AtomSegment(sSentence);
		//Atomic Segmentation

	    for(i=0;i<m_nAtomCount;i++)//Init the cost array
	    {
			if(m_nAtomPOS[i]==Final.CT_CHINESE)//The atom is a Chinese Char
			{
				if(!bOriginalFreq)//Not original frequency
					m_segGraph.SetElement(i,i+1,Math.log(Final.MAX_FREQUENCE),0,null);//init the link with the maximum value
				else
					m_segGraph.SetElement(i,i+1,0,0,m_sAtom[i]);//init the link with the maximum value
			}
			else//Other atom
			{
				Utility.strcpy(sWord,m_sAtom[i]);//init the word 
				dValue=Final.MAX_FREQUENCE;
				switch(m_nAtomPOS[i])
				{
				case Final.CT_INDEX:
				case Final.CT_NUM:
					nPOS=-27904;//'m'*256
					Utility.strcpy(sWord,"未##數".getBytes());
					dValue=0;
					break;
				case Final.CT_DELIMITER:
					nPOS=30464;//'w'*256;
					break;
				case Final.CT_LETTER:
					nPOS=-'n'*256-'x';//
					dValue=0;
					Utility.strcpy(sWord,"未##串".getBytes());
					break;
				case Final.CT_SINGLE://12021-2129-3121
					if(Utility.GetCharCount("+-1234567890".getBytes(),m_sAtom[i])== m_sAtom[i].length)
					{
						nPOS=-27904;//'m'*256
						Utility.strcpy(sWord,"未##數".getBytes());
					}
					else
					{
						nPOS=-'n'*256-'x';//
						Utility.strcpy(sWord,"未##串".getBytes());
					}
					dValue=0;
					break;
				default:
					nPOS=m_nAtomPOS[i];//'?'*256;
					break;
				}
				if(!bOriginalFreq)//Not original frequency
					m_segGraph.SetElement(i,i+1,0,nPOS,null);//init the link with minimum
				else
					m_segGraph.SetElement(i,i+1,dValue,nPOS,sWord);//init the link with minimum
			}
	    }
		i=0;
		while(i<m_nAtomCount)//All the word
		{
		  Utility.strcpy(sWord,m_sAtom[i]);//Get the current atom
		  j=i+1;
		  if(Utility.strcmp(sWord,"月".getBytes()) &&Utility.strcmp(m_sAtom[i+1],"份".getBytes()) )//Don't split 月份
			  j+=1;
		  while(j<=m_nAtomCount&&dictCore.GetMaxMatch(sWord,sWordMatch, nHandleTemp))
		  {//Add a condition to control the end of string
		   //retrieve the dictionary with the word
	          if(Utility.strcmp(sWordMatch,sWord) )//find the current word
			  {
				  nTotalFreq=0;
				  dictCore.GetHandle(sWord, nMatchCount,nMatchHandle,nMatchFreq);
				  for(k=0;k<nMatchCount;k++)//Add the frequency
				  {
					 nTotalFreq+=nMatchFreq[k];
				  }
				  //Adding a rule to exclude some words to be formed.
				  if( sWord.length==4&&i>=1&&(Utility.IsAllNum( m_sAtom[i-1])||Utility.IsAllChineseNum(m_sAtom[i-1]))
						  &&(Utility.strncmp(sWord,0,"年".getBytes(),2) ||Utility.strncmp(sWord,0,"月".getBytes(),2) ))
				  {//1年內、1999年末
				     if(Utility.CC_Find("末內中底前間初".getBytes(),GFCommon.bytesCopy(sWord,2,sWord.length-2)))
					     break;
				  }
				  if(nMatchCount==1)//The possible word has only one POS, store it
				  {
					if(!bOriginalFreq)//Not original frequency
						m_segGraph.SetElement(i,j,-Math.log(nTotalFreq+1)+Math.log(Final.MAX_FREQUENCE),nMatchHandle[0],null);
					else
						m_segGraph.SetElement(i,j,nTotalFreq,nMatchHandle[0],sWord);
				  }
				  else 
				  {
						if(!bOriginalFreq)//Not original frequency
							m_segGraph.SetElement(i,j,-Math.log(nTotalFreq+1)+Math.log(Final.MAX_FREQUENCE),0,null);
						else
							m_segGraph.SetElement(i,j,nTotalFreq,0,sWord);
				  }
			  }
	          Utility.strcat(sWord,m_sAtom[j++]);
		  }
		  i+=1;//Start from i++;
		}
		return true;
	}

	// Segment the atomic members from the original sentence
	// sSentence: the sentence
	// pAtoms: the buffer for returned segmented atoms
	// Such as a Chinese Char, digit, single byte, or delimiters
	protected boolean AtomSegment(byte[] sSentence) {
		   int i=0, j=0,nCurType,nNextType;	
			//i is the pointer of sentence string
			//j is the pointer of pAtoms
			byte[] sChar=new byte[3];
			sChar[2]=0;//Set the char ending
			m_sAtom[j][0]=0;//Set the first word as null
			m_nAtomLength[j]=0;
			if(Utility.strncmp(sSentence,0,Final.SENTENCE_BEGIN.getBytes(), Final.SENTENCE_BEGIN.length()) )
			{
				Utility.strcpy(m_sAtom[j],Final.SENTENCE_BEGIN.getBytes());//Set the first word as sentence begining
				m_nAtomLength[j]= Final.SENTENCE_BEGIN.length();
				m_nAtomPOS[j]=Final.CT_SENTENCE_BEGIN;//init
				i+=m_nAtomLength[j];
				j+=1;
				m_sAtom[j][0]=0;//Set the first word as null
				m_nAtomLength[j]=0;
			}
			for( i=0;i<sSentence.length;i++)
			{
				if(Utility.strncmp(sSentence,i,Final.SENTENCE_END.getBytes(), Final.SENTENCE_END.length()) )
				{
					Utility.strcpy(m_sAtom[j],Final.SENTENCE_END.getBytes());//Set the first word as null
					m_nAtomLength[j]= Final.SENTENCE_END.length();
					m_nAtomPOS[j]=Final.CT_SENTENCE_END;//init
					i+=m_nAtomLength[j];
					j+=1;
					m_sAtom[j][0]=0;//Set the first word as null
					m_nAtomLength[j]=0;
					continue;
				}
				sChar[0]= sSentence[i];//Get the char with first byte
				sChar[1]=0;//
				i+=1;
				if(sChar[0]<0)//Two byte char
				{
					sChar[1]=sSentence[i];//Get the char with second byte
					i+=1;//i increased by 1
				}
				Utility.strcat(m_sAtom[j],sChar);
				nCurType=Utility.charType( sChar[0],sChar[1]);
				if(sChar[0]=='.'&&(Utility.charType( sSentence[i],sSentence[i+1])==Final.CT_NUM||( sSentence[i]>='0'&& sSentence[i]<='9')))
					nCurType=Final.CT_NUM;//Digit after . indicate . as a point in the numeric
				m_nAtomPOS[j]=nCurType;
				//Record its property, just convience for continuous processing
				
				if(nCurType==Final.CT_CHINESE||nCurType==Final.CT_INDEX||nCurType==Final.CT_DELIMITER||nCurType==Final.CT_OTHER)
				{//Chinese char, index number,delimiter and other is treated as atom
					m_nAtomLength[j]= m_sAtom[j].length;//Save its length
					j+=1;//Skip to next atom
					m_sAtom[j][0]=0;//init
				}
				else 
				{//Number,single char, letter
					nNextType=255;
					if(i< sSentence.length)
						nNextType=Utility.charType( sSentence[i] ,sSentence[i+1]);
					if(nNextType!=nCurType||i== sSentence.length)
					//Reaching end or next char type is different from current char
					{
						m_nAtomLength[j]= m_sAtom[j].length;//Save its length	
						j+=1;
						m_sAtom[j][0]=0;//init
					}
				}
			}
			m_nAtomCount=j;//The count of segmentation atoms
			return true;
	}

}

?? 快捷鍵說明

復制代碼 Ctrl + C
搜索代碼 Ctrl + F
全屏模式 F11
切換主題 Ctrl + Shift + D
顯示快捷鍵 ?
增大字號 Ctrl + =
減小字號 Ctrl + -
亚洲欧美第一页_禁久久精品乱码_粉嫩av一区二区三区免费野_久草精品视频
亚洲第一精品在线| 欧美xxxxxxxx| 国产精品久久久久久久久久久免费看 | 1024成人网| 丰满放荡岳乱妇91ww| 久久综合丝袜日本网| 国产自产2019最新不卡| 久久精品视频免费| 精品无人区卡一卡二卡三乱码免费卡| 91精品国产日韩91久久久久久| 亚洲国产婷婷综合在线精品| 欧美乱妇15p| 免费日本视频一区| 久久先锋影音av鲁色资源网| 国产高清成人在线| 亚洲欧美日韩综合aⅴ视频| 色婷婷久久综合| 亚洲观看高清完整版在线观看| 欧美一区二区观看视频| 精品一区二区三区日韩| 国产精品美女久久久久av爽李琼| 99久久综合国产精品| 亚洲香肠在线观看| 欧美成人精品二区三区99精品| 丰满白嫩尤物一区二区| 亚洲一区二区三区在线播放| 欧美精品在欧美一区二区少妇| 黄色精品一二区| 亚洲日本电影在线| 日韩精品一区二区三区在线| 成人三级伦理片| 三级成人在线视频| 国产欧美日韩一区二区三区在线观看| 91麻豆精东视频| 久久国产成人午夜av影院| 一区精品在线播放| 日韩一区二区三区免费看| 波多野结衣在线一区| 秋霞影院一区二区| 国产精品人成在线观看免费 | 99精品国产视频| 亚洲18女电影在线观看| 久久久www成人免费毛片麻豆| 欧美婷婷六月丁香综合色| 激情综合色播激情啊| 亚洲综合无码一区二区| 国产欧美视频一区二区| 正在播放亚洲一区| 97精品电影院| 国产原创一区二区三区| 亚洲一区二区三区四区在线免费观看| 欧美精品一区二区三区蜜桃视频 | 国产在线视视频有精品| 亚洲一区二区三区视频在线 | 风间由美一区二区三区在线观看 | av一区二区久久| 久久机这里只有精品| 亚洲夂夂婷婷色拍ww47 | 国产精品无圣光一区二区| 欧美一级欧美三级| 91官网在线免费观看| 成人av影视在线观看| 激情丁香综合五月| 男人的天堂久久精品| 亚洲一二三区不卡| 一区二区三区成人| ...av二区三区久久精品| 久久久国产精品不卡| 欧美成人性福生活免费看| 欧美日韩国产高清一区二区三区| 91免费在线播放| 懂色一区二区三区免费观看| 激情文学综合丁香| 国产麻豆日韩欧美久久| 久久国产精品区| 久久99国产精品久久| 美国三级日本三级久久99| 日韩精品成人一区二区在线| 一区二区三区精品在线观看| 亚洲人成电影网站色mp4| 国产精品国产馆在线真实露脸| 国产性做久久久久久| 国产欧美综合在线| 国产欧美日韩精品一区| 国产色婷婷亚洲99精品小说| 久久久久久久久伊人| 日本一区二区三区四区在线视频| 久久久国产午夜精品| 日本一区二区三区四区| 成人免费在线观看入口| 最新国产精品久久精品| 亚洲精品国产高清久久伦理二区| 亚洲蜜臀av乱码久久精品| 亚洲一区日韩精品中文字幕| 午夜精品一区二区三区免费视频| 亚洲第一av色| 久久国产精品区| 风间由美性色一区二区三区| av在线不卡电影| 欧美日本一区二区| 亚洲精品在线观看视频| 亚洲国产精品传媒在线观看| 亚洲精品国产无套在线观| 日韩一区精品字幕| 紧缚捆绑精品一区二区| 99久久精品国产一区二区三区| 色天使久久综合网天天| 91精品国产色综合久久不卡电影 | 欧美xxx久久| 国产精品视频第一区| 一区二区三区免费在线观看| 视频一区在线视频| 国产精品一区二区在线播放| 波多野结衣中文字幕一区| 欧美日韩国产高清一区| 久久亚洲精品小早川怜子| 亚洲欧美成人一区二区三区| 日韩经典中文字幕一区| 国产米奇在线777精品观看| 97国产精品videossex| 欧美一级日韩不卡播放免费| 国产精品日韩精品欧美在线| 亚洲国产成人精品视频| 国产99久久久国产精品免费看| 在线亚洲精品福利网址导航| 日韩免费高清电影| 亚洲三级电影全部在线观看高清| 青青草国产成人av片免费| 成人免费视频视频| 欧美精品免费视频| 国产精品日日摸夜夜摸av| 天堂午夜影视日韩欧美一区二区| 国产精品影视在线观看| 欧美午夜理伦三级在线观看| 国产日韩欧美麻豆| 日韩精品电影一区亚洲| 色综合色综合色综合| 久久综合色之久久综合| 亚洲国产另类精品专区| 播五月开心婷婷综合| 精品国产网站在线观看| 亚洲一区二区三区自拍| 成人高清免费观看| 日韩欧美专区在线| 亚洲电影第三页| 99国产精品国产精品久久| wwwwww.欧美系列| 日韩精品一二区| 在线观看亚洲a| 国产精品久久三区| 国产精品一区二区在线播放| 欧美精品粉嫩高潮一区二区| 一区二区三区精品视频| 91在线你懂得| 国产精品午夜春色av| 国产一区二区伦理片| 日韩免费观看高清完整版在线观看| 亚洲综合色噜噜狠狠| 91美女片黄在线| 综合激情成人伊人| 成人av中文字幕| 欧美韩日一区二区三区| 国产盗摄视频一区二区三区| 精品少妇一区二区三区在线播放| 婷婷综合在线观看| 欧美日韩在线一区二区| 亚洲免费av观看| 色婷婷综合久久久久中文一区二区| 最好看的中文字幕久久| 91香蕉视频在线| 亚洲人成小说网站色在线| 99视频精品全部免费在线| 亚洲欧美一区二区视频| 色综合中文综合网| 中文字幕一区二区三区乱码在线| 国内精品久久久久影院色| 26uuu亚洲综合色| 国产在线不卡一卡二卡三卡四卡| 日韩欧美综合一区| 国产一区二区三区香蕉| 久久久.com| 成人毛片在线观看| 亚洲美女屁股眼交| 色播五月激情综合网| 无吗不卡中文字幕| 51久久夜色精品国产麻豆| 免费成人在线观看视频| 日韩精品中文字幕一区二区三区 | 亚洲精品写真福利| 欧美四级电影在线观看| 日韩制服丝袜av| 日韩午夜激情视频| 国产乱码精品一区二区三区忘忧草| 久久精品亚洲一区二区三区浴池| 成人一区二区三区视频| 亚洲免费三区一区二区| 欧美嫩在线观看| 国产一区二区三区日韩| 亚洲色图一区二区| 亚洲欧美日韩久久精品|