Programy według ewbtokenfactory.sf.net

EWBTokenFactory for PHP to tokenizator włącznie z odstępami. Większość tokenizatorów będzie pobrać każde słowo jako token i upuścić biały znak. Ten tokenizator będzie również tokenize spacji pomiędzy do własnych tokenów. Obsł