Verwendungen von Schnittstelle
opennlp.tools.tokenize.TokenContextGenerator
Packages, die TokenContextGenerator verwenden
Package
Beschreibung
Contains classes related to finding token or words in a string.
-
Verwendungen von TokenContextGenerator in opennlp.tools.tokenize
Klassen in opennlp.tools.tokenize, die TokenContextGenerator implementierenModifizierer und TypKlasseBeschreibungclass
A defaultTokenContextGenerator
which produces events for maxent decisions for tokenization.Methoden in opennlp.tools.tokenize, die TokenContextGenerator zurückgebenKonstruktoren in opennlp.tools.tokenize mit Parametern vom Typ TokenContextGeneratorModifiziererKonstruktorBeschreibungTokSpanEventStream
(ObjectStream<TokenSample> tokenSamples, boolean skipAlphaNumerics, Pattern alphaNumeric, TokenContextGenerator cg) Initializes a new event stream based on the data stream using aTokenContextGenerator
.TokSpanEventStream
(ObjectStream<TokenSample> tokenSamples, boolean skipAlphaNumerics, TokenContextGenerator cg) Initializes a new event stream based on the data stream using aTokenContextGenerator
. -
Verwendungen von TokenContextGenerator in opennlp.tools.tokenize.lang
Methoden in opennlp.tools.tokenize.lang, die TokenContextGenerator zurückgebenModifizierer und TypMethodeBeschreibungFactory.createTokenContextGenerator
(String languageCode, Set<String> abbreviations) Initializes a customizedTokenContextGenerator
via a set ofabbreviations
.