Anderes Wort für Tokenizer?
Folgende Synonyme für Tokenizer sind uns bekannt
🙁 Es wurden keine Synonyme für Tokenizer gefunden.
Diese Wörter könnten Sie auch interessieren
Schreibweise
Tokenizer
Das Wort vorlesen lassen:Erklärung für Tokenizer
Lexikalische Analyse ist in der Informatik die Zerlegung einer Zeichenkette (z. B. Quelltext) in eine Folge von logisch zusammengehörigen Einheiten, sogenannte Token. Ein Computerprogramm, das eine lexikalische Analyse durchführt, wird Lexer, Tokenizer oder lexikalischer Scanner genannt. Ein Lexer ist meist Teil eines Compilers und wird als erster Schritt in der Analysephase ausgeführt. Das Ergebnis des Lexers wird im nächsten Schritt von einem Parser weiterverarbeitet.
Quelle: wikipedia.org
Tokenizer als Bild teilen
Du möchtest andere auf die richtige Schreibweise von Tokenizer hinweisen? Hier kannst du passende Bilder zu "Tokenizer" direkt auf Social Media teilen. Klicke dazu einfach bei dem jeweiligen Bild auf und wähle die gewünschte Variante bzw. Social Media Plattform aus.