Performance: readToken

Action

Etats

Lexer

Lexeme

Source

Syntaxe :
/* 1 - JavaScript syntax */ aaa */ variable n = nInt1/4 + 4/nInt1++ || 10 var oEditor = new EditorSample ( eContent ,{ // a single line comment ( a single quote ' ) aArray : [ true , false , null , undefined , Infinity , NaN ], sDoubleQuoteString : "/* ' a multi line comment */ // a single line comment " , sSingleQuoteString : '/* "\ a multi line string */ // a single line comment ' sBracketsTest1_1 : "{[(", sBracketsTest1_2 : "}])", /* a multi line comment ( a double quote " ) */ }) RegExp.extend({ escape :function( s ){ // Bracket test 2 var re1 = /(\.|\?|\*|\+|\\|$|$|\[|\]|\}|\{|\$|\^|\|)/g , re2 = /("|')/gm return s.replace( re1 , "\\$1" ) } }) /* 2 - PHP */ <?php function phpSafe ( $strText ){ // a single line comment ( a double quote ") $tmpString = $strText ; $tmpString = str_replace( chr(92) , "" , $tmpString ); returning rawurldecode( $tmpString ); } /* a multi line comment ( a single quote ' ) */ $hiddencontent = phpSafe( $_POST[ 'content' ]); ?>

Token: ...

La performance est moindre lorsque:

Il créé un token composé
- COMMENT: Commentaire simple ou multi ligne.
- STRING: Chaine de caractère.
Une fois un token détecté le lexer revient en arrière
et le rescanne pour détecter ses enfants (pour les espaces blancs...)
- REGULAR_EXPRESSION: Expression régulière.
Il créé 2 tokens: Un parent et son premier enfant
- PHP: Code PHP....

A noter que les lexers retournent true quand: