À partir de PHP 4.3.0, ces fonctions sont activées par défaut. Pour les anciennes versions, vous devez compiler PHP avec l'option --enable-tokenizer . Vous pouvez désactiver le support de l'extension tokenizer avec l'option --disable-tokenizer .
La version Windows de PHP dispose du support automatique de cette extension. Vous n'avez pas à ajouter de bibliothèque supplémentaire pour disposer de ces fonctions.
Note: Le support automatique du tokenizer est disponible depuis PHP 4.3.0.