system.tokenizers

Table système qui présente tous les tokenizers disponibles.

Interroger dans ClickHouse Cloud

Les données de cette table système sont stockées localement sur chaque nœud de ClickHouse Cloud. Pour obtenir une vue complète de l’ensemble des données, il faut donc utiliser la fonction clusterAllReplicas. Consultez cette page pour plus de détails.

​

Description

Affiche tous les tokenizers disponibles. Ils s’utilisent dans les fonctions tokens, hasAllTokens, hasAnyTokens et dans l’index de texte.

​

Colonnes

• name (String) — Nom du tokenizer

​

Exemple

SELECT * FROM system.tokenizers;

┌─name────────────┐
│ ngrams          │
│ splitByNonAlpha │
│ sparseGrams     │
│ tokenbf_v1      │
│ ngrambf_v1      │
│ array           │
│ splitByString   │
│ sparse_grams    │
│ asciiCJK        │
└─────────────────┘