Fonctions de traitement automatique du langage naturel (NLP)
Cette fonction est expérimentale et peut évoluer de manière imprévisible, avec des changements non rétrocompatibles dans les versions futures.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
s — Le texte à analyser. String
Valeur renvoyée
Renvoie une chaîne contenant le code du jeu de caractères détecté String
Exemples
Utilisation de base
SELECT detectCharset('Ich bleibe für ein paar Tage.')
Cette fonction est expérimentale et peut changer de manière imprévisible, avec des modifications non rétrocompatibles, dans de futures versions.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
text_to_be_analyzed — Le texte à analyser. String
Valeur renvoyée
Renvoie le code ISO à 2 lettres de la langue détectée. Autres résultats possibles : un = inconnu, aucune langue n’a pu être détectée, other = la langue détectée n’a pas de code à 2 lettres. String
Exemples
Texte multilingue
SELECT detectLanguage('Je pense que je ne parviendrai jamais à parler français comme un natif. Where there\'s a will, there\'s a way.')
detectLanguage, detectLanguageMixed renvoie une Map de codes de langue à 2 lettres associés au pourcentage de chaque langue dans le texte.
Cette fonction est expérimentale et peut évoluer de façon imprévisible, avec des changements non rétrocompatibles, dans les futures versions.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
s — Le texte à analyser String
Valeur renvoyée
Renvoie une map dont les clés sont des codes ISO à 2 lettres et les valeurs correspondantes le pourcentage du texte détecté pour cette langue Map(String, Float32)
Exemples
Langues mixtes
SELECT detectLanguageMixed('二兎を追う者は一兎をも得ず二兎を追う者は一兎をも得ず A vaincre sans peril, on triomphe sans gloire.')
detectLanguage, à la différence que la fonction detectLanguageUnknown fonctionne avec des chaînes non encodées en UTF8.
Préférez cette version si votre jeu de caractères est UTF-16 ou UTF-32.
Cette fonction est expérimentale et peut évoluer de manière imprévisible, avec des changements non rétrocompatibles, dans les versions futures.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
detectLanguageUnknown('s')
s — Le texte à analyser. String
Valeur renvoyée
Renvoie le code ISO à 2 lettres de la langue détectée. Autres résultats possibles : un = inconnu, aucune langue n’a pu être détectée, other = la langue détectée n’a pas de code à 2 lettres. String
Exemples
Utilisation de base
SELECT detectLanguageUnknown('Ich bleibe für ein paar Tage.')
LimitationDans sa forme actuelle, cette fonction est limitée : elle utilise le dictionnaire émotionnel intégré et ne fonctionne que pour la langue russe.
Cette fonction est expérimentale et peut évoluer de façon imprévisible, avec des modifications non rétrocompatibles, dans les versions futures.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
s — Le texte à analyser. String
Valeur renvoyée
Renvoie le score de sentiment moyen des mots du texte Float32
Exemples
Analyse des sentiments en russe
SELECT
detectTonality('Шарик - хороший пёс'),
detectTonality('Шарик - пёс'),
detectTonality('Шарик - плохой пёс')
Cette fonction est expérimentale et peut évoluer de façon imprévisible, avec des changements non rétrocompatibles, dans les versions futures.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
lang — Langue dont les règles seront utilisées. Stringword — Mot en minuscules à lemmatiser. String
Valeur renvoyée
Renvoie la forme lemmatisée du mot String
Exemples
Lemmatisation en anglais
SELECT lemmatize('en', 'wolves')
String ou Array(String)
Exemples
Racinisation d’un mot unique
SELECT stem('blessing', 'en') AS res
SELECT stem(['blessing', 'disguise'], 'en') AS res
SELECT stem(toFixedString('blessing', 10), 'en') AS res
SELECT stem(toNullable('blessing'), 'en') AS res
plain, vous devez fournir le chemin vers un fichier texte simple, dans lequel chaque ligne correspond à un ensemble de synonymes donné.
Les mots de cette ligne doivent être séparés par des espaces ou des tabulations.
Avec le type d’extension wordnet, vous devez fournir le chemin vers un répertoire contenant le thésaurus WordNet.
Le thésaurus doit contenir un index des sens WordNet.
Cette fonction est expérimentale et peut évoluer de façon imprévisible, avec des changements non rétrocompatibles, dans les futures versions.
Définissez allow_experimental_nlp_functions = 1 pour l’activer.
ext_name — Nom de l’extension dans laquelle la recherche s’effectue. Stringword — Mot recherché dans l’extension. String
Valeur renvoyée
Renvoie un tableau de synonymes pour le mot donné. Array(String)
Exemples
Trouver des synonymes
SELECT synonyms('list', 'important')
['important','big','critical','crucial']
