Comment puis-je trouver des caractères non ASCII dans MySQL ?

Question

Je travaille avec une base de données MySQL dont certaines données sont importées de Excel . Les données contiennent des données non ASCII (tirets, etc.) ainsi que les retours de chariot ou les sauts de ligne cachés. Existe-t-il un moyen de trouver ces enregistrements à l'aide de MySQL ?

Answer 1

En se basant sur la bonne réponse, mais en tenant également compte des caractères de contrôle ASCII, la solution qui a fonctionné pour moi est la suivante :

SELECT * FROM `table` WHERE NOT `field` REGEXP  "[\\x00-\\xFF]|^$";

Il fait la même chose : il recherche les violations de la plage ASCII dans une colonne, mais vous permet également de rechercher les caractères de contrôle, car il utilise la notation hexadécimale pour les points de code. Puisqu'il n'y a pas de comparaison ou de conversion (contrairement à la réponse de @Ollie), cette méthode devrait également être beaucoup plus rapide. (Surtout si MySQL effectue une terminaison anticipée sur la requête regex, ce qu'il devrait certainement faire).

Elle évite également de renvoyer des champs de longueur nulle. Si vous souhaitez une version légèrement plus longue et plus performante, vous pouvez utiliser cette option :

SELECT * FROM `table` WHERE `field` <> "" AND NOT `field` REGEXP  "[\\x00-\\xFF]";

Il effectue une vérification séparée de la longueur pour éviter les résultats de longueur nulle, sans les prendre en compte pour une passe de regex. Selon le nombre d'entrées de longueur nulle que vous avez, cela pourrait être beaucoup plus rapide.

Notez que si votre jeu de caractères par défaut est quelque chose de bizarre où 0x00-0xFF ne correspondent pas aux mêmes valeurs que l'ASCII (existe-t-il un tel jeu de caractères ?), cela renverra un faux positif. Sinon, profitez-en !

Answer 2

Essayez d'utiliser cette requête pour rechercher des enregistrements de caractères spéciaux

SELECT *
FROM tableName
WHERE fieldName REGEXP '[^a-zA-Z0-9@:. \'\-`,\&]'

Answer 3

La réponse de @zende était la seule qui couvrait les colonnes avec un mélange de caractères ascii et non ascii, mais elle avait aussi ce problème d'hexagone. J'ai utilisé ceci :

SELECT * FROM `table` WHERE NOT `column` REGEXP '^[ -~]+$' AND `column` !=''

Answer 4

Dans Oracle, nous pouvons utiliser les éléments suivants.

SELECT * FROM TABLE_A WHERE ASCIISTR(COLUMN_A) <> COLUMN_A;

Answer 5

Pour cette question, nous pouvons également utiliser cette méthode :

Question de sql zoo :
Retrouvez tous les détails du prix remporté par PETER GRÜNBERG

Caractères non ASCII

ans : select*from nobel where winner like 'P% GR%_%berg' ;