Làm cách nào tôi có thể tìm thấy các ký tự không phải ASCII trong MySQL?

Tôi đang làm việc với cơ sở dữ liệu MySQL có một số dữ liệu được nhập từ Excel . Dữ liệu chứa các ký tự không phải ASCII (dấu gạch ngang, v.v.) cũng như trả về vận chuyển ẩn hoặc nguồn cấp dữ liệu dòng. Có cách nào để tìm những bản ghi này bằng MySQL không?

Nó phụ thuộc chính xác những gì bạn đang xác định là "ASCII", nhưng tôi khuyên bạn nên thử một biến thể của truy vấn như thế này:

SELECT * FROM tableName WHERE columnToCheck NOT REGEXP '[A-Za-z0-9]';

Truy vấn đó sẽ trả về tất cả các hàng trong đó cộtToCheck chứa bất kỳ ký tự không chữ và số nào. Nếu bạn có các ký tự khác được chấp nhận, hãy thêm chúng vào lớp ký tự trong biểu thức chính quy. Ví dụ: nếu dấu chấm, dấu phẩy và dấu gạch nối là OK, hãy thay đổi truy vấn thành:

SELECT * FROM tableName WHERE columnToCheck NOT REGEXP '[A-Za-z0-9.,-]';

Trang có liên quan nhất của tài liệu MySQL có lẽ là 12.5.2 Biểu thức chính quy .

MySQL cung cấp quản lý bộ ký tự toàn diện có thể giúp giải quyết vấn đề này.

SELECT whatever
  FROM tableName 
 WHERE columnToCheck <> CONVERT(columnToCheck USING ASCII)

Các CONVERT(col USING charset)chức năng biến những nhân vật unconvertable vào nhân vật thay thế. Sau đó, văn bản được chuyển đổi và không chuyển đổi sẽ không đồng đều.

Xem điều này để thảo luận thêm. https://dev.mysql.com/doc/refman/8.0/en/charset-repertoire.html

Bạn có thể sử dụng bất kỳ tên bộ ký tự nào bạn muốn thay cho ASCII. Ví dụ: nếu bạn muốn tìm ra ký tự nào sẽ không hiển thị chính xác trong trang mã 1257 (tiếng Litva, tiếng Latvia, tiếng Estonia) sử dụngCONVERT(columnToCheck USING cp1257)

Bạn có thể định nghĩa ASCII là tất cả các ký tự có giá trị thập phân là 0 - 127 (0x00 - 0x7F) và tìm các cột có các ký tự không phải ASCII bằng truy vấn sau

SELECT * FROM TABLE WHERE NOT HEX(COLUMN) REGEXP '^([0-7][0-9A-F])*$';

Đây là truy vấn toàn diện nhất mà tôi có thể đưa ra.

Đây có lẽ là những gì bạn đang tìm kiếm:

select * from TABLE where COLUMN regexp '[^ -~]';

Nó sẽ trả về tất cả các hàng trong đó COLUMN chứa các ký tự không phải ASCII (hoặc các ký tự ASCII không in được như dòng mới).

Một ký tự bị thiếu trong các ví dụ của mọi người ở trên là ký tự kết thúc (\ 0). Điều này là vô hình đối với đầu ra của bảng điều khiển MySQL và không thể tìm thấy bởi bất kỳ truy vấn nào được đề cập ở đây. Truy vấn để tìm nó chỉ đơn giản là:

select * from TABLE where COLUMN like '%\0%';

Dựa trên câu trả lời đúng, nhưng cũng tính đến các ký tự điều khiển ASCII, giải pháp hiệu quả với tôi là:

SELECT * FROM `table` WHERE NOT `field` REGEXP  "[\\x00-\\xFF]|^$";

Nó cũng làm điều tương tự: tìm kiếm các vi phạm phạm vi ASCII trong một cột, nhưng cũng cho phép bạn tìm kiếm các ký tự điều khiển, vì nó sử dụng ký hiệu thập lục phân cho các điểm mã. Vì không có so sánh hoặc chuyển đổi (không giống như câu trả lời của @ Ollie), nên điều này cũng nhanh hơn đáng kể. (Đặc biệt là nếu MySQL không kết thúc sớm trên truy vấn regex, điều này chắc chắn nên.)

Nó cũng tránh các trường trả về có độ dài bằng không. Nếu bạn muốn một phiên bản dài hơn một chút có thể hoạt động tốt hơn, bạn có thể sử dụng phiên bản này thay thế:

SELECT * FROM `table` WHERE `field` <> "" AND NOT `field` REGEXP  "[\\x00-\\xFF]";

Nó thực hiện một kiểm tra riêng về độ dài để tránh kết quả có độ dài bằng không, mà không xem xét chúng cho vượt qua regex. Tùy thuộc vào số lượng mục nhập có độ dài bằng không bạn có, mục này có thể nhanh hơn đáng kể.

Lưu ý rằng nếu bộ ký tự mặc định của bạn là thứ gì đó kỳ quái trong đó 0x00-0xFF không ánh xạ tới các giá trị giống như ASCII (có một bộ ký tự như vậy tồn tại ở bất cứ đâu không?), Điều này sẽ trả về kết quả dương tính giả. Nếu không, hãy tận hưởng!

Thử sử dụng truy vấn này để tìm kiếm các bản ghi ký tự đặc biệt

SELECT *
FROM tableName
WHERE fieldName REGEXP '[^a-zA-Z0-9@:. \'\-`,\&]'

Câu trả lời của @ zende là câu duy nhất bao gồm các cột có sự pha trộn của các ký tự ascii và non ascii, nhưng nó cũng có điều hex có vấn đề. Tôi đã sử dụng điều này:

SELECT * FROM `table` WHERE NOT `column` REGEXP '^[ -~]+$' AND `column` !=''

Trong Oracle chúng ta có thể sử dụng dưới đây.

SELECT * FROM TABLE_A WHERE ASCIISTR(COLUMN_A) <> COLUMN_A;

Đối với câu hỏi này, chúng tôi cũng có thể sử dụng phương pháp này:

Câu hỏi từ sở thú sql:
Tìm tất cả các chi tiết về giải thưởng giành được bởi PETER GRÜNBERG

Các ký tự không phải ASCII

ans: chọn * từ nobel nơi người chiến thắng như'P% GR% _% berg ';