UnicodeDecodeError: codec 'charmap' không thể giải mã byte X ở vị trí Y: ánh xạ ký tự thành <không xác định>

Tôi đang cố gắng để chương trình Python 3 thực hiện một số thao tác với tệp văn bản chứa đầy thông tin. Tuy nhiên, khi cố đọc tệp tôi gặp lỗi sau:

 Traceback (most recent call last):  
     File "SCRIPT LOCATION", line NUMBER, in <module>  
     `text = file.read()`  
     File "C:\Python31\lib\encodings\cp1252.py", line 23, in decode  
     `return codecs.charmap_decode(input,self.errors,decoding_table)[0]`  
     UnicodeDecodeError: 'charmap' codec can't decode byte 0x90 in position 2907500: character maps to `<undefined>`  

Các tập tin trong câu hỏi không sử dụng CP1252mã hóa. Đó là sử dụng mã hóa khác. Cái nào bạn phải tự tìm ra. Những cái phổ biến là Latin-1và UTF-8. Vì 0x90 thực sự không có nghĩa gì cả Latin-1, UTF-8(trong đó 0x90 là byte tiếp tục) có nhiều khả năng.

Bạn chỉ định mã hóa khi bạn mở tệp:

file = open(filename, encoding="utf8")

Chỉ cần thêm vào trong trường hợp file = open(filename, encoding="utf8")không hoạt động thửfile = open(filename, errors='ignore')

Là một phần mở rộng cho câu trả lời của @ LennartRegebro :

Nếu bạn không thể biết mã hóa tập tin của mình sử dụng và giải pháp ở trên không hoạt động (không phải vậy utf8) và bạn chỉ thấy mình đang đoán - có những công cụ trực tuyến mà bạn có thể sử dụng để xác định mã hóa đó là gì. Chúng không hoàn hảo nhưng thường hoạt động tốt. Sau khi bạn tìm ra mã hóa, bạn sẽ có thể sử dụng giải pháp ở trên.

EDIT: (Sao chép từ bình luận)

Một trình soạn thảo văn bản khá phổ biến Sublime Textcó lệnh hiển thị mã hóa nếu nó đã được đặt ...

1. Chuyển đến View-> Show Console(hoặc Ctrl+ `)

2. Nhập vào trường ở phía dưới view.encoding()và hy vọng điều tốt nhất (tôi không thể có được bất cứ điều gì Undefinednhưng có lẽ bạn sẽ gặp may mắn hơn ...)

Ngoài ra, nếu bạn không cần giải mã tệp, chẳng hạn như tải tệp lên trang web , open(filename, 'rb'). r = đọc, b = nhị phân

TLDR? Thử:file = open(filename, encoding='cp437)

Tại sao? Khi một người sử dụng:

file = open(filename)
text = file.read()

Python giả định tệp sử dụng cùng một bảng mã như môi trường hiện tại (cp1252 trong trường hợp bài đăng mở) và cố gắng giải mã nó thành UTF-8 mặc định của chính nó. Nếu tệp chứa các ký tự của các giá trị không được xác định trong bảng mã này (như 0x90), chúng tôi sẽ nhận được UnicodeDecodeError. Đôi khi chúng ta không biết mã hóa tệp, đôi khi mã hóa của tệp có thể được xử lý bởi Python (ví dụ: cp790), đôi khi tệp có thể chứa mã hóa hỗn hợp.

Nếu các ký tự đó không cần thiết, người ta có thể quyết định thay thế chúng bằng dấu chấm hỏi, bằng:

file = open(filename, errors='replace')

Một cách giải quyết khác là sử dụng:

file = open(filename, errors='ignore')

Các ký tự sau đó được giữ nguyên, nhưng các lỗi khác cũng sẽ bị che đi.

Giải pháp khá tốt là chỉ định mã hóa, nhưng không phải bất kỳ mã hóa nào (như cp1252), nhưng mã hóa có TẤT CẢ các ký tự được xác định (như cp437):

file = open(filename, encoding='cp437')

Codepage 437 là mã hóa DOS gốc. Tất cả các mã được xác định, do đó không có lỗi trong khi đọc tệp, không có lỗi được che dấu, các ký tự được giữ nguyên (không còn nguyên vẹn nhưng vẫn có thể phân biệt được).

Đối với những người làm việc trong Anaconda trong Windows, tôi cũng gặp vấn đề tương tự. Notepad ++ giúp tôi giải quyết nó.

Mở tệp trong Notepad ++. Ở dưới cùng bên phải, nó sẽ cho bạn biết mã hóa tập tin hiện tại. Trong menu trên cùng, bên cạnh "Xem" định vị "Mã hóa". Trong "Mã hóa", hãy chuyển đến "bộ ký tự" và ở đó với sự kiên nhẫn tìm kiếm sự bao bọc mà bạn cần. Trong trường hợp của tôi, mã hóa "Windows-1252" đã được tìm thấy trong "Tây Âu"

Ngừng lãng phí thời gian của bạn, chỉ cần thêm những điều sau đây encoding="cp437"và errors='ignore'vào mã của bạn trong cả đọc và viết:

open('filename.csv', encoding="cp437", errors='ignore')
open(file_name, 'w', newline='', encoding="cp437", errors='ignore')

Thần tốc độ

đối với tôi, việc thay đổi mã hóa ký tự Mysql giống như mã của tôi đã giúp sắp xếp giải pháp. `photo = open ('pic3.png', mã hóa = latin1), văn bản mạnh