UnicodeDecodeError: kodek 'UTF-8' nie może zdekodować bajt

Question

Tu jest mój kod,

for line in open('u.item'): 
#read each line 

ilekroć ten kod to daje następujący błąd:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe9 in position 2892: invalid continuation byte 

starałem się rozwiązać to i dodać dodatkowy parametr w open(), kod wygląda jak;

for line in open('u.item', encoding='utf-8'): 
#read each line 

Ale znowu daje ten sam błąd. co powinienem zrobić! Proszę pomóż.

Answer 1

Zgodnie z sugestią Marka Ransoma, znalazłem odpowiednie kodowanie dla tego problemu. Kodowanie było "ISO-8859-1", więc zastąpienie open("u.item", encoding="utf-8") z open('u.item', encoding = "ISO-8859-1") rozwiąże problem.

Answer 2

Twój plik nie zawiera faktycznie zakodowanych danych utf-8, zawiera inne kodowanie. Dowiedz się, co to jest kodowanie i użyj go w wywołaniu open.

W kodowaniu Windows-1252 na przykład 0xe9 będzie oznaczać é.

Answer 3

Jeśli ktoś szuka dla nich jest to przykład do konwersji pliku CSV w Pythonie 3:

try: 
    inputReader = csv.reader(open(argv[1], encoding='ISO-8859-1'), delimiter=',',quotechar='"') 
except IOError: 
    pass 

Answer 4

Spróbuj tego czytać używając pandy

pd.read_csv('u.item', sep='|', names=m_cols , encoding='latin-1') 

Answer 5

Jeśli używasz Python 2 następujące będzie rozwiązanie:

import io 
for line in io.open("u.item", encoding="ISO-8859-1"): 
    # do something 

Ponieważ encoding parametr d oesn't pracy z open(), będzie coraz następujący błąd:

 
TypeError: 'encoding' is an invalid keyword argument for this function 

Answer 6

pracował również dla mnie, ISO 8859-1 zamierza zaoszczędzić dużo, hahaha, głównie w przypadku korzystania z rozpoznawania mowy API

Przykład:

file = open('../Resources/' + filename, 'r', encoding="ISO-8859-1"); 

Answer 7

najprostszych wszystkie roztwory:

Use Pandas to read file, its very simple:

import pandas as pd 
data = pd.read_csv('file_name.csv', encoding='utf-8')