"For line in ..." da como resultado UnicodeDecodeError: el códec 'utf-8' no puede decodificar el byte

Aquí está mi código

for line in open('u.item'):
#read each line

cada vez que ejecuto este código me da el siguiente error:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe9 in position 2892: invalid continuation byte

Intenté resolver esto y agregar un parámetro adicional en open (), el código se ve así;

for line in open('u.item', encoding='utf-8'):
#read each line

Pero nuevamente da el mismo error. ¡que debería hacer entonces! Por favor ayuda.

Como sugirió Mark Ransom, encontré la codificación correcta para ese problema. La codificación era "ISO-8859-1", por lo que reemplazar open("u.item", encoding="utf-8")con open('u.item', encoding = "ISO-8859-1")va a resolver el problema.

También funcionó para mí, ISO 8859-1 va a ahorrar mucho, jajaja, principalmente si se usan las API de reconocimiento de voz

Ejemplo:

file = open('../Resources/' + filename, 'r', encoding="ISO-8859-1");

Su archivo en realidad no contiene datos codificados utf-8, contiene alguna otra codificación. Averigua cuál es esa codificación y úsala en la openllamada.

En Windows-1252, por ejemplo, la codificación 0xe9sería el carácter é.

Prueba esto para leer usando pandas

pd.read_csv('u.item', sep='|', names=m_cols , encoding='latin-1')

Si está utilizando Python 2lo siguiente será la solución:

import io
for line in io.open("u.item", encoding="ISO-8859-1"):
    # do something

Como el encodingparámetro no funciona open(), recibirá el siguiente error:

TypeError: 'codificación' es un argumento de palabra clave no válido para esta función

Podrías resolver el problema con:

for line in open(your_file_path, 'rb'):

'rb' está leyendo el archivo en modo binario. Lee más aquí . Espero que esto ayude!

Esto funciona:

open('filename', encoding='latin-1')

o:

open('filename',encoding="IS0-8859-1")

Si alguien busca estos, este es un ejemplo para convertir un archivo CSV en Python 3:

try:
    inputReader = csv.reader(open(argv[1], encoding='ISO-8859-1'), delimiter=',',quotechar='"')
except IOError:
    pass

A veces, cuando open(filepath)en filepathrealidad no hay un archivo, se obtiene el mismo error, así que primero asegúrate de que el archivo que intentas abrir existe:

import os
assert os.path.isfile(filepath)

Espero que esto ayude.

puedes intentarlo de esta manera:

open('u.item', encoding='utf8', errors='ignore')