UnicodeDecodeError durante la lettura del file CSV in Pandas con Python

| | | | | | | | | | | | | |

Sto eseguendo un programma che sta elaborando 30.000 file simili. Un numero casuale di essi si interrompe e produce questo errore...

File "C:Importersrcdfmanimporter.py", riga 26, in import_chr data = pd.read_csv(filepath, names=fields) File "C:Python33libsite-packagespandasioparsers.py", riga 400, in parser_f return _read(filepath_or_buffer, kwds) File "C:Python33libsite-packagespandasioparsers. py", riga 205, in _read return parser.read() File "C:Python33libsite-packagespandasioparsers.py", riga 608, in read ret = self._engine.read(nrows) File "C:Python33libsite-packagespandasioparsers. py", riga 1028, in read data = self._reader.read(nrows) File "parser.pyx", riga 706, in pandas.parser.TextReader.read (pandasparser.c:6745) File "parser.pyx" ;, riga 728, in pandas.parser.TextReader._read_low_memory (pandasparser.c:6964) File "parser.pyx", riga 804, in pandas.parser.TextReader._read_rows (pandasp arser.c:7780) File "parser.pyx", riga 890, in pandas.parser.TextReader._convert_column_data (pandasparser.c:8793) File "parser.pyx", riga 950, in pandas.parser.TextReader. _convert_tokens (pandasparser.c:9484) File "parser.pyx", riga 1026, in pandas.parser.TextReader._convert_with_dtype (pandasparser.c:10642) File "parser.pyx", riga 1046, in pandas.parser. TextReader._string_convert (pandasparser.c:10853) File "parser.pyx", riga 1278, in pandas.parser._string_box_utf8 (pandasparser.c:15657) UnicodeDecodeError: il codec "utf-8" non può decodificare il byte 0xda in posizione 6: byte di continuazione non valido 

L'origine/creazione di questi file provengono tutti dalla stessa posizione. Qual è il modo migliore per correggere questo problema per procedere con l'importazione?