следующий код работал до сегодняшнего дня, когда я импортировал с компьютера Windows и получил эту ошибку:
символ новой строки, видимый в некотируемом поле - вам нужно открыть файл в режиме универсальной-новой строки?
import csv
class CSV:
def __init__(self, file=None):
self.file = file
def read_file(self):
data = []
file_read = csv.reader(self.file)
for row in file_read:
data.append(row)
return data
def get_row_count(self):
return len(self.read_file())
def get_column_count(self):
new_data = self.read_file()
return len(new_data[0])
def get_data(self, rows=1):
data = self.read_file()
return data[:rows]
Как я могу исправить эту проблему?
def upload_configurator(request, id=None):
"""
A view that allows the user to configurator the uploaded CSV.
"""
upload = Upload.objects.get(id=id)
csvobject = CSV(upload.filepath)
upload.num_records = csvobject.get_row_count()
upload.num_columns = csvobject.get_column_count()
upload.save()
form = ConfiguratorForm()
row_count = csvobject.get_row_count()
colum_count = csvobject.get_column_count()
first_row = csvobject.get_data(rows=1)
first_two_rows = csvobject.get_data(rows=5)
Будет хорошо видеть сам файл csv, но это может сработать для вас, попробуйте, замените:
file_read = csv.reader(self.file)
с:
file_read = csv.reader(self.file, dialect=csv.excel_tab)
Или, откройте файл с помощью universal newline mode
и передайте его на csv.reader
, например:
reader = csv.reader(open(self.file, 'rU'), dialect=csv.excel_tab)
Или используйте splitlines()
, например:
def read_file(self):
with open(self.file, 'r') as f:
data = [row for row in csv.reader(f.read().splitlines())]
return data
Я понимаю, что это старый пост, но я столкнулся с той же проблемой и не вижу правильного ответа, поэтому попробую
Ошибка Python:
_csv.Error: new-line character seen in unquoted field
Вызывается попыткой чтения файлов CSV Macintosh (предварительно отформатированных в OS X). Это текстовые файлы, которые используют CR для конца строки. Если вы используете MS Office, убедитесь, что вы выбрали простой формат CSV или CSV (MS-DOS). Не используйте CSV (Macintosh) как тип сохранения.
Моя предпочтительная версия EOL будет LF (Unix/Linux/Apple), но я не думаю, что MS Office предоставляет возможность сохранять в этом формате.
Для Mac OS X сохраните CSV файл в формате "Windows Comma Separated (.csv)".
Если это произойдет с вами на mac (как это было со мной):
CSV (MS-DOS Comma-Separated)
Запустите следующий script
with open(csv_filename, 'rU') as csvfile:
csvreader = csv.reader(csvfile)
for row in csvreader:
print ', '.join(row)
Попробуйте запустить dos2unix
в ваших первых файлах с файлами Windows
\x0d
(ProDOS) на окончания строк \x0a
(UNIX).
Это ошибка, с которой я столкнулся. Я сохранил CSV файл в MAC OSX.
Во время сохранения сохраните его как "Разделимые значения Windows (CSV)", которые разрешили проблему.
Это работало для меня на OSX.
# allow variable to opened as files
from io import StringIO
# library to map other strange (accented) characters back into UTF-8
from unidecode import unidecode
# cleanse input file with Windows formating to plain UTF-8 string
with open(filename, 'rb') as fID:
uncleansedBytes = fID.read()
# decode the file using the correct encoding scheme
# (probably this old windows one)
uncleansedText = uncleansedBytes.decode('Windows-1252')
# replace carriage-returns with new-lines
cleansedText = uncleansedText.replace('\r', '\n')
# map any other non UTF-8 characters into UTF-8
asciiText = unidecode(cleansedText)
# read each line of the csv file and store as an array of dicts,
# use first line as field names for each dict.
reader = csv.DictReader(StringIO(cleansedText))
for line_entry in reader:
# do something with your read data
Я знаю, что на это ответили довольно долгое время, но не решили мою проблему. Я использую DictReader и StringIO для чтения csv из-за некоторых других осложнений. Я смог решить проблему проще, просто заменив разделители:
with urllib.request.urlopen(q) as response:
raw_data = response.read()
encoding = response.info().get_content_charset('utf8')
data = raw_data.decode(encoding)
if '\r\n' not in data:
# proably a windows delimited thing...try to update it
data = data.replace('\r', '\r\n')
Не может быть разумным для огромных файлов CSV, но хорошо работал для моего использования.