Чтение больших двоичных файлов в C ++ (Windows)

Question

Чтение больших двоичных файлов в C ++ (Windows)

0

У меня проблема с чтением больших файлов в Windows. Обычно в linux, когда я читал двоичный файл в первый раз, потребовалось 3-4 минуты, чтобы прочитать файл, но в следующих прогонах он читает файл менее чем за 30 секунд, потому что файл находится в памяти, и это не требуется для чтения всего файла, но в окнах, каждый раз, когда он занимает 3-4 минуты, поскольку он всегда пытается прочитать весь файл.

Кто-нибудь знает какие-либо методы кэширования файла в памяти в окнах, чтобы уменьшить время чтения?

большое спасибо

mmostajab 13 нояб. 2014, в 13:47

Источник

0

Насколько велик ваш файл?
deviantfan 13 нояб. 2014, в 12:37
0

Почему вам нужно прочитать один и тот же файл несколько раз? (Но вы можете посмотреть на отображение памяти .)
usr2564301 13 нояб. 2014, в 12:42
0

Windows должна автоматически кэшировать файл.
dandan78 13 нояб. 2014, в 12:44
0

Файл составляет около 6 ГБ. Потому что я отлаживаю код, и результат зависит от этого набора данных. Итак, я хочу использовать этот файл во время отладки.
mmostajab 13 нояб. 2014, в 12:46
0

@Mortezamostajab Вы уверены, что ваш код на самом деле читает все каждый раз? Неопределенное поведение (или просто любой неправильный код) также может быть причиной ...
deviantfan 13 нояб. 2014, в 13:10
0

@deviantfan да! Я уверен. просто я использую std::ifstream in(filename.c_str(), std::ios_base::binary); и затем используйте in.read((char*)(&m_cellBoxes[0]), sizeof(AABB)*cellBoxesNumber); читать данные. Я использую точно такой же код в Linux, в первый раз они оба заняли одинаковое количество времени, но во второй раз Linux действительно быстрее, чем Windows.
mmostajab 13 нояб. 2014, в 13:21

Показать ещё 4 комментария

Теги:

c++

memory-management

iostream

1 ответ

Ещё вопросы

Почему вам нужно прочитать один и тот же файл несколько раз? (Но вы можете посмотреть на отображение памяти .)
Windows должна автоматически кэшировать файл.
Файл составляет около 6 ГБ. Потому что я отлаживаю код, и результат зависит от этого набора данных. Итак, я хочу использовать этот файл во время отладки.
@Mortezamostajab Вы уверены, что ваш код на самом деле читает все каждый раз? Неопределенное поведение (или просто любой неправильный код) также может быть причиной ...
@deviantfan да! Я уверен. просто я использую std::ifstream in(filename.c_str(), std::ios_base::binary); и затем используйте in.read((char*)(&m_cellBoxes[0]), sizeof(AABB)*cellBoxesNumber); читать данные. Я использую точно такой же код в Linux, в первый раз они оба заняли одинаковое количество времени, но во второй раз Linux действительно быстрее, чем Windows.

user3344003 · Accepted Answer · 2014-11-14T01-54-00.000Z

Самый быстрый способ чтения большого двоичного файла в большинстве систем - использовать файл с отображением памяти. Исходный файл служит в качестве собственного файла страницы.

Видеть

  CreateFileMapping

на Windoze.