Хранит ли HDFS неразборные файлы в одном узле данных?
1
Для нерасщепляемых файлов, таких как GZIP будет только одно задание карты, потому что файлы GZIP не могут быть разделены. Есть ли какой-либо вариант или оптимизация для хранения всех блоков таких файлов в одном узле данных, чтобы мы могли хотя бы экономить пропускную способность сети?
1 ответ
2
Лучший ответ
Увеличение размера блока HDFS для вашего файла gzip, превышающего размер файла, должно сделать трюк. Для получения дополнительной информации о настройке размера блока HDFS для файла см. Этот ответ
markob
Поделиться
Ещё вопросы
- 0Скрыть элементы при щелчке вне запускающего элемента
- 1данные с функцией return против возврата простого объекта данных
- 0Как отправить данные Multipart и объект json из ajax в spring
- 1Удаление белой внутренней границы из выпадающего списка
- 0boost :: mutex поддерживает try_lock_for в Visual Studio, но не в Xcode
- 0MySQL PDO, как связать параметры для IN ()
- 0Как избежать ввода тегов шириной 100%
- 0Перезагрузить таблицу без обновления всей страницы в php
- 1Укажите имя БД / схемы Oracle в tomcat context.xml
- 0mysql: использование динамического поля в запросе на совпадение
- 1WPF Получить выбранную строку на сетке данных из шаблона
- 0Как установить значения в текстовых полях
- 0HTML действие превращает пробелы в плюсы
- 0Вложенные элементы div не расположены должным образом
- 0Div точная высота как высота окна
- 1Ошибка входа в GooglePlayServices для игры Unity
- 0Облачный сервер базы данных и физическая база данных
- 1Передача аргументов во фрагменте
- 0Обновить / реинициализировать домашнюю страницу - Angular JS
- 1Может ли использование обнуляемых структур улучшить производительность?
- 1Додзе, как продлить класс диджит?
- 0PHP - Как добавить переменную в тело письма
- 0использовать mysql для диагностики в другой процедуре
- 0Показать результаты SQL-запроса на основе количества
- 1Редактировать изображения в файле PDF с помощью объекта COSStream
- 0Как я могу обновить несколько строк MySQL?
- 0Вызов одного метода из другого
- 0Объединение информации в одной таблице и перемещение ее в другую в MySQL
- 0AngularJS щелкает ячейку на столе, которая будет перенаправлять на другую веб-страницу
- 0как сделать меню полосы прокрутки из нескольких столбцов похожим на таблицу Excel
- 0Регулярное выражение для соответствия всем между <>, которое находится в квадратных скобках
- 1C # - InstallUtil 32bit устанавливает службу, но выдает ошибку при запуске
- 1Ввод Python не работает должным образом при использовании внутри оператора if
- 0Ошибка с командой импорта Sqoop
- 1Ускорение поиска в IndexedDB с несколькими работниками
- 1Невозможно отправить HTTP-запросы по износу Bluetooth
- 1Как разбить массив байтов
- 1Как я могу получить таблицу с динамическими данными из URL, используя Selenium и xpath, или другой альтернативой?
- 0Значение php_value auto_prepend_file кэшировано
- 0c # genereic sql context patameter
- 0Mysqli Ошибка 2002: нет такого файла или каталога
- 1Подключение USB-устройств к эмулятору Android
- 0Magento получить значение атрибута выпадающего с php
- 1Передача значения со страницы в Html.ActionLink
- 0Глобальные переменные в Angular, хранящиеся в angularLocalStorage
- 0Использование MySQL REGEX для сопоставления повторяющихся номеров в телефонных номерах
- 0Динамическое изменение цвета кнопок с помощью угловых js
- 0Как я могу использовать jQuery для изменения заголовков POST по клику?
- 0Как получить доступ к информации о потоке в программе
- 1Предварительная обработка Sklearn Imputer, когда в столбце отсутствуют значения
