Правильный способ получения данных JSON и записи в файл с помощью Node.js

Question

Правильный способ получения данных JSON и записи в файл с помощью Node.js

1

Я новичок в Node и пытаюсь запросить некоторые данные json с сервера и сохранить в файл. Я могу получить данные без проблем, но не могу понять, как писать в файл после получения всех данных. Нужен ли мне обратный вызов или мне нужно использовать http.CreateServer()? Любая помощь с этим будет оценена по достоинству.

Это то, что у меня есть до сих пор:

"use strict";

const request = require('request');
const fs = require('fs');

var options = {
    url: 'url-to-request-data',
    method: 'GET',
    accept: 'application/json',
    json: true,} 
};

// Start the request
request(options, function(error, response, body) {
  if (error) { 
      return console.log(error); 
  } else {
        var path = "~/jsonfile.json";
        fs.writeFile(path, body);
  }
  });

ozzyzig 14 июнь 2018, в 01:32

Источник

Теги:

javascript

node.js

2 ответа

2

У вас есть несколько вопросов.

fs.writeFile принимает третий аргумент, функцию обратного вызова, где он уведомит вас о любой ошибке, которую вы получаете.

fs.writeFile(path, body, err => console.error(err));

В системах * nix с этим файловым пути вы получите сообщение об Error: ENOENT: no such file or directory

~ - расширение bash, узел не знает, что с ним делать.

использовать:

const os = require('os');
const path = require('path');

const filePath = path.join(os.homedir(), 'jsonfile.json');
fs.writeFile(path, body, err => console.error(err));

Затем вы получите [Object object] записанный в ~/jsonfile.json если этот URL-адрес возвращает json поскольку вы явно запрашиваете его.

У вас есть решения:

Удалить json: true
Или fs.writeFile(path, JSON.stringify(body), err =>/*... */)

Если вы пишете только файл, лучший способ - использовать streams

const filePath = path.join(os.homedir(), 'jsonfile.json');
request(options).pipe(fs.createWriteStream(filePath));
// See link for error handling

Вы можете больше узнать о request и потоках и о том, как обрабатывать ошибки здесь

Marcos Casagrande 13 июнь 2018, в 21:50

1

Спасибо, что json: true , я не заметил этого, пока не увидел упомянутое в вашем ответе. Я изменил это в моем соответственно.
Patrick Roberts 13 июнь 2018, в 23:24
0

Спасибо, я просто использовал ~ /, так как я не хотел писать полный путь к файлу
ozzyzig 13 июнь 2018, в 23:36
0

Вы также можете сделать path.replace('~', os.homedir())
Patrick Roberts 13 июнь 2018, в 23:40

Показать ещё 1 комментарий

Ещё вопросы

Спасибо, что json: true , я не заметил этого, пока не увидел упомянутое в вашем ответе. Я изменил это в моем соответственно.
Спасибо, я просто использовал ~ /, так как я не хотел писать полный путь к файлу
Вы также можете сделать path.replace('~', os.homedir())

Patrick Roberts · Accepted Answer · 2018-06-13T20-40-00.000Z

Данные json довольно велики, так что fs.writeFileSync - лучший способ пойти? - ozzyzig

Нет. Вы должны создать Writable Stream для больших файлов, таким образом, вы только буферизуете куски данных одновременно в памяти, а не весь файл одновременно. request() возвращает объект, реализующий интерфейс Stream, поэтому вы можете просто .pipe() его в fs.createWriteStream():

'use strict';

const request = require('request');
const fs = require('fs');

var options = {
  url: 'url-to-request-data',
  method: 'GET',
  accept: 'application/json',
  // json: true,
};
var path = '~/jsonfile.json';
var ws = fs.createWriteStream(path);

// Start the request
request(options).on('error', function (error) {
  console.log(error);
}).on('close', function () {
  console.log('Done');
}).pipe(ws);

Здорово, что работает, спасибо за это