什么是读取远程文件的最佳方法?我想获取整个文件(而不是块)。
我从以下示例开始。
var get = http.get(options).on('response', function (response) {
response.on('data', function (chunk) {
console.log('BODY: ' + chunk);
});
});
我想将文件解析为CSV格式,但为此我需要的是整个文件而不是分块数据。
什么是读取远程文件的最佳方法?我想获取整个文件(而不是块)。
我从以下示例开始。
var get = http.get(options).on('response', function (response) {
response.on('data', function (chunk) {
console.log('BODY: ' + chunk);
});
});
我想将文件解析为CSV格式,但为此我需要的是整个文件而不是分块数据。
我会使用request来完成这个任务:
request('http://google.com/doodle.png').pipe(fs.createWriteStream('doodle.png'))
或者如果您不需要先保存到文件,而是只需要将CSV读入内存中,可以按照以下方式操作:
var request = require('request');
request.get('http://www.whatever.com/my.csv', function (error, response, body) {
if (!error && response.statusCode == 200) {
var csv = body;
// Continue with your processing here.
}
});
等等。
你可以像这样做,而不使用任何外部库。
const fs = require("fs");
const https = require("https");
const file = fs.createWriteStream("data.txt");
https.get("https://www.w3.org/TR/PNG/iso_8859-1.txt", response => {
var stream = response.pipe(file);
stream.on("finish", function() {
console.log("done");
});
});
http.get(options).on('response', function (response) {
var body = '';
var i = 0;
response.on('data', function (chunk) {
i++;
body += chunk;
console.log('BODY Part: ' + i);
});
response.on('end', function () {
console.log(body);
console.log('Finished');
});
});
对于这个已经运行的程序进行了更改,有什么意见吗?
function(url,callback){
request(url).on('data',(data) => {
try{
var json = JSON.parse(data);
}
catch(error){
callback("");
}
callback(json);
})
}
你也可以使用这个。这是用于异步流程的。当响应不是JSON格式时会出现错误,还有404状态码。
package.json
,保持这些模块更新很容易,而且它们通常都非常快速。 - Camilo Martin