我需要将csv文件中的行转换为json格式。我使用了csvtojson包,它非常好用,但我的csv文件非常大,有2100万行。:(
我的node应用程序无法处理所有行。
请查看下面的代码片段。
我的node应用程序无法处理所有行。
请查看下面的代码片段。
csv({noheader:true,
delimiter:";",
workerNum: 4})
.fromFile(csvFilePath)
.on('json',(jsonObj, rowIndex)=>{
var TN = jsonObj.field1;
var cod_op = jsonObj.field2;
var msisdn = TN.toString();
//UP TO FIREBASE HERE!!!
noticia.child(msisdn).set(cod_op);
console.log(TN + ' ' + rowIndex);
})
.on('done',(error)=>{
console.log()
})